bert_base_tcm_teste / trainer_state.json
ricardo-filho's picture
End of training
c89fc88
{
"best_metric": 0.8277333333333333,
"best_model_checkpoint": "/content/output/checkpoint-8250",
"epoch": 7.684247293049249,
"global_step": 22000,
"is_hyper_param_search": false,
"is_local_process_zero": true,
"is_world_process_zero": true,
"log_history": [
{
"epoch": 0.17,
"learning_rate": 9.965071603213413e-05,
"loss": 0.0968,
"step": 500
},
{
"epoch": 0.35,
"learning_rate": 9.930143206426825e-05,
"loss": 0.0512,
"step": 1000
},
{
"epoch": 0.52,
"learning_rate": 9.895214809640238e-05,
"loss": 0.0292,
"step": 1500
},
{
"epoch": 0.7,
"learning_rate": 9.860286412853651e-05,
"loss": 0.0379,
"step": 2000
},
{
"epoch": 0.87,
"learning_rate": 9.825358016067063e-05,
"loss": 0.0346,
"step": 2500
},
{
"epoch": 0.96,
"eval_CRITERIO_JULGAMENTO_f1": 0.7125506072874493,
"eval_CRITERIO_JULGAMENTO_number": 104,
"eval_CRITERIO_JULGAMENTO_precision": 0.6153846153846154,
"eval_CRITERIO_JULGAMENTO_recall": 0.8461538461538461,
"eval_DATA_SESSAO_f1": 0.6849315068493151,
"eval_DATA_SESSAO_number": 55,
"eval_DATA_SESSAO_precision": 0.5494505494505495,
"eval_DATA_SESSAO_recall": 0.9090909090909091,
"eval_MODALIDADE_LICITACAO_f1": 0.8866213151927438,
"eval_MODALIDADE_LICITACAO_number": 421,
"eval_MODALIDADE_LICITACAO_precision": 0.8481561822125814,
"eval_MODALIDADE_LICITACAO_recall": 0.9287410926365796,
"eval_NUMERO_EXERCICIO_f1": 0.8430913348946136,
"eval_NUMERO_EXERCICIO_number": 185,
"eval_NUMERO_EXERCICIO_precision": 0.743801652892562,
"eval_NUMERO_EXERCICIO_recall": 0.972972972972973,
"eval_OBJETO_LICITACAO_f1": 0.09026128266033254,
"eval_OBJETO_LICITACAO_number": 59,
"eval_OBJETO_LICITACAO_precision": 0.052486187845303865,
"eval_OBJETO_LICITACAO_recall": 0.3220338983050847,
"eval_VALOR_OBJETO_f1": 0.576923076923077,
"eval_VALOR_OBJETO_number": 41,
"eval_VALOR_OBJETO_precision": 0.47619047619047616,
"eval_VALOR_OBJETO_recall": 0.7317073170731707,
"eval_loss": 0.03292878717184067,
"eval_overall_accuracy": 0.9880124845103275,
"eval_overall_f1": 0.6807364167040862,
"eval_overall_precision": 0.5565345080763583,
"eval_overall_recall": 0.8763005780346821,
"eval_runtime": 18.822,
"eval_samples_per_second": 214.695,
"eval_steps_per_second": 26.883,
"step": 2750
},
{
"epoch": 1.05,
"learning_rate": 9.790429619280476e-05,
"loss": 0.0331,
"step": 3000
},
{
"epoch": 1.22,
"learning_rate": 9.755501222493889e-05,
"loss": 0.0288,
"step": 3500
},
{
"epoch": 1.4,
"learning_rate": 9.7205728257073e-05,
"loss": 0.0251,
"step": 4000
},
{
"epoch": 1.57,
"learning_rate": 9.685644428920713e-05,
"loss": 0.0228,
"step": 4500
},
{
"epoch": 1.75,
"learning_rate": 9.650716032134125e-05,
"loss": 0.0222,
"step": 5000
},
{
"epoch": 1.92,
"learning_rate": 9.615787635347539e-05,
"loss": 0.0309,
"step": 5500
},
{
"epoch": 1.92,
"eval_CRITERIO_JULGAMENTO_f1": 0.72,
"eval_CRITERIO_JULGAMENTO_number": 104,
"eval_CRITERIO_JULGAMENTO_precision": 0.6694214876033058,
"eval_CRITERIO_JULGAMENTO_recall": 0.7788461538461539,
"eval_DATA_SESSAO_f1": 0.7153284671532847,
"eval_DATA_SESSAO_number": 55,
"eval_DATA_SESSAO_precision": 0.5975609756097561,
"eval_DATA_SESSAO_recall": 0.8909090909090909,
"eval_MODALIDADE_LICITACAO_f1": 0.9359720605355064,
"eval_MODALIDADE_LICITACAO_number": 421,
"eval_MODALIDADE_LICITACAO_precision": 0.9178082191780822,
"eval_MODALIDADE_LICITACAO_recall": 0.9548693586698337,
"eval_NUMERO_EXERCICIO_f1": 0.8319999999999999,
"eval_NUMERO_EXERCICIO_number": 185,
"eval_NUMERO_EXERCICIO_precision": 0.8210526315789474,
"eval_NUMERO_EXERCICIO_recall": 0.8432432432432433,
"eval_OBJETO_LICITACAO_f1": 0.1726618705035971,
"eval_OBJETO_LICITACAO_number": 59,
"eval_OBJETO_LICITACAO_precision": 0.15,
"eval_OBJETO_LICITACAO_recall": 0.2033898305084746,
"eval_VALOR_OBJETO_f1": 0.26,
"eval_VALOR_OBJETO_number": 41,
"eval_VALOR_OBJETO_precision": 0.22033898305084745,
"eval_VALOR_OBJETO_recall": 0.3170731707317073,
"eval_loss": 0.032174717634916306,
"eval_overall_accuracy": 0.993353522368081,
"eval_overall_f1": 0.7771117166212533,
"eval_overall_precision": 0.7350515463917526,
"eval_overall_recall": 0.8242774566473988,
"eval_runtime": 19.4674,
"eval_samples_per_second": 207.578,
"eval_steps_per_second": 25.992,
"step": 5500
},
{
"epoch": 2.1,
"learning_rate": 9.580859238560951e-05,
"loss": 0.0245,
"step": 6000
},
{
"epoch": 2.27,
"learning_rate": 9.545930841774364e-05,
"loss": 0.0172,
"step": 6500
},
{
"epoch": 2.44,
"learning_rate": 9.511002444987775e-05,
"loss": 0.0233,
"step": 7000
},
{
"epoch": 2.62,
"learning_rate": 9.476074048201188e-05,
"loss": 0.0227,
"step": 7500
},
{
"epoch": 2.79,
"learning_rate": 9.4411456514146e-05,
"loss": 0.0179,
"step": 8000
},
{
"epoch": 2.88,
"eval_CRITERIO_JULGAMENTO_f1": 0.7982832618025751,
"eval_CRITERIO_JULGAMENTO_number": 104,
"eval_CRITERIO_JULGAMENTO_precision": 0.7209302325581395,
"eval_CRITERIO_JULGAMENTO_recall": 0.8942307692307693,
"eval_DATA_SESSAO_f1": 0.7286821705426355,
"eval_DATA_SESSAO_number": 55,
"eval_DATA_SESSAO_precision": 0.6351351351351351,
"eval_DATA_SESSAO_recall": 0.8545454545454545,
"eval_MODALIDADE_LICITACAO_f1": 0.9406286379511059,
"eval_MODALIDADE_LICITACAO_number": 421,
"eval_MODALIDADE_LICITACAO_precision": 0.9223744292237442,
"eval_MODALIDADE_LICITACAO_recall": 0.9596199524940617,
"eval_NUMERO_EXERCICIO_f1": 0.9105263157894737,
"eval_NUMERO_EXERCICIO_number": 185,
"eval_NUMERO_EXERCICIO_precision": 0.8871794871794871,
"eval_NUMERO_EXERCICIO_recall": 0.9351351351351351,
"eval_OBJETO_LICITACAO_f1": 0.3103448275862069,
"eval_OBJETO_LICITACAO_number": 59,
"eval_OBJETO_LICITACAO_precision": 0.23478260869565218,
"eval_OBJETO_LICITACAO_recall": 0.4576271186440678,
"eval_VALOR_OBJETO_f1": 0.64,
"eval_VALOR_OBJETO_number": 41,
"eval_VALOR_OBJETO_precision": 0.5423728813559322,
"eval_VALOR_OBJETO_recall": 0.7804878048780488,
"eval_loss": 0.01916242018342018,
"eval_overall_accuracy": 0.9948047472946915,
"eval_overall_f1": 0.8277333333333333,
"eval_overall_precision": 0.7683168316831683,
"eval_overall_recall": 0.8971098265895954,
"eval_runtime": 18.7027,
"eval_samples_per_second": 216.065,
"eval_steps_per_second": 27.055,
"step": 8250
},
{
"epoch": 2.97,
"learning_rate": 9.406217254628013e-05,
"loss": 0.0172,
"step": 8500
},
{
"epoch": 3.14,
"learning_rate": 9.371288857841426e-05,
"loss": 0.0137,
"step": 9000
},
{
"epoch": 3.32,
"learning_rate": 9.336360461054839e-05,
"loss": 0.016,
"step": 9500
},
{
"epoch": 3.49,
"learning_rate": 9.30143206426825e-05,
"loss": 0.0201,
"step": 10000
},
{
"epoch": 3.67,
"learning_rate": 9.266503667481663e-05,
"loss": 0.0185,
"step": 10500
},
{
"epoch": 3.84,
"learning_rate": 9.231575270695075e-05,
"loss": 0.0174,
"step": 11000
},
{
"epoch": 3.84,
"eval_CRITERIO_JULGAMENTO_f1": 0.7834101382488479,
"eval_CRITERIO_JULGAMENTO_number": 104,
"eval_CRITERIO_JULGAMENTO_precision": 0.7522123893805309,
"eval_CRITERIO_JULGAMENTO_recall": 0.8173076923076923,
"eval_DATA_SESSAO_f1": 0.5688073394495413,
"eval_DATA_SESSAO_number": 55,
"eval_DATA_SESSAO_precision": 0.5740740740740741,
"eval_DATA_SESSAO_recall": 0.5636363636363636,
"eval_MODALIDADE_LICITACAO_f1": 0.9147465437788018,
"eval_MODALIDADE_LICITACAO_number": 421,
"eval_MODALIDADE_LICITACAO_precision": 0.8881431767337807,
"eval_MODALIDADE_LICITACAO_recall": 0.9429928741092637,
"eval_NUMERO_EXERCICIO_f1": 0.8647214854111406,
"eval_NUMERO_EXERCICIO_number": 185,
"eval_NUMERO_EXERCICIO_precision": 0.8489583333333334,
"eval_NUMERO_EXERCICIO_recall": 0.8810810810810811,
"eval_OBJETO_LICITACAO_f1": 0.2773722627737226,
"eval_OBJETO_LICITACAO_number": 59,
"eval_OBJETO_LICITACAO_precision": 0.24358974358974358,
"eval_OBJETO_LICITACAO_recall": 0.3220338983050847,
"eval_VALOR_OBJETO_f1": 0.6105263157894738,
"eval_VALOR_OBJETO_number": 41,
"eval_VALOR_OBJETO_precision": 0.5370370370370371,
"eval_VALOR_OBJETO_recall": 0.7073170731707317,
"eval_loss": 0.03195340186357498,
"eval_overall_accuracy": 0.9945595631746705,
"eval_overall_f1": 0.8031059345535221,
"eval_overall_precision": 0.7718550106609808,
"eval_overall_recall": 0.8369942196531792,
"eval_runtime": 18.7282,
"eval_samples_per_second": 215.771,
"eval_steps_per_second": 27.018,
"step": 11000
},
{
"epoch": 4.02,
"learning_rate": 9.196646873908488e-05,
"loss": 0.0177,
"step": 11500
},
{
"epoch": 4.19,
"learning_rate": 9.1617184771219e-05,
"loss": 0.0114,
"step": 12000
},
{
"epoch": 4.37,
"learning_rate": 9.126790080335314e-05,
"loss": 0.0162,
"step": 12500
},
{
"epoch": 4.54,
"learning_rate": 9.091861683548726e-05,
"loss": 0.0165,
"step": 13000
},
{
"epoch": 4.72,
"learning_rate": 9.056933286762139e-05,
"loss": 0.0192,
"step": 13500
},
{
"epoch": 4.8,
"eval_CRITERIO_JULGAMENTO_f1": 0.7467811158798284,
"eval_CRITERIO_JULGAMENTO_number": 104,
"eval_CRITERIO_JULGAMENTO_precision": 0.6744186046511628,
"eval_CRITERIO_JULGAMENTO_recall": 0.8365384615384616,
"eval_DATA_SESSAO_f1": 0.6610169491525425,
"eval_DATA_SESSAO_number": 55,
"eval_DATA_SESSAO_precision": 0.6190476190476191,
"eval_DATA_SESSAO_recall": 0.7090909090909091,
"eval_MODALIDADE_LICITACAO_f1": 0.9297423887587821,
"eval_MODALIDADE_LICITACAO_number": 421,
"eval_MODALIDADE_LICITACAO_precision": 0.9168591224018475,
"eval_MODALIDADE_LICITACAO_recall": 0.9429928741092637,
"eval_NUMERO_EXERCICIO_f1": 0.8471849865951742,
"eval_NUMERO_EXERCICIO_number": 185,
"eval_NUMERO_EXERCICIO_precision": 0.8404255319148937,
"eval_NUMERO_EXERCICIO_recall": 0.8540540540540541,
"eval_OBJETO_LICITACAO_f1": 0.2608695652173913,
"eval_OBJETO_LICITACAO_number": 59,
"eval_OBJETO_LICITACAO_precision": 0.20588235294117646,
"eval_OBJETO_LICITACAO_recall": 0.3559322033898305,
"eval_VALOR_OBJETO_f1": 0.5918367346938775,
"eval_VALOR_OBJETO_number": 41,
"eval_VALOR_OBJETO_precision": 0.5087719298245614,
"eval_VALOR_OBJETO_recall": 0.7073170731707317,
"eval_loss": 0.026105038821697235,
"eval_overall_accuracy": 0.9949173994579443,
"eval_overall_f1": 0.7958628198149156,
"eval_overall_precision": 0.7520576131687243,
"eval_overall_recall": 0.8450867052023121,
"eval_runtime": 18.7642,
"eval_samples_per_second": 215.357,
"eval_steps_per_second": 26.966,
"step": 13750
},
{
"epoch": 4.89,
"learning_rate": 9.02200488997555e-05,
"loss": 0.0144,
"step": 14000
},
{
"epoch": 5.06,
"learning_rate": 8.987076493188963e-05,
"loss": 0.0099,
"step": 14500
},
{
"epoch": 5.24,
"learning_rate": 8.952148096402375e-05,
"loss": 0.012,
"step": 15000
},
{
"epoch": 5.41,
"learning_rate": 8.917219699615788e-05,
"loss": 0.0252,
"step": 15500
},
{
"epoch": 5.59,
"learning_rate": 8.882291302829201e-05,
"loss": 0.0231,
"step": 16000
},
{
"epoch": 5.76,
"learning_rate": 8.847362906042614e-05,
"loss": 0.0158,
"step": 16500
},
{
"epoch": 5.76,
"eval_CRITERIO_JULGAMENTO_f1": 0.7327586206896551,
"eval_CRITERIO_JULGAMENTO_number": 104,
"eval_CRITERIO_JULGAMENTO_precision": 0.6640625,
"eval_CRITERIO_JULGAMENTO_recall": 0.8173076923076923,
"eval_DATA_SESSAO_f1": 0.6715328467153284,
"eval_DATA_SESSAO_number": 55,
"eval_DATA_SESSAO_precision": 0.5609756097560976,
"eval_DATA_SESSAO_recall": 0.8363636363636363,
"eval_MODALIDADE_LICITACAO_f1": 0.9370629370629371,
"eval_MODALIDADE_LICITACAO_number": 421,
"eval_MODALIDADE_LICITACAO_precision": 0.919908466819222,
"eval_MODALIDADE_LICITACAO_recall": 0.9548693586698337,
"eval_NUMERO_EXERCICIO_f1": 0.9336870026525199,
"eval_NUMERO_EXERCICIO_number": 185,
"eval_NUMERO_EXERCICIO_precision": 0.9166666666666666,
"eval_NUMERO_EXERCICIO_recall": 0.9513513513513514,
"eval_OBJETO_LICITACAO_f1": 0.26666666666666666,
"eval_OBJETO_LICITACAO_number": 59,
"eval_OBJETO_LICITACAO_precision": 0.19117647058823528,
"eval_OBJETO_LICITACAO_recall": 0.4406779661016949,
"eval_VALOR_OBJETO_f1": 0.5656565656565657,
"eval_VALOR_OBJETO_number": 41,
"eval_VALOR_OBJETO_precision": 0.4827586206896552,
"eval_VALOR_OBJETO_recall": 0.6829268292682927,
"eval_loss": 0.024952968582510948,
"eval_overall_accuracy": 0.9947583611098226,
"eval_overall_f1": 0.804004214963119,
"eval_overall_precision": 0.7386253630203291,
"eval_overall_recall": 0.8820809248554913,
"eval_runtime": 18.7557,
"eval_samples_per_second": 215.454,
"eval_steps_per_second": 26.978,
"step": 16500
},
{
"epoch": 5.94,
"learning_rate": 8.812434509256025e-05,
"loss": 0.0137,
"step": 17000
},
{
"epoch": 6.11,
"learning_rate": 8.777506112469438e-05,
"loss": 0.0134,
"step": 17500
},
{
"epoch": 6.29,
"learning_rate": 8.74257771568285e-05,
"loss": 0.0135,
"step": 18000
},
{
"epoch": 6.46,
"learning_rate": 8.707649318896263e-05,
"loss": 0.0122,
"step": 18500
},
{
"epoch": 6.64,
"learning_rate": 8.672720922109676e-05,
"loss": 0.0126,
"step": 19000
},
{
"epoch": 6.72,
"eval_CRITERIO_JULGAMENTO_f1": 0.7280701754385965,
"eval_CRITERIO_JULGAMENTO_number": 104,
"eval_CRITERIO_JULGAMENTO_precision": 0.6693548387096774,
"eval_CRITERIO_JULGAMENTO_recall": 0.7980769230769231,
"eval_DATA_SESSAO_f1": 0.7681159420289854,
"eval_DATA_SESSAO_number": 55,
"eval_DATA_SESSAO_precision": 0.6385542168674698,
"eval_DATA_SESSAO_recall": 0.9636363636363636,
"eval_MODALIDADE_LICITACAO_f1": 0.9127972819932051,
"eval_MODALIDADE_LICITACAO_number": 421,
"eval_MODALIDADE_LICITACAO_precision": 0.8722943722943723,
"eval_MODALIDADE_LICITACAO_recall": 0.9572446555819477,
"eval_NUMERO_EXERCICIO_f1": 0.9198966408268734,
"eval_NUMERO_EXERCICIO_number": 185,
"eval_NUMERO_EXERCICIO_precision": 0.8811881188118812,
"eval_NUMERO_EXERCICIO_recall": 0.9621621621621622,
"eval_OBJETO_LICITACAO_f1": 0.3020833333333333,
"eval_OBJETO_LICITACAO_number": 59,
"eval_OBJETO_LICITACAO_precision": 0.21804511278195488,
"eval_OBJETO_LICITACAO_recall": 0.4915254237288136,
"eval_VALOR_OBJETO_f1": 0.6407766990291263,
"eval_VALOR_OBJETO_number": 41,
"eval_VALOR_OBJETO_precision": 0.532258064516129,
"eval_VALOR_OBJETO_recall": 0.8048780487804879,
"eval_loss": 0.026694389060139656,
"eval_overall_accuracy": 0.9945463099789937,
"eval_overall_f1": 0.8068358363542206,
"eval_overall_precision": 0.7307692307692307,
"eval_overall_recall": 0.900578034682081,
"eval_runtime": 18.6644,
"eval_samples_per_second": 216.509,
"eval_steps_per_second": 27.11,
"step": 19250
},
{
"epoch": 6.81,
"learning_rate": 8.637792525323089e-05,
"loss": 0.0114,
"step": 19500
},
{
"epoch": 6.99,
"learning_rate": 8.6028641285365e-05,
"loss": 0.0184,
"step": 20000
},
{
"epoch": 7.16,
"learning_rate": 8.567935731749913e-05,
"loss": 0.0094,
"step": 20500
},
{
"epoch": 7.33,
"learning_rate": 8.533007334963325e-05,
"loss": 0.0172,
"step": 21000
},
{
"epoch": 7.51,
"learning_rate": 8.498078938176738e-05,
"loss": 0.0197,
"step": 21500
},
{
"epoch": 7.68,
"learning_rate": 8.46315054139015e-05,
"loss": 0.0162,
"step": 22000
},
{
"epoch": 7.68,
"eval_CRITERIO_JULGAMENTO_f1": 0.7232142857142857,
"eval_CRITERIO_JULGAMENTO_number": 104,
"eval_CRITERIO_JULGAMENTO_precision": 0.675,
"eval_CRITERIO_JULGAMENTO_recall": 0.7788461538461539,
"eval_DATA_SESSAO_f1": 0.6481481481481481,
"eval_DATA_SESSAO_number": 55,
"eval_DATA_SESSAO_precision": 0.660377358490566,
"eval_DATA_SESSAO_recall": 0.6363636363636364,
"eval_MODALIDADE_LICITACAO_f1": 0.9403508771929824,
"eval_MODALIDADE_LICITACAO_number": 421,
"eval_MODALIDADE_LICITACAO_precision": 0.9262672811059908,
"eval_MODALIDADE_LICITACAO_recall": 0.9548693586698337,
"eval_NUMERO_EXERCICIO_f1": 0.8825065274151437,
"eval_NUMERO_EXERCICIO_number": 185,
"eval_NUMERO_EXERCICIO_precision": 0.8535353535353535,
"eval_NUMERO_EXERCICIO_recall": 0.9135135135135135,
"eval_OBJETO_LICITACAO_f1": 0.2916666666666667,
"eval_OBJETO_LICITACAO_number": 59,
"eval_OBJETO_LICITACAO_precision": 0.24705882352941178,
"eval_OBJETO_LICITACAO_recall": 0.3559322033898305,
"eval_VALOR_OBJETO_f1": 0.5833333333333334,
"eval_VALOR_OBJETO_number": 41,
"eval_VALOR_OBJETO_precision": 0.509090909090909,
"eval_VALOR_OBJETO_recall": 0.6829268292682927,
"eval_loss": 0.03276298940181732,
"eval_overall_accuracy": 0.9947517345119842,
"eval_overall_f1": 0.8132596685082872,
"eval_overall_precision": 0.7788359788359789,
"eval_overall_recall": 0.8508670520231214,
"eval_runtime": 18.8669,
"eval_samples_per_second": 214.185,
"eval_steps_per_second": 26.82,
"step": 22000
},
{
"epoch": 7.68,
"step": 22000,
"total_flos": 9463686759638664.0,
"train_loss": 0.021822236212817106,
"train_runtime": 2713.3557,
"train_samples_per_second": 421.968,
"train_steps_per_second": 52.758
}
],
"max_steps": 143150,
"num_train_epochs": 50,
"total_flos": 9463686759638664.0,
"trial_name": null,
"trial_params": null
}