End of training

README.md

@@ -0,0 +1,92 @@
+---
+license: llama3.2
+base_model: meta-llama/Llama-3.2-1B
+tags:
+- generated_from_trainer
+model-index:
+- name: roberta-large-ner-ghtk-ai-fluent-21-label-new-data-3090-2Oct-1
+  results: []
+---
+
+<!-- This model card has been generated automatically according to the information the Trainer had access to. You
+should probably proofread and complete it, then remove this comment. -->
+
+# roberta-large-ner-ghtk-ai-fluent-21-label-new-data-3090-2Oct-1
+
+This model is a fine-tuned version of [meta-llama/Llama-3.2-1B](https://huggingface.co/meta-llama/Llama-3.2-1B) on the None dataset.
+It achieves the following results on the evaluation set:
+- Loss: 0.7038
+- Ho: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}
+- Hoảng thời gian: {'precision': 1.0, 'recall': 0.3333333333333333, 'f1': 0.5, 'number': 3}
+- Háng trừu tượng: {'precision': 0.5, 'recall': 0.3333333333333333, 'f1': 0.4, 'number': 6}
+- Hông tin ctt: {'precision': 0.2857142857142857, 'recall': 0.4, 'f1': 0.3333333333333333, 'number': 5}
+- Hụ cấp: {'precision': 0.2222222222222222, 'recall': 0.2, 'f1': 0.2105263157894737, 'number': 10}
+- Hứ: {'precision': 0.25, 'recall': 0.3333333333333333, 'f1': 0.28571428571428575, 'number': 9}
+- Iấy tờ: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}
+- Iền cụ thể: {'precision': 0.17857142857142858, 'recall': 0.16129032258064516, 'f1': 0.1694915254237288, 'number': 31}
+- Iền trừu tượng: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 5}
+- Ã số thuế: {'precision': 1.0, 'recall': 1.0, 'f1': 1.0, 'number': 2}
+- Ã đơn: {'precision': 0.1935483870967742, 'recall': 0.2727272727272727, 'f1': 0.22641509433962262, 'number': 22}
+- Ình thức làm việc: {'precision': 0.1, 'recall': 0.5, 'f1': 0.16666666666666669, 'number': 2}
+- Ông: {'precision': 0.7551020408163265, 'recall': 0.6851851851851852, 'f1': 0.7184466019417475, 'number': 54}
+- Ương: {'precision': 0.15789473684210525, 'recall': 0.1875, 'f1': 0.17142857142857143, 'number': 16}
+- Ị trí: {'precision': 0.3235294117647059, 'recall': 0.5, 'f1': 0.3928571428571429, 'number': 22}
+- Ố công: {'precision': 0.7534246575342466, 'recall': 0.859375, 'f1': 0.8029197080291972, 'number': 256}
+- Ố giờ: {'precision': 0.8660714285714286, 'recall': 0.7886178861788617, 'f1': 0.825531914893617, 'number': 369}
+- Ố điểm: {'precision': 0.688, 'recall': 0.5391849529780565, 'f1': 0.6045694200351495, 'number': 319}
+- Ố đơn: {'precision': 0.4666666666666667, 'recall': 0.30434782608695654, 'f1': 0.3684210526315789, 'number': 23}
+- Ợt: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 8}
+- Ỷ lệ: {'precision': 0.3333333333333333, 'recall': 0.3333333333333333, 'f1': 0.3333333333333333, 'number': 3}
+- Overall Precision: 0.6809
+- Overall Recall: 0.6553
+- Overall F1: 0.6678
+- Overall Accuracy: 0.9110
+
+## Model description
+
+More information needed
+
+## Intended uses & limitations
+
+More information needed
+
+## Training and evaluation data
+
+More information needed
+
+## Training procedure
+
+### Training hyperparameters
+
+The following hyperparameters were used during training:
+- learning_rate: 2.5e-05
+- train_batch_size: 1
+- eval_batch_size: 1
+- seed: 42
+- optimizer: Adam with betas=(0.9,0.999) and epsilon=1e-08
+- lr_scheduler_type: linear
+- num_epochs: 10
+- mixed_precision_training: Native AMP
+
+### Training results
+
+| Training Loss | Epoch | Step  | Validation Loss | Ho                                                        | Hoảng thời gian                                                          | Háng trừu tượng                                                                                         | Hông tin ctt                                                                              | Hụ cấp                                                                                     | Hứ                                                                                                       | Iấy tờ                                                    | Iền cụ thể                                                                                                 | Iền trừu tượng                                            | Ã số thuế                                                 | Ã đơn                                                                                                       | Ình thức làm việc                                                                         | Ông                                                                                                      | Ương                                                                                           | Ị trí                                                                                                       | Ố công                                                                                           | Ố giờ                                                                                                    | Ố điểm                                                                                                   | Ố đơn                                                                                                      | Ợt                                                                                           | Ỷ lệ                                                                                                    | Overall Precision | Overall Recall | Overall F1 | Overall Accuracy |
+|:-------------:|:-----:|:-----:|:---------------:|:---------------------------------------------------------:|:------------------------------------------------------------------------:|:-------------------------------------------------------------------------------------------------------:|:-----------------------------------------------------------------------------------------:|:------------------------------------------------------------------------------------------:|:--------------------------------------------------------------------------------------------------------:|:---------------------------------------------------------:|:----------------------------------------------------------------------------------------------------------:|:---------------------------------------------------------:|:---------------------------------------------------------:|:-----------------------------------------------------------------------------------------------------------:|:-----------------------------------------------------------------------------------------:|:--------------------------------------------------------------------------------------------------------:|:----------------------------------------------------------------------------------------------:|:-----------------------------------------------------------------------------------------------------------:|:------------------------------------------------------------------------------------------------:|:--------------------------------------------------------------------------------------------------------:|:--------------------------------------------------------------------------------------------------------:|:----------------------------------------------------------------------------------------------------------:|:--------------------------------------------------------------------------------------------:|:-------------------------------------------------------------------------------------------------------:|:-----------------:|:--------------:|:----------:|:----------------:|
+| 0.4875        | 1.0   | 1170  | 0.4397          | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3} | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}                | {'precision': 0.3333333333333333, 'recall': 0.16666666666666666, 'f1': 0.2222222222222222, 'number': 6} | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 5}                                 | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 10}                                 | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 9}                                                | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1} | {'precision': 0.21951219512195122, 'recall': 0.2903225806451613, 'f1': 0.25, 'number': 31}                 | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 5} | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2} | {'precision': 0.034482758620689655, 'recall': 0.045454545454545456, 'f1': 0.0392156862745098, 'number': 22} | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}                                 | {'precision': 0.37037037037037035, 'recall': 0.5555555555555556, 'f1': 0.4444444444444445, 'number': 54} | {'precision': 0.0625, 'recall': 0.0625, 'f1': 0.0625, 'number': 16}                            | {'precision': 0.08333333333333333, 'recall': 0.045454545454545456, 'f1': 0.05882352941176471, 'number': 22} | {'precision': 0.8364779874213837, 'recall': 0.51953125, 'f1': 0.6409638554216868, 'number': 256} | {'precision': 0.8123249299719888, 'recall': 0.7859078590785907, 'f1': 0.7988980716253444, 'number': 369} | {'precision': 0.8106060606060606, 'recall': 0.335423197492163, 'f1': 0.47450110864745, 'number': 319}    | {'precision': 0.4, 'recall': 0.17391304347826086, 'f1': 0.24242424242424243, 'number': 23}                 | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 8}                                    | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}                                               | 0.6780            | 0.4936         | 0.5713     | 0.8880           |
+| 0.3441        | 2.0   | 2340  | 0.3126          | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3} | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}                | {'precision': 1.0, 'recall': 0.3333333333333333, 'f1': 0.5, 'number': 6}                                | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 5}                                 | {'precision': 0.18181818181818182, 'recall': 0.2, 'f1': 0.1904761904761905, 'number': 10}  | {'precision': 0.07407407407407407, 'recall': 0.2222222222222222, 'f1': 0.1111111111111111, 'number': 9}  | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1} | {'precision': 0.1935483870967742, 'recall': 0.1935483870967742, 'f1': 0.1935483870967742, 'number': 31}    | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 5} | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2} | {'precision': 0.13095238095238096, 'recall': 0.5, 'f1': 0.20754716981132076, 'number': 22}                  | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}                                 | {'precision': 0.5217391304347826, 'recall': 0.6666666666666666, 'f1': 0.5853658536585366, 'number': 54}  | {'precision': 0.03333333333333333, 'recall': 0.0625, 'f1': 0.04347826086956522, 'number': 16}  | {'precision': 0.3, 'recall': 0.4090909090909091, 'f1': 0.34615384615384615, 'number': 22}                   | {'precision': 0.6815476190476191, 'recall': 0.89453125, 'f1': 0.7736486486486486, 'number': 256} | {'precision': 0.8136020151133502, 'recall': 0.8753387533875339, 'f1': 0.8433420365535249, 'number': 369} | {'precision': 0.7078189300411523, 'recall': 0.5391849529780565, 'f1': 0.6120996441281139, 'number': 319} | {'precision': 0.3125, 'recall': 0.43478260869565216, 'f1': 0.36363636363636365, 'number': 23}              | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 8}                                    | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}                                               | 0.6070            | 0.6869         | 0.6445     | 0.9027           |
+| 0.2345        | 3.0   | 3510  | 0.4009          | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3} | {'precision': 1.0, 'recall': 0.3333333333333333, 'f1': 0.5, 'number': 3} | {'precision': 0.6666666666666666, 'recall': 0.3333333333333333, 'f1': 0.4444444444444444, 'number': 6}  | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 5}                                 | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 10}                                 | {'precision': 0.15789473684210525, 'recall': 0.3333333333333333, 'f1': 0.21428571428571427, 'number': 9} | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1} | {'precision': 0.14285714285714285, 'recall': 0.22580645161290322, 'f1': 0.17500000000000002, 'number': 31} | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 5} | {'precision': 0.5, 'recall': 0.5, 'f1': 0.5, 'number': 2} | {'precision': 0.20930232558139536, 'recall': 0.4090909090909091, 'f1': 0.27692307692307694, 'number': 22}   | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}                                 | {'precision': 0.6065573770491803, 'recall': 0.6851851851851852, 'f1': 0.6434782608695653, 'number': 54}  | {'precision': 0.09523809523809523, 'recall': 0.125, 'f1': 0.1081081081081081, 'number': 16}    | {'precision': 0.3181818181818182, 'recall': 0.3181818181818182, 'f1': 0.3181818181818182, 'number': 22}     | {'precision': 0.6987577639751553, 'recall': 0.87890625, 'f1': 0.7785467128027682, 'number': 256} | {'precision': 0.8938356164383562, 'recall': 0.7073170731707317, 'f1': 0.7897125567322237, 'number': 369} | {'precision': 0.7093023255813954, 'recall': 0.5736677115987461, 'f1': 0.6343154246100521, 'number': 319} | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 23}                                                 | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 8}                                    | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}                                               | 0.6613            | 0.6313         | 0.6460     | 0.9077           |
+| 0.2048        | 4.0   | 4680  | 0.3251          | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3} | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}                | {'precision': 0.5, 'recall': 0.16666666666666666, 'f1': 0.25, 'number': 6}                              | {'precision': 0.3333333333333333, 'recall': 0.4, 'f1': 0.3636363636363636, 'number': 5}   | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 10}                                 | {'precision': 0.11764705882352941, 'recall': 0.2222222222222222, 'f1': 0.15384615384615383, 'number': 9} | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1} | {'precision': 0.26666666666666666, 'recall': 0.25806451612903225, 'f1': 0.26229508196721313, 'number': 31} | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 5} | {'precision': 1.0, 'recall': 1.0, 'f1': 1.0, 'number': 2} | {'precision': 0.22857142857142856, 'recall': 0.36363636363636365, 'f1': 0.2807017543859649, 'number': 22}   | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}                                 | {'precision': 0.5806451612903226, 'recall': 0.6666666666666666, 'f1': 0.6206896551724138, 'number': 54}  | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 16}                                     | {'precision': 0.23076923076923078, 'recall': 0.4090909090909091, 'f1': 0.29508196721311475, 'number': 22}   | {'precision': 0.7491525423728813, 'recall': 0.86328125, 'f1': 0.8021778584392014, 'number': 256} | {'precision': 0.8867924528301887, 'recall': 0.7642276422764228, 'f1': 0.8209606986899564, 'number': 369} | {'precision': 0.7647058823529411, 'recall': 0.4890282131661442, 'f1': 0.5965583173996176, 'number': 319} | {'precision': 0.2857142857142857, 'recall': 0.08695652173913043, 'f1': 0.13333333333333333, 'number': 23}  | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 8}                                    | {'precision': 0.5, 'recall': 0.6666666666666666, 'f1': 0.5714285714285715, 'number': 3}                 | 0.6935            | 0.6253         | 0.6577     | 0.9093           |
+| 0.1709        | 5.0   | 5850  | 0.3809          | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3} | {'precision': 1.0, 'recall': 0.3333333333333333, 'f1': 0.5, 'number': 3} | {'precision': 0.6666666666666666, 'recall': 0.3333333333333333, 'f1': 0.4444444444444444, 'number': 6}  | {'precision': 0.2857142857142857, 'recall': 0.4, 'f1': 0.3333333333333333, 'number': 5}   | {'precision': 0.4, 'recall': 0.2, 'f1': 0.26666666666666666, 'number': 10}                 | {'precision': 0.125, 'recall': 0.1111111111111111, 'f1': 0.11764705882352941, 'number': 9}               | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1} | {'precision': 0.3076923076923077, 'recall': 0.12903225806451613, 'f1': 0.18181818181818182, 'number': 31}  | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 5} | {'precision': 1.0, 'recall': 1.0, 'f1': 1.0, 'number': 2} | {'precision': 0.16279069767441862, 'recall': 0.3181818181818182, 'f1': 0.2153846153846154, 'number': 22}    | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}                                 | {'precision': 0.5901639344262295, 'recall': 0.6666666666666666, 'f1': 0.6260869565217391, 'number': 54}  | {'precision': 0.12903225806451613, 'recall': 0.25, 'f1': 0.1702127659574468, 'number': 16}     | {'precision': 0.4444444444444444, 'recall': 0.36363636363636365, 'f1': 0.39999999999999997, 'number': 22}   | {'precision': 0.7562724014336918, 'recall': 0.82421875, 'f1': 0.7887850467289721, 'number': 256} | {'precision': 0.8161209068010076, 'recall': 0.8780487804878049, 'f1': 0.8459530026109661, 'number': 369} | {'precision': 0.6911764705882353, 'recall': 0.5893416927899686, 'f1': 0.6362098138747885, 'number': 319} | {'precision': 0.43478260869565216, 'recall': 0.43478260869565216, 'f1': 0.43478260869565216, 'number': 23} | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 8}                                    | {'precision': 0.16666666666666666, 'recall': 0.3333333333333333, 'f1': 0.2222222222222222, 'number': 3} | 0.6759            | 0.6869         | 0.6814     | 0.9101           |
+| 0.1224        | 6.0   | 7020  | 0.4349          | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3} | {'precision': 1.0, 'recall': 0.3333333333333333, 'f1': 0.5, 'number': 3} | {'precision': 1.0, 'recall': 0.3333333333333333, 'f1': 0.5, 'number': 6}                                | {'precision': 0.14285714285714285, 'recall': 0.2, 'f1': 0.16666666666666666, 'number': 5} | {'precision': 0.15384615384615385, 'recall': 0.2, 'f1': 0.17391304347826086, 'number': 10} | {'precision': 0.36363636363636365, 'recall': 0.4444444444444444, 'f1': 0.39999999999999997, 'number': 9} | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1} | {'precision': 0.3, 'recall': 0.1935483870967742, 'f1': 0.23529411764705882, 'number': 31}                  | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 5} | {'precision': 1.0, 'recall': 1.0, 'f1': 1.0, 'number': 2} | {'precision': 0.3448275862068966, 'recall': 0.45454545454545453, 'f1': 0.39215686274509803, 'number': 22}   | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}                                 | {'precision': 0.7906976744186046, 'recall': 0.6296296296296297, 'f1': 0.7010309278350516, 'number': 54}  | {'precision': 0.058823529411764705, 'recall': 0.0625, 'f1': 0.06060606060606061, 'number': 16} | {'precision': 0.44, 'recall': 0.5, 'f1': 0.46808510638297873, 'number': 22}                                 | {'precision': 0.7191358024691358, 'recall': 0.91015625, 'f1': 0.803448275862069, 'number': 256}  | {'precision': 0.8793650793650793, 'recall': 0.7506775067750677, 'f1': 0.8099415204678362, 'number': 369} | {'precision': 0.7572815533980582, 'recall': 0.4890282131661442, 'f1': 0.5942857142857143, 'number': 319} | {'precision': 0.25, 'recall': 0.17391304347826086, 'f1': 0.20512820512820512, 'number': 23}                | {'precision': 0.034482758620689655, 'recall': 0.125, 'f1': 0.05405405405405405, 'number': 8} | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}                                               | 0.6956            | 0.6373         | 0.6652     | 0.9108           |
+| 0.0938        | 7.0   | 8190  | 0.5212          | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3} | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}                | {'precision': 1.0, 'recall': 0.3333333333333333, 'f1': 0.5, 'number': 6}                                | {'precision': 0.25, 'recall': 0.4, 'f1': 0.3076923076923077, 'number': 5}                 | {'precision': 0.2857142857142857, 'recall': 0.2, 'f1': 0.23529411764705882, 'number': 10}  | {'precision': 0.4, 'recall': 0.4444444444444444, 'f1': 0.4210526315789474, 'number': 9}                  | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1} | {'precision': 0.2222222222222222, 'recall': 0.12903225806451613, 'f1': 0.16326530612244897, 'number': 31}  | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 5} | {'precision': 1.0, 'recall': 1.0, 'f1': 1.0, 'number': 2} | {'precision': 0.2727272727272727, 'recall': 0.2727272727272727, 'f1': 0.2727272727272727, 'number': 22}     | {'precision': 0.1, 'recall': 0.5, 'f1': 0.16666666666666669, 'number': 2}                 | {'precision': 0.6727272727272727, 'recall': 0.6851851851851852, 'f1': 0.6788990825688074, 'number': 54}  | {'precision': 0.15384615384615385, 'recall': 0.25, 'f1': 0.1904761904761905, 'number': 16}     | {'precision': 0.2857142857142857, 'recall': 0.45454545454545453, 'f1': 0.3508771929824561, 'number': 22}    | {'precision': 0.774074074074074, 'recall': 0.81640625, 'f1': 0.7946768060836501, 'number': 256}  | {'precision': 0.8660968660968661, 'recall': 0.8238482384823849, 'f1': 0.8444444444444446, 'number': 369} | {'precision': 0.6923076923076923, 'recall': 0.5642633228840125, 'f1': 0.621761658031088, 'number': 319}  | {'precision': 0.4375, 'recall': 0.30434782608695654, 'f1': 0.358974358974359, 'number': 23}                | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 8}                                    | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}                                               | 0.6911            | 0.6621         | 0.6763     | 0.9099           |
+| 0.0665        | 8.0   | 9360  | 0.5874          | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3} | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}                | {'precision': 1.0, 'recall': 0.3333333333333333, 'f1': 0.5, 'number': 6}                                | {'precision': 0.25, 'recall': 0.4, 'f1': 0.3076923076923077, 'number': 5}                 | {'precision': 0.23076923076923078, 'recall': 0.3, 'f1': 0.2608695652173913, 'number': 10}  | {'precision': 0.3333333333333333, 'recall': 0.4444444444444444, 'f1': 0.380952380952381, 'number': 9}    | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1} | {'precision': 0.20833333333333334, 'recall': 0.16129032258064516, 'f1': 0.1818181818181818, 'number': 31}  | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 5} | {'precision': 1.0, 'recall': 1.0, 'f1': 1.0, 'number': 2} | {'precision': 0.20689655172413793, 'recall': 0.2727272727272727, 'f1': 0.23529411764705882, 'number': 22}   | {'precision': 0.08333333333333333, 'recall': 0.5, 'f1': 0.14285714285714285, 'number': 2} | {'precision': 0.782608695652174, 'recall': 0.6666666666666666, 'f1': 0.72, 'number': 54}                 | {'precision': 0.07692307692307693, 'recall': 0.125, 'f1': 0.09523809523809525, 'number': 16}   | {'precision': 0.2894736842105263, 'recall': 0.5, 'f1': 0.3666666666666667, 'number': 22}                    | {'precision': 0.7678571428571429, 'recall': 0.83984375, 'f1': 0.8022388059701493, 'number': 256} | {'precision': 0.8607242339832869, 'recall': 0.8373983739837398, 'f1': 0.8489010989010989, 'number': 369} | {'precision': 0.673992673992674, 'recall': 0.5768025078369906, 'f1': 0.6216216216216216, 'number': 319}  | {'precision': 0.5384615384615384, 'recall': 0.30434782608695654, 'f1': 0.3888888888888889, 'number': 23}   | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 8}                                    | {'precision': 0.25, 'recall': 0.3333333333333333, 'f1': 0.28571428571428575, 'number': 3}               | 0.6793            | 0.6758         | 0.6775     | 0.9119           |
+| 0.0437        | 9.0   | 10530 | 0.6443          | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3} | {'precision': 1.0, 'recall': 0.3333333333333333, 'f1': 0.5, 'number': 3} | {'precision': 0.6666666666666666, 'recall': 0.3333333333333333, 'f1': 0.4444444444444444, 'number': 6}  | {'precision': 0.2857142857142857, 'recall': 0.4, 'f1': 0.3333333333333333, 'number': 5}   | {'precision': 0.125, 'recall': 0.1, 'f1': 0.11111111111111112, 'number': 10}               | {'precision': 0.3333333333333333, 'recall': 0.4444444444444444, 'f1': 0.380952380952381, 'number': 9}    | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1} | {'precision': 0.1875, 'recall': 0.1935483870967742, 'f1': 0.19047619047619047, 'number': 31}               | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 5} | {'precision': 1.0, 'recall': 1.0, 'f1': 1.0, 'number': 2} | {'precision': 0.20689655172413793, 'recall': 0.2727272727272727, 'f1': 0.23529411764705882, 'number': 22}   | {'precision': 0.14285714285714285, 'recall': 0.5, 'f1': 0.22222222222222224, 'number': 2} | {'precision': 0.74, 'recall': 0.6851851851851852, 'f1': 0.7115384615384615, 'number': 54}                | {'precision': 0.23529411764705882, 'recall': 0.25, 'f1': 0.24242424242424243, 'number': 16}    | {'precision': 0.3235294117647059, 'recall': 0.5, 'f1': 0.3928571428571429, 'number': 22}                    | {'precision': 0.759581881533101, 'recall': 0.8515625, 'f1': 0.8029465930018416, 'number': 256}   | {'precision': 0.8678678678678678, 'recall': 0.7831978319783198, 'f1': 0.8233618233618234, 'number': 369} | {'precision': 0.698744769874477, 'recall': 0.5235109717868338, 'f1': 0.5985663082437276, 'number': 319}  | {'precision': 0.4666666666666667, 'recall': 0.30434782608695654, 'f1': 0.3684210526315789, 'number': 23}   | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 8}                                    | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}                                               | 0.6903            | 0.6484         | 0.6687     | 0.9121           |
+| 0.0301        | 10.0  | 11700 | 0.7038          | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3} | {'precision': 1.0, 'recall': 0.3333333333333333, 'f1': 0.5, 'number': 3} | {'precision': 0.5, 'recall': 0.3333333333333333, 'f1': 0.4, 'number': 6}                                | {'precision': 0.2857142857142857, 'recall': 0.4, 'f1': 0.3333333333333333, 'number': 5}   | {'precision': 0.2222222222222222, 'recall': 0.2, 'f1': 0.2105263157894737, 'number': 10}   | {'precision': 0.25, 'recall': 0.3333333333333333, 'f1': 0.28571428571428575, 'number': 9}                | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1} | {'precision': 0.17857142857142858, 'recall': 0.16129032258064516, 'f1': 0.1694915254237288, 'number': 31}  | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 5} | {'precision': 1.0, 'recall': 1.0, 'f1': 1.0, 'number': 2} | {'precision': 0.1935483870967742, 'recall': 0.2727272727272727, 'f1': 0.22641509433962262, 'number': 22}    | {'precision': 0.1, 'recall': 0.5, 'f1': 0.16666666666666669, 'number': 2}                 | {'precision': 0.7551020408163265, 'recall': 0.6851851851851852, 'f1': 0.7184466019417475, 'number': 54}  | {'precision': 0.15789473684210525, 'recall': 0.1875, 'f1': 0.17142857142857143, 'number': 16}  | {'precision': 0.3235294117647059, 'recall': 0.5, 'f1': 0.3928571428571429, 'number': 22}                    | {'precision': 0.7534246575342466, 'recall': 0.859375, 'f1': 0.8029197080291972, 'number': 256}   | {'precision': 0.8660714285714286, 'recall': 0.7886178861788617, 'f1': 0.825531914893617, 'number': 369}  | {'precision': 0.688, 'recall': 0.5391849529780565, 'f1': 0.6045694200351495, 'number': 319}              | {'precision': 0.4666666666666667, 'recall': 0.30434782608695654, 'f1': 0.3684210526315789, 'number': 23}   | {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 8}                                    | {'precision': 0.3333333333333333, 'recall': 0.3333333333333333, 'f1': 0.3333333333333333, 'number': 3}  | 0.6809            | 0.6553         | 0.6678     | 0.9110           |
+
+
+### Framework versions
+
+- Transformers 4.44.0
+- Pytorch 2.3.1+cu121
+- Datasets 2.19.1
+- Tokenizers 0.19.1