bert-large-ner-ghtk-gam-new-data-3090-29may-1

This model is a fine-tuned version of google-bert/bert-large-uncased on the None dataset. It achieves the following results on the evaluation set:

• Loss: 0.5925
• Hiều cao khách hàng: {'precision': 0.7307692307692307, 'recall': 0.8260869565217391, 'f1': 0.7755102040816326, 'number': 23}
• Hiều dài sản phẩm: {'precision': 0.36363636363636365, 'recall': 0.36363636363636365, 'f1': 0.36363636363636365, 'number': 11}
• Hiều rộng sản phẩm: {'precision': 0.42857142857142855, 'recall': 0.6, 'f1': 0.5, 'number': 5}
• Hong cách mua sắm: {'precision': 0.72, 'recall': 0.8571428571428571, 'f1': 0.782608695652174, 'number': 21}
• Hong cách nhà cửa: {'precision': 0.7, 'recall': 0.6086956521739131, 'f1': 0.6511627906976744, 'number': 23}
• Hong cách thời trang: {'precision': 0.2, 'recall': 0.2631578947368421, 'f1': 0.22727272727272727, 'number': 19}
• Hất tóc: {'precision': 0.32, 'recall': 0.2962962962962963, 'f1': 0.30769230769230765, 'number': 27}
• Hối lượng sản phẩm: {'precision': 0.8, 'recall': 0.75, 'f1': 0.7741935483870969, 'number': 16}
• Hời gian nhận hàng: {'precision': 0.6, 'recall': 0.6206896551724138, 'f1': 0.6101694915254238, 'number': 29}
• Iá sản phẩm: {'precision': 0.7916666666666666, 'recall': 0.8260869565217391, 'f1': 0.8085106382978724, 'number': 23}
• Oại da: {'precision': 0.5, 'recall': 0.5416666666666666, 'f1': 0.52, 'number': 24}
• Ung hoàng đạo: {'precision': 0.8235294117647058, 'recall': 0.7777777777777778, 'f1': 0.7999999999999999, 'number': 18}
• Ung mệnh: {'precision': 0.8, 'recall': 0.8695652173913043, 'f1': 0.8333333333333333, 'number': 23}
• Àu da: {'precision': 0.5945945945945946, 'recall': 0.5789473684210527, 'f1': 0.5866666666666667, 'number': 38}
• Àu sắc sản phẩm: {'precision': 0.5769230769230769, 'recall': 0.6976744186046512, 'f1': 0.631578947368421, 'number': 43}
• Áng khuôn mặt: {'precision': 0.6, 'recall': 0.631578947368421, 'f1': 0.6153846153846154, 'number': 19}
• Áng người: {'precision': 0.7142857142857143, 'recall': 0.8333333333333334, 'f1': 0.7692307692307692, 'number': 18}
• Ân nặng khách hàng: {'precision': 0.8055555555555556, 'recall': 0.7631578947368421, 'f1': 0.7837837837837838, 'number': 38}
• Ã sản phẩm: {'precision': 0.27586206896551724, 'recall': 0.42105263157894735, 'f1': 0.3333333333333333, 'number': 19}
• Ơn vị sản phẩm: {'precision': 0.6712328767123288, 'recall': 0.7101449275362319, 'f1': 0.6901408450704226, 'number': 69}
• Ản phẩm: {'precision': 0.7549962990377498, 'recall': 0.7974980453479281, 'f1': 0.7756653992395437, 'number': 1279}
• Ật độ tóc: {'precision': 0.75, 'recall': 0.6, 'f1': 0.6666666666666665, 'number': 20}
• Ặc điểm khác của da: {'precision': 0.6666666666666666, 'recall': 0.7, 'f1': 0.6829268292682926, 'number': 40}
• Ịa chỉ nhận hàng: {'precision': 0.21428571428571427, 'recall': 0.2727272727272727, 'f1': 0.23999999999999996, 'number': 44}
• Ố lượng sản phẩm: {'precision': 0.7333333333333333, 'recall': 0.6015625, 'f1': 0.6609442060085836, 'number': 128}
• Ộ dài tóc: {'precision': 0.6470588235294118, 'recall': 0.5789473684210527, 'f1': 0.6111111111111113, 'number': 19}
• Ộ tuổi khách hàng: {'precision': 0.8823529411764706, 'recall': 0.8333333333333334, 'f1': 0.8571428571428571, 'number': 18}
• Overall Precision: 0.7016
• Overall Recall: 0.7337
• Overall F1: 0.7173
• Overall Accuracy: 0.8896

Model description

More information needed

Intended uses & limitations

More information needed

Training and evaluation data

More information needed

Training procedure

Training hyperparameters

The following hyperparameters were used during training:

• learning_rate: 2.5e-05
• train_batch_size: 16
• eval_batch_size: 16
• seed: 42
• optimizer: Use OptimizerNames.ADAMW_TORCH with betas=(0.9,0.999) and epsilon=1e-08 and optimizer_args=No additional optimizer arguments
• lr_scheduler_type: linear
• num_epochs: 10

Training results

Training Loss	Epoch	Step	Validation Loss	Hiều cao khách hàng	Hiều dài sản phẩm	Hiều rộng sản phẩm	Hong cách mua sắm	Hong cách nhà cửa	Hong cách thời trang	Hất tóc	Hối lượng sản phẩm	Hời gian nhận hàng	Iá sản phẩm	Oại da	Ung hoàng đạo	Ung mệnh	Àu da	Àu sắc sản phẩm	Áng khuôn mặt	Áng người	Ân nặng khách hàng	à sản phẩm	Ơn vị sản phẩm	Ản phẩm	Ật độ tóc	Ặc điểm khác của da	Ịa chỉ nhận hàng	Ố lượng sản phẩm	Ộ dài tóc	Ộ tuổi khách hàng	Overall Precision	Overall Recall	Overall F1	Overall Accuracy
No log	1.0	186	0.5359	{'precision': 0.7727272727272727, 'recall': 0.7391304347826086, 'f1': 0.7555555555555555, 'number': 23}	{'precision': 0.2727272727272727, 'recall': 0.2727272727272727, 'f1': 0.2727272727272727, 'number': 11}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 5}	{'precision': 0.5416666666666666, 'recall': 0.6190476190476191, 'f1': 0.5777777777777778, 'number': 21}	{'precision': 0.45454545454545453, 'recall': 0.43478260869565216, 'f1': 0.4444444444444445, 'number': 23}	{'precision': 0.047619047619047616, 'recall': 0.10526315789473684, 'f1': 0.06557377049180328, 'number': 19}	{'precision': 0.44, 'recall': 0.4074074074074074, 'f1': 0.4230769230769231, 'number': 27}	{'precision': 0.5714285714285714, 'recall': 0.25, 'f1': 0.34782608695652173, 'number': 16}	{'precision': 0.1875, 'recall': 0.20689655172413793, 'f1': 0.19672131147540986, 'number': 29}	{'precision': 0.43243243243243246, 'recall': 0.6956521739130435, 'f1': 0.5333333333333333, 'number': 23}	{'precision': 0.3, 'recall': 0.5, 'f1': 0.37499999999999994, 'number': 24}	{'precision': 0.4, 'recall': 0.3333333333333333, 'f1': 0.3636363636363636, 'number': 18}	{'precision': 0.48148148148148145, 'recall': 0.5652173913043478, 'f1': 0.52, 'number': 23}	{'precision': 0.3333333333333333, 'recall': 0.6052631578947368, 'f1': 0.4299065420560747, 'number': 38}	{'precision': 0.125, 'recall': 0.023255813953488372, 'f1': 0.03921568627450981, 'number': 43}	{'precision': 0.5833333333333334, 'recall': 0.3684210526315789, 'f1': 0.4516129032258065, 'number': 19}	{'precision': 0.32, 'recall': 0.4444444444444444, 'f1': 0.37209302325581395, 'number': 18}	{'precision': 0.5192307692307693, 'recall': 0.7105263157894737, 'f1': 0.6, 'number': 38}	{'precision': 0.15384615384615385, 'recall': 0.10526315789473684, 'f1': 0.125, 'number': 19}	{'precision': 0.375, 'recall': 0.043478260869565216, 'f1': 0.07792207792207792, 'number': 69}	{'precision': 0.6797627872498146, 'recall': 0.7169663799843627, 'f1': 0.697869101978691, 'number': 1279}	{'precision': 0.8, 'recall': 0.4, 'f1': 0.5333333333333333, 'number': 20}	{'precision': 0.288135593220339, 'recall': 0.425, 'f1': 0.3434343434343435, 'number': 40}	{'precision': 0.04878048780487805, 'recall': 0.045454545454545456, 'f1': 0.047058823529411764, 'number': 44}	{'precision': 0.5575221238938053, 'recall': 0.4921875, 'f1': 0.5228215767634855, 'number': 128}	{'precision': 0.42857142857142855, 'recall': 0.3157894736842105, 'f1': 0.36363636363636365, 'number': 19}	{'precision': 0.7222222222222222, 'recall': 0.7222222222222222, 'f1': 0.7222222222222222, 'number': 18}	0.5776	0.5891	0.5833	0.8409
No log	2.0	372	0.4351	{'precision': 0.8076923076923077, 'recall': 0.9130434782608695, 'f1': 0.8571428571428572, 'number': 23}	{'precision': 0.25, 'recall': 0.18181818181818182, 'f1': 0.2105263157894737, 'number': 11}	{'precision': 0.16666666666666666, 'recall': 0.4, 'f1': 0.23529411764705882, 'number': 5}	{'precision': 0.7142857142857143, 'recall': 0.7142857142857143, 'f1': 0.7142857142857143, 'number': 21}	{'precision': 0.375, 'recall': 0.391304347826087, 'f1': 0.3829787234042554, 'number': 23}	{'precision': 0.08571428571428572, 'recall': 0.15789473684210525, 'f1': 0.11111111111111112, 'number': 19}	{'precision': 0.35714285714285715, 'recall': 0.37037037037037035, 'f1': 0.36363636363636365, 'number': 27}	{'precision': 0.75, 'recall': 0.75, 'f1': 0.75, 'number': 16}	{'precision': 0.5714285714285714, 'recall': 0.5517241379310345, 'f1': 0.5614035087719299, 'number': 29}	{'precision': 0.625, 'recall': 0.6521739130434783, 'f1': 0.6382978723404256, 'number': 23}	{'precision': 0.48, 'recall': 0.5, 'f1': 0.4897959183673469, 'number': 24}	{'precision': 0.5909090909090909, 'recall': 0.7222222222222222, 'f1': 0.65, 'number': 18}	{'precision': 0.7391304347826086, 'recall': 0.7391304347826086, 'f1': 0.7391304347826085, 'number': 23}	{'precision': 0.35294117647058826, 'recall': 0.47368421052631576, 'f1': 0.40449438202247195, 'number': 38}	{'precision': 0.3870967741935484, 'recall': 0.27906976744186046, 'f1': 0.32432432432432434, 'number': 43}	{'precision': 0.6111111111111112, 'recall': 0.5789473684210527, 'f1': 0.5945945945945946, 'number': 19}	{'precision': 0.5714285714285714, 'recall': 0.6666666666666666, 'f1': 0.6153846153846153, 'number': 18}	{'precision': 0.6829268292682927, 'recall': 0.7368421052631579, 'f1': 0.7088607594936709, 'number': 38}	{'precision': 0.23684210526315788, 'recall': 0.47368421052631576, 'f1': 0.3157894736842105, 'number': 19}	{'precision': 0.639344262295082, 'recall': 0.5652173913043478, 'f1': 0.6000000000000001, 'number': 69}	{'precision': 0.7543138866064092, 'recall': 0.7177482408131353, 'f1': 0.7355769230769231, 'number': 1279}	{'precision': 0.6875, 'recall': 0.55, 'f1': 0.6111111111111112, 'number': 20}	{'precision': 0.5641025641025641, 'recall': 0.55, 'f1': 0.5569620253164557, 'number': 40}	{'precision': 0.0784313725490196, 'recall': 0.09090909090909091, 'f1': 0.08421052631578947, 'number': 44}	{'precision': 0.7064220183486238, 'recall': 0.6015625, 'f1': 0.649789029535865, 'number': 128}	{'precision': 0.42857142857142855, 'recall': 0.47368421052631576, 'f1': 0.45, 'number': 19}	{'precision': 0.7647058823529411, 'recall': 0.7222222222222222, 'f1': 0.7428571428571428, 'number': 18}	0.6574	0.6475	0.6524	0.8664
0.5985	3.0	558	0.4191	{'precision': 0.65625, 'recall': 0.9130434782608695, 'f1': 0.7636363636363634, 'number': 23}	{'precision': 0.3076923076923077, 'recall': 0.36363636363636365, 'f1': 0.33333333333333337, 'number': 11}	{'precision': 0.2222222222222222, 'recall': 0.4, 'f1': 0.2857142857142857, 'number': 5}	{'precision': 0.7142857142857143, 'recall': 0.7142857142857143, 'f1': 0.7142857142857143, 'number': 21}	{'precision': 0.42857142857142855, 'recall': 0.391304347826087, 'f1': 0.4090909090909091, 'number': 23}	{'precision': 0.12121212121212122, 'recall': 0.21052631578947367, 'f1': 0.15384615384615385, 'number': 19}	{'precision': 0.25, 'recall': 0.3333333333333333, 'f1': 0.28571428571428575, 'number': 27}	{'precision': 0.7058823529411765, 'recall': 0.75, 'f1': 0.7272727272727272, 'number': 16}	{'precision': 0.42105263157894735, 'recall': 0.5517241379310345, 'f1': 0.47761194029850745, 'number': 29}	{'precision': 0.6086956521739131, 'recall': 0.6086956521739131, 'f1': 0.6086956521739131, 'number': 23}	{'precision': 0.5517241379310345, 'recall': 0.6666666666666666, 'f1': 0.6037735849056604, 'number': 24}	{'precision': 0.7142857142857143, 'recall': 0.8333333333333334, 'f1': 0.7692307692307692, 'number': 18}	{'precision': 0.8, 'recall': 0.8695652173913043, 'f1': 0.8333333333333333, 'number': 23}	{'precision': 0.4883720930232558, 'recall': 0.5526315789473685, 'f1': 0.5185185185185185, 'number': 38}	{'precision': 0.5416666666666666, 'recall': 0.6046511627906976, 'f1': 0.5714285714285714, 'number': 43}	{'precision': 0.7, 'recall': 0.7368421052631579, 'f1': 0.717948717948718, 'number': 19}	{'precision': 0.6, 'recall': 0.6666666666666666, 'f1': 0.631578947368421, 'number': 18}	{'precision': 0.8055555555555556, 'recall': 0.7631578947368421, 'f1': 0.7837837837837838, 'number': 38}	{'precision': 0.34375, 'recall': 0.5789473684210527, 'f1': 0.4313725490196078, 'number': 19}	{'precision': 0.6727272727272727, 'recall': 0.5362318840579711, 'f1': 0.5967741935483871, 'number': 69}	{'precision': 0.7650042265426881, 'recall': 0.7075840500390931, 'f1': 0.735174654752234, 'number': 1279}	{'precision': 0.75, 'recall': 0.75, 'f1': 0.75, 'number': 20}	{'precision': 0.44, 'recall': 0.55, 'f1': 0.48888888888888893, 'number': 40}	{'precision': 0.05084745762711865, 'recall': 0.06818181818181818, 'f1': 0.05825242718446602, 'number': 44}	{'precision': 0.8125, 'recall': 0.5078125, 'f1': 0.625, 'number': 128}	{'precision': 0.5, 'recall': 0.47368421052631576, 'f1': 0.4864864864864865, 'number': 19}	{'precision': 0.8823529411764706, 'recall': 0.8333333333333334, 'f1': 0.8571428571428571, 'number': 18}	0.6708	0.6529	0.6617	0.8720
0.5985	4.0	744	0.4213	{'precision': 0.782608695652174, 'recall': 0.782608695652174, 'f1': 0.782608695652174, 'number': 23}	{'precision': 0.4444444444444444, 'recall': 0.36363636363636365, 'f1': 0.39999999999999997, 'number': 11}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 5}	{'precision': 0.6666666666666666, 'recall': 0.6666666666666666, 'f1': 0.6666666666666666, 'number': 21}	{'precision': 0.4583333333333333, 'recall': 0.4782608695652174, 'f1': 0.4680851063829787, 'number': 23}	{'precision': 0.25, 'recall': 0.2631578947368421, 'f1': 0.25641025641025644, 'number': 19}	{'precision': 0.2727272727272727, 'recall': 0.3333333333333333, 'f1': 0.3, 'number': 27}	{'precision': 0.7647058823529411, 'recall': 0.8125, 'f1': 0.787878787878788, 'number': 16}	{'precision': 0.5142857142857142, 'recall': 0.6206896551724138, 'f1': 0.5625, 'number': 29}	{'precision': 0.6176470588235294, 'recall': 0.9130434782608695, 'f1': 0.7368421052631579, 'number': 23}	{'precision': 0.5185185185185185, 'recall': 0.5833333333333334, 'f1': 0.5490196078431373, 'number': 24}	{'precision': 0.8823529411764706, 'recall': 0.8333333333333334, 'f1': 0.8571428571428571, 'number': 18}	{'precision': 0.7391304347826086, 'recall': 0.7391304347826086, 'f1': 0.7391304347826085, 'number': 23}	{'precision': 0.4090909090909091, 'recall': 0.47368421052631576, 'f1': 0.43902439024390244, 'number': 38}	{'precision': 0.46551724137931033, 'recall': 0.627906976744186, 'f1': 0.5346534653465347, 'number': 43}	{'precision': 0.6190476190476191, 'recall': 0.6842105263157895, 'f1': 0.6500000000000001, 'number': 19}	{'precision': 0.6363636363636364, 'recall': 0.7777777777777778, 'f1': 0.7000000000000001, 'number': 18}	{'precision': 0.8333333333333334, 'recall': 0.7894736842105263, 'f1': 0.8108108108108109, 'number': 38}	{'precision': 0.36363636363636365, 'recall': 0.42105263157894735, 'f1': 0.3902439024390244, 'number': 19}	{'precision': 0.6379310344827587, 'recall': 0.5362318840579711, 'f1': 0.5826771653543308, 'number': 69}	{'precision': 0.7321033210332103, 'recall': 0.7756059421422987, 'f1': 0.7532270311313591, 'number': 1279}	{'precision': 0.6086956521739131, 'recall': 0.7, 'f1': 0.6511627906976744, 'number': 20}	{'precision': 0.6, 'recall': 0.6, 'f1': 0.6, 'number': 40}	{'precision': 0.15, 'recall': 0.13636363636363635, 'f1': 0.14285714285714282, 'number': 44}	{'precision': 0.7247706422018348, 'recall': 0.6171875, 'f1': 0.6666666666666667, 'number': 128}	{'precision': 0.5882352941176471, 'recall': 0.5263157894736842, 'f1': 0.5555555555555555, 'number': 19}	{'precision': 0.8823529411764706, 'recall': 0.8333333333333334, 'f1': 0.8571428571428571, 'number': 18}	0.6713	0.7040	0.6873	0.8794
0.5985	5.0	930	0.4507	{'precision': 0.7692307692307693, 'recall': 0.8695652173913043, 'f1': 0.8163265306122449, 'number': 23}	{'precision': 0.45454545454545453, 'recall': 0.45454545454545453, 'f1': 0.45454545454545453, 'number': 11}	{'precision': 0.18181818181818182, 'recall': 0.4, 'f1': 0.25000000000000006, 'number': 5}	{'precision': 0.6521739130434783, 'recall': 0.7142857142857143, 'f1': 0.6818181818181819, 'number': 21}	{'precision': 0.6470588235294118, 'recall': 0.4782608695652174, 'f1': 0.55, 'number': 23}	{'precision': 0.15384615384615385, 'recall': 0.3157894736842105, 'f1': 0.20689655172413793, 'number': 19}	{'precision': 0.32142857142857145, 'recall': 0.3333333333333333, 'f1': 0.32727272727272727, 'number': 27}	{'precision': 0.8125, 'recall': 0.8125, 'f1': 0.8125, 'number': 16}	{'precision': 0.6551724137931034, 'recall': 0.6551724137931034, 'f1': 0.6551724137931034, 'number': 29}	{'precision': 0.6785714285714286, 'recall': 0.8260869565217391, 'f1': 0.7450980392156864, 'number': 23}	{'precision': 0.5833333333333334, 'recall': 0.5833333333333334, 'f1': 0.5833333333333334, 'number': 24}	{'precision': 0.8888888888888888, 'recall': 0.8888888888888888, 'f1': 0.8888888888888888, 'number': 18}	{'precision': 0.8333333333333334, 'recall': 0.8695652173913043, 'f1': 0.851063829787234, 'number': 23}	{'precision': 0.5675675675675675, 'recall': 0.5526315789473685, 'f1': 0.5599999999999999, 'number': 38}	{'precision': 0.43103448275862066, 'recall': 0.5813953488372093, 'f1': 0.49504950495049505, 'number': 43}	{'precision': 0.6363636363636364, 'recall': 0.7368421052631579, 'f1': 0.6829268292682926, 'number': 19}	{'precision': 0.5909090909090909, 'recall': 0.7222222222222222, 'f1': 0.65, 'number': 18}	{'precision': 0.7777777777777778, 'recall': 0.7368421052631579, 'f1': 0.7567567567567567, 'number': 38}	{'precision': 0.26666666666666666, 'recall': 0.42105263157894735, 'f1': 0.326530612244898, 'number': 19}	{'precision': 0.6219512195121951, 'recall': 0.7391304347826086, 'f1': 0.6754966887417219, 'number': 69}	{'precision': 0.7398373983739838, 'recall': 0.7826426896012509, 'f1': 0.7606382978723405, 'number': 1279}	{'precision': 0.7777777777777778, 'recall': 0.7, 'f1': 0.7368421052631577, 'number': 20}	{'precision': 0.5319148936170213, 'recall': 0.625, 'f1': 0.5747126436781609, 'number': 40}	{'precision': 0.16363636363636364, 'recall': 0.20454545454545456, 'f1': 0.18181818181818185, 'number': 44}	{'precision': 0.717948717948718, 'recall': 0.65625, 'f1': 0.6857142857142856, 'number': 128}	{'precision': 0.5789473684210527, 'recall': 0.5789473684210527, 'f1': 0.5789473684210527, 'number': 19}	{'precision': 0.8823529411764706, 'recall': 0.8333333333333334, 'f1': 0.8571428571428571, 'number': 18}	0.6742	0.7244	0.6984	0.8817
0.1703	6.0	1116	0.4968	{'precision': 0.8076923076923077, 'recall': 0.9130434782608695, 'f1': 0.8571428571428572, 'number': 23}	{'precision': 0.3333333333333333, 'recall': 0.36363636363636365, 'f1': 0.34782608695652173, 'number': 11}	{'precision': 0.375, 'recall': 0.6, 'f1': 0.4615384615384615, 'number': 5}	{'precision': 0.5925925925925926, 'recall': 0.7619047619047619, 'f1': 0.6666666666666666, 'number': 21}	{'precision': 0.6190476190476191, 'recall': 0.5652173913043478, 'f1': 0.5909090909090909, 'number': 23}	{'precision': 0.2, 'recall': 0.2631578947368421, 'f1': 0.22727272727272727, 'number': 19}	{'precision': 0.35714285714285715, 'recall': 0.37037037037037035, 'f1': 0.36363636363636365, 'number': 27}	{'precision': 0.7647058823529411, 'recall': 0.8125, 'f1': 0.787878787878788, 'number': 16}	{'precision': 0.6, 'recall': 0.6206896551724138, 'f1': 0.6101694915254238, 'number': 29}	{'precision': 0.7307692307692307, 'recall': 0.8260869565217391, 'f1': 0.7755102040816326, 'number': 23}	{'precision': 0.5185185185185185, 'recall': 0.5833333333333334, 'f1': 0.5490196078431373, 'number': 24}	{'precision': 0.9444444444444444, 'recall': 0.9444444444444444, 'f1': 0.9444444444444444, 'number': 18}	{'precision': 0.76, 'recall': 0.8260869565217391, 'f1': 0.7916666666666667, 'number': 23}	{'precision': 0.4772727272727273, 'recall': 0.5526315789473685, 'f1': 0.5121951219512196, 'number': 38}	{'precision': 0.48333333333333334, 'recall': 0.6744186046511628, 'f1': 0.5631067961165049, 'number': 43}	{'precision': 0.5909090909090909, 'recall': 0.6842105263157895, 'f1': 0.6341463414634148, 'number': 19}	{'precision': 0.52, 'recall': 0.7222222222222222, 'f1': 0.6046511627906976, 'number': 18}	{'precision': 0.8108108108108109, 'recall': 0.7894736842105263, 'f1': 0.8, 'number': 38}	{'precision': 0.3225806451612903, 'recall': 0.5263157894736842, 'f1': 0.39999999999999997, 'number': 19}	{'precision': 0.6338028169014085, 'recall': 0.6521739130434783, 'f1': 0.6428571428571428, 'number': 69}	{'precision': 0.7171232876712329, 'recall': 0.818608287724785, 'f1': 0.764512595837897, 'number': 1279}	{'precision': 0.7368421052631579, 'recall': 0.7, 'f1': 0.717948717948718, 'number': 20}	{'precision': 0.6578947368421053, 'recall': 0.625, 'f1': 0.6410256410256411, 'number': 40}	{'precision': 0.13043478260869565, 'recall': 0.13636363636363635, 'f1': 0.1333333333333333, 'number': 44}	{'precision': 0.7857142857142857, 'recall': 0.6015625, 'f1': 0.6814159292035399, 'number': 128}	{'precision': 0.6111111111111112, 'recall': 0.5789473684210527, 'f1': 0.5945945945945946, 'number': 19}	{'precision': 0.8823529411764706, 'recall': 0.8333333333333334, 'f1': 0.8571428571428571, 'number': 18}	0.6714	0.7439	0.7058	0.8839
0.1703	7.0	1302	0.5317	{'precision': 0.8076923076923077, 'recall': 0.9130434782608695, 'f1': 0.8571428571428572, 'number': 23}	{'precision': 0.2857142857142857, 'recall': 0.18181818181818182, 'f1': 0.2222222222222222, 'number': 11}	{'precision': 0.125, 'recall': 0.2, 'f1': 0.15384615384615385, 'number': 5}	{'precision': 0.7391304347826086, 'recall': 0.8095238095238095, 'f1': 0.7727272727272727, 'number': 21}	{'precision': 0.7, 'recall': 0.6086956521739131, 'f1': 0.6511627906976744, 'number': 23}	{'precision': 0.18518518518518517, 'recall': 0.2631578947368421, 'f1': 0.21739130434782608, 'number': 19}	{'precision': 0.37037037037037035, 'recall': 0.37037037037037035, 'f1': 0.37037037037037035, 'number': 27}	{'precision': 0.75, 'recall': 0.75, 'f1': 0.75, 'number': 16}	{'precision': 0.6296296296296297, 'recall': 0.5862068965517241, 'f1': 0.6071428571428571, 'number': 29}	{'precision': 0.64, 'recall': 0.6956521739130435, 'f1': 0.6666666666666666, 'number': 23}	{'precision': 0.56, 'recall': 0.5833333333333334, 'f1': 0.5714285714285714, 'number': 24}	{'precision': 0.8888888888888888, 'recall': 0.8888888888888888, 'f1': 0.8888888888888888, 'number': 18}	{'precision': 0.84, 'recall': 0.9130434782608695, 'f1': 0.8749999999999999, 'number': 23}	{'precision': 0.5384615384615384, 'recall': 0.5526315789473685, 'f1': 0.5454545454545455, 'number': 38}	{'precision': 0.5102040816326531, 'recall': 0.5813953488372093, 'f1': 0.5434782608695652, 'number': 43}	{'precision': 0.6, 'recall': 0.631578947368421, 'f1': 0.6153846153846154, 'number': 19}	{'precision': 0.5416666666666666, 'recall': 0.7222222222222222, 'f1': 0.619047619047619, 'number': 18}	{'precision': 0.8, 'recall': 0.7368421052631579, 'f1': 0.7671232876712328, 'number': 38}	{'precision': 0.2571428571428571, 'recall': 0.47368421052631576, 'f1': 0.3333333333333333, 'number': 19}	{'precision': 0.6, 'recall': 0.7391304347826086, 'f1': 0.6623376623376623, 'number': 69}	{'precision': 0.7255586592178771, 'recall': 0.8123534010946052, 'f1': 0.7665068240501659, 'number': 1279}	{'precision': 0.6842105263157895, 'recall': 0.65, 'f1': 0.6666666666666667, 'number': 20}	{'precision': 0.5581395348837209, 'recall': 0.6, 'f1': 0.5783132530120482, 'number': 40}	{'precision': 0.16, 'recall': 0.18181818181818182, 'f1': 0.1702127659574468, 'number': 44}	{'precision': 0.7450980392156863, 'recall': 0.59375, 'f1': 0.6608695652173913, 'number': 128}	{'precision': 0.6666666666666666, 'recall': 0.631578947368421, 'f1': 0.6486486486486486, 'number': 19}	{'precision': 0.8823529411764706, 'recall': 0.8333333333333334, 'f1': 0.8571428571428571, 'number': 18}	0.6744	0.7361	0.7039	0.8837
0.1703	8.0	1488	0.5665	{'precision': 0.7916666666666666, 'recall': 0.8260869565217391, 'f1': 0.8085106382978724, 'number': 23}	{'precision': 0.375, 'recall': 0.2727272727272727, 'f1': 0.3157894736842105, 'number': 11}	{'precision': 0.2857142857142857, 'recall': 0.4, 'f1': 0.3333333333333333, 'number': 5}	{'precision': 0.6923076923076923, 'recall': 0.8571428571428571, 'f1': 0.7659574468085107, 'number': 21}	{'precision': 0.7, 'recall': 0.6086956521739131, 'f1': 0.6511627906976744, 'number': 23}	{'precision': 0.20833333333333334, 'recall': 0.2631578947368421, 'f1': 0.23255813953488372, 'number': 19}	{'precision': 0.2413793103448276, 'recall': 0.25925925925925924, 'f1': 0.25, 'number': 27}	{'precision': 0.8, 'recall': 0.75, 'f1': 0.7741935483870969, 'number': 16}	{'precision': 0.6206896551724138, 'recall': 0.6206896551724138, 'f1': 0.6206896551724138, 'number': 29}	{'precision': 0.7727272727272727, 'recall': 0.7391304347826086, 'f1': 0.7555555555555555, 'number': 23}	{'precision': 0.56, 'recall': 0.5833333333333334, 'f1': 0.5714285714285714, 'number': 24}	{'precision': 0.8888888888888888, 'recall': 0.8888888888888888, 'f1': 0.8888888888888888, 'number': 18}	{'precision': 0.8333333333333334, 'recall': 0.8695652173913043, 'f1': 0.851063829787234, 'number': 23}	{'precision': 0.5384615384615384, 'recall': 0.5526315789473685, 'f1': 0.5454545454545455, 'number': 38}	{'precision': 0.5294117647058824, 'recall': 0.627906976744186, 'f1': 0.5744680851063829, 'number': 43}	{'precision': 0.631578947368421, 'recall': 0.631578947368421, 'f1': 0.631578947368421, 'number': 19}	{'precision': 0.6086956521739131, 'recall': 0.7777777777777778, 'f1': 0.6829268292682927, 'number': 18}	{'precision': 0.8571428571428571, 'recall': 0.7894736842105263, 'f1': 0.8219178082191781, 'number': 38}	{'precision': 0.2962962962962963, 'recall': 0.42105263157894735, 'f1': 0.34782608695652173, 'number': 19}	{'precision': 0.6857142857142857, 'recall': 0.6956521739130435, 'f1': 0.6906474820143885, 'number': 69}	{'precision': 0.7772435897435898, 'recall': 0.7584050039093041, 'f1': 0.7677087455480807, 'number': 1279}	{'precision': 0.7894736842105263, 'recall': 0.75, 'f1': 0.7692307692307692, 'number': 20}	{'precision': 0.5833333333333334, 'recall': 0.7, 'f1': 0.6363636363636365, 'number': 40}	{'precision': 0.19230769230769232, 'recall': 0.22727272727272727, 'f1': 0.20833333333333331, 'number': 44}	{'precision': 0.76, 'recall': 0.59375, 'f1': 0.6666666666666666, 'number': 128}	{'precision': 0.7058823529411765, 'recall': 0.631578947368421, 'f1': 0.6666666666666667, 'number': 19}	{'precision': 0.8823529411764706, 'recall': 0.8333333333333334, 'f1': 0.8571428571428571, 'number': 18}	0.7127	0.7064	0.7095	0.8880
0.0705	9.0	1674	0.5870	{'precision': 0.7916666666666666, 'recall': 0.8260869565217391, 'f1': 0.8085106382978724, 'number': 23}	{'precision': 0.5, 'recall': 0.45454545454545453, 'f1': 0.47619047619047616, 'number': 11}	{'precision': 0.5, 'recall': 0.6, 'f1': 0.5454545454545454, 'number': 5}	{'precision': 0.782608695652174, 'recall': 0.8571428571428571, 'f1': 0.8181818181818182, 'number': 21}	{'precision': 0.7, 'recall': 0.6086956521739131, 'f1': 0.6511627906976744, 'number': 23}	{'precision': 0.19230769230769232, 'recall': 0.2631578947368421, 'f1': 0.2222222222222222, 'number': 19}	{'precision': 0.34615384615384615, 'recall': 0.3333333333333333, 'f1': 0.33962264150943394, 'number': 27}	{'precision': 0.75, 'recall': 0.75, 'f1': 0.75, 'number': 16}	{'precision': 0.6206896551724138, 'recall': 0.6206896551724138, 'f1': 0.6206896551724138, 'number': 29}	{'precision': 0.6896551724137931, 'recall': 0.8695652173913043, 'f1': 0.7692307692307693, 'number': 23}	{'precision': 0.5384615384615384, 'recall': 0.5833333333333334, 'f1': 0.5599999999999999, 'number': 24}	{'precision': 0.8235294117647058, 'recall': 0.7777777777777778, 'f1': 0.7999999999999999, 'number': 18}	{'precision': 0.875, 'recall': 0.9130434782608695, 'f1': 0.8936170212765957, 'number': 23}	{'precision': 0.5405405405405406, 'recall': 0.5263157894736842, 'f1': 0.5333333333333333, 'number': 38}	{'precision': 0.5454545454545454, 'recall': 0.6976744186046512, 'f1': 0.6122448979591837, 'number': 43}	{'precision': 0.6, 'recall': 0.631578947368421, 'f1': 0.6153846153846154, 'number': 19}	{'precision': 0.6086956521739131, 'recall': 0.7777777777777778, 'f1': 0.6829268292682927, 'number': 18}	{'precision': 0.8333333333333334, 'recall': 0.7894736842105263, 'f1': 0.8108108108108109, 'number': 38}	{'precision': 0.2857142857142857, 'recall': 0.42105263157894735, 'f1': 0.3404255319148936, 'number': 19}	{'precision': 0.6984126984126984, 'recall': 0.6376811594202898, 'f1': 0.6666666666666666, 'number': 69}	{'precision': 0.7671022290545734, 'recall': 0.7802971071149335, 'f1': 0.773643410852713, 'number': 1279}	{'precision': 0.7058823529411765, 'recall': 0.6, 'f1': 0.6486486486486486, 'number': 20}	{'precision': 0.6136363636363636, 'recall': 0.675, 'f1': 0.6428571428571429, 'number': 40}	{'precision': 0.2037037037037037, 'recall': 0.25, 'f1': 0.22448979591836732, 'number': 44}	{'precision': 0.7156862745098039, 'recall': 0.5703125, 'f1': 0.6347826086956521, 'number': 128}	{'precision': 0.6875, 'recall': 0.5789473684210527, 'f1': 0.6285714285714286, 'number': 19}	{'precision': 0.8235294117647058, 'recall': 0.7777777777777778, 'f1': 0.7999999999999999, 'number': 18}	0.7066	0.7186	0.7125	0.8888
0.0705	10.0	1860	0.5925	{'precision': 0.7307692307692307, 'recall': 0.8260869565217391, 'f1': 0.7755102040816326, 'number': 23}	{'precision': 0.36363636363636365, 'recall': 0.36363636363636365, 'f1': 0.36363636363636365, 'number': 11}	{'precision': 0.42857142857142855, 'recall': 0.6, 'f1': 0.5, 'number': 5}	{'precision': 0.72, 'recall': 0.8571428571428571, 'f1': 0.782608695652174, 'number': 21}	{'precision': 0.7, 'recall': 0.6086956521739131, 'f1': 0.6511627906976744, 'number': 23}	{'precision': 0.2, 'recall': 0.2631578947368421, 'f1': 0.22727272727272727, 'number': 19}	{'precision': 0.32, 'recall': 0.2962962962962963, 'f1': 0.30769230769230765, 'number': 27}	{'precision': 0.8, 'recall': 0.75, 'f1': 0.7741935483870969, 'number': 16}	{'precision': 0.6, 'recall': 0.6206896551724138, 'f1': 0.6101694915254238, 'number': 29}	{'precision': 0.7916666666666666, 'recall': 0.8260869565217391, 'f1': 0.8085106382978724, 'number': 23}	{'precision': 0.5, 'recall': 0.5416666666666666, 'f1': 0.52, 'number': 24}	{'precision': 0.8235294117647058, 'recall': 0.7777777777777778, 'f1': 0.7999999999999999, 'number': 18}	{'precision': 0.8, 'recall': 0.8695652173913043, 'f1': 0.8333333333333333, 'number': 23}	{'precision': 0.5945945945945946, 'recall': 0.5789473684210527, 'f1': 0.5866666666666667, 'number': 38}	{'precision': 0.5769230769230769, 'recall': 0.6976744186046512, 'f1': 0.631578947368421, 'number': 43}	{'precision': 0.6, 'recall': 0.631578947368421, 'f1': 0.6153846153846154, 'number': 19}	{'precision': 0.7142857142857143, 'recall': 0.8333333333333334, 'f1': 0.7692307692307692, 'number': 18}	{'precision': 0.8055555555555556, 'recall': 0.7631578947368421, 'f1': 0.7837837837837838, 'number': 38}	{'precision': 0.27586206896551724, 'recall': 0.42105263157894735, 'f1': 0.3333333333333333, 'number': 19}	{'precision': 0.6712328767123288, 'recall': 0.7101449275362319, 'f1': 0.6901408450704226, 'number': 69}	{'precision': 0.7549962990377498, 'recall': 0.7974980453479281, 'f1': 0.7756653992395437, 'number': 1279}	{'precision': 0.75, 'recall': 0.6, 'f1': 0.6666666666666665, 'number': 20}	{'precision': 0.6666666666666666, 'recall': 0.7, 'f1': 0.6829268292682926, 'number': 40}	{'precision': 0.21428571428571427, 'recall': 0.2727272727272727, 'f1': 0.23999999999999996, 'number': 44}	{'precision': 0.7333333333333333, 'recall': 0.6015625, 'f1': 0.6609442060085836, 'number': 128}	{'precision': 0.6470588235294118, 'recall': 0.5789473684210527, 'f1': 0.6111111111111113, 'number': 19}	{'precision': 0.8823529411764706, 'recall': 0.8333333333333334, 'f1': 0.8571428571428571, 'number': 18}	0.7016	0.7337	0.7173	0.8896

Framework versions

• Transformers 4.46.3
• Pytorch 2.5.1+cu124
• Datasets 3.1.0
• Tokenizers 0.20.3