detr-finetuned-cppe-5-10k-steps

This model is a fine-tuned version of facebook/detr-resnet-50 on the danelcsb/cppe-5-v2 dataset. It achieves the following results on the evaluation set:

• Loss: 0.9557
• Map: 0.3883
• Map 50: 0.6828
• Map 75: 0.3786
• Map Small: 0.1193
• Map Medium: 0.3371
• Map Large: 0.5338
• Mar 1: 0.3968
• Mar 10: 0.5689
• Mar 100: 0.58
• Mar Small: 0.3679
• Mar Medium: 0.5385
• Mar Large: 0.7028
• Map Coverall: 0.6436
• Mar 100 Coverall: 0.7944
• Map Face Shield: 0.2789
• Mar 100 Face Shield: 0.5927
• Map Gloves: 0.312
• Mar 100 Gloves: 0.4922
• Map Goggles: 0.2522
• Mar 100 Goggles: 0.4714
• Map Mask: 0.4546
• Mar 100 Mask: 0.5494

Model description

More information needed

Intended uses & limitations

More information needed

Training and evaluation data

More information needed

Training procedure

Training hyperparameters

The following hyperparameters were used during training:

• learning_rate: 5e-05
• train_batch_size: 8
• eval_batch_size: 8
• seed: 1337
• optimizer: Use OptimizerNames.ADAMW_TORCH with betas=(0.9,0.999) and epsilon=1e-08 and optimizer_args=No additional optimizer arguments
• lr_scheduler_type: linear
• num_epochs: 100.0
• mixed_precision_training: Native AMP

Training results

Training Loss	Epoch	Step	Validation Loss	Map	Map 50	Map 75	Map Coverall	Map Face Shield	Map Gloves	Map Goggles	Map Mask	Map Large	Map Medium	Map Small	Mar 1	Mar 10	Mar 100	Mar 100 Coverall	Mar 100 Face Shield	Mar 100 Gloves	Mar 100 Goggles	Mar 100 Mask	Mar Large	Mar Medium	Mar Small
2.5068	1.0	102	1.9580	0.028	0.063	0.0222	0.1165	0.0	0.005	0.0	0.0186	0.0324	0.0068	0.0098	0.0737	0.196	0.2324	0.6757	0.0	0.2056	0.0	0.2809	0.2481	0.1698	0.0874
2.0122	2.0	204	1.7956	0.0523	0.1085	0.0436	0.2106	0.0	0.0105	0.0	0.0404	0.0543	0.0244	0.017	0.1129	0.2302	0.2701	0.6958	0.0	0.2676	0.0	0.387	0.2585	0.2839	0.145
2.0014	3.0	306	1.8244	0.0531	0.107	0.044	0.2287	0.0	0.0111	0.0	0.0257	0.0595	0.0233	0.0094	0.1079	0.2132	0.2413	0.7201	0.0	0.2335	0.0	0.2531	0.2344	0.2067	0.1223
1.9516	4.0	408	1.8204	0.0668	0.1439	0.0575	0.2519	0.0	0.01	0.0	0.0723	0.0688	0.0714	0.0253	0.1177	0.2157	0.2485	0.6979	0.0	0.238	0.0	0.3068	0.2604	0.2796	0.1137
1.7527	5.0	510	1.6670	0.1042	0.2045	0.0884	0.3563	0.012	0.0219	0.0	0.131	0.1157	0.1257	0.0317	0.1478	0.2544	0.2863	0.7201	0.0545	0.324	0.0	0.3327	0.2876	0.3268	0.133
1.8596	6.0	612	1.6266	0.1193	0.2393	0.0995	0.3829	0.0094	0.0217	0.0	0.1825	0.1317	0.1388	0.0364	0.1457	0.2592	0.2891	0.6979	0.0782	0.2916	0.0	0.3778	0.3035	0.3271	0.124
1.6759	7.0	714	1.4716	0.1598	0.3152	0.1384	0.4726	0.0347	0.0482	0.0104	0.233	0.1809	0.1632	0.048	0.2023	0.3335	0.3585	0.7514	0.18	0.3346	0.0905	0.4358	0.4061	0.3458	0.1378
1.612	8.0	816	1.4603	0.1794	0.346	0.1549	0.509	0.0674	0.0507	0.0288	0.241	0.2141	0.1659	0.0597	0.2235	0.3712	0.3969	0.7507	0.3382	0.3056	0.1444	0.4457	0.4514	0.3659	0.2952
1.5547	9.0	918	1.4071	0.1953	0.3824	0.1667	0.5281	0.0766	0.05	0.0317	0.2902	0.2372	0.1779	0.0693	0.2377	0.4103	0.4321	0.7431	0.3927	0.3095	0.2556	0.4599	0.5102	0.3892	0.3014
1.4847	10.0	1020	1.4339	0.1997	0.4047	0.1715	0.518	0.0834	0.0588	0.0538	0.2844	0.2371	0.1897	0.0714	0.2308	0.3932	0.4133	0.7792	0.3473	0.2849	0.2254	0.4296	0.4858	0.3825	0.1816
1.4681	11.0	1122	1.3431	0.2109	0.4195	0.182	0.4944	0.0947	0.0779	0.061	0.3266	0.2622	0.2017	0.0854	0.2488	0.4273	0.451	0.7375	0.4073	0.343	0.2937	0.4735	0.5428	0.423	0.2525
1.4665	12.0	1224	1.3346	0.2235	0.4539	0.1869	0.5328	0.1148	0.0888	0.0498	0.3313	0.2762	0.2063	0.093	0.2681	0.4279	0.443	0.7674	0.4182	0.2564	0.3048	0.4685	0.5185	0.4064	0.2863
1.4067	13.0	1326	1.2385	0.2444	0.4487	0.2147	0.5738	0.1172	0.0953	0.0684	0.3674	0.3054	0.2272	0.0914	0.2886	0.4702	0.488	0.7764	0.5	0.3453	0.3222	0.4963	0.5797	0.4361	0.3035
1.3582	14.0	1428	1.3032	0.2213	0.4326	0.1972	0.5591	0.0791	0.101	0.0403	0.3268	0.2666	0.1948	0.1149	0.2565	0.438	0.4608	0.7729	0.42	0.3793	0.2825	0.4494	0.5332	0.4138	0.3004
1.3927	15.0	1530	1.3047	0.2134	0.4279	0.1705	0.546	0.1051	0.0928	0.0309	0.2921	0.2623	0.2018	0.1082	0.2699	0.4284	0.4508	0.7632	0.4182	0.3464	0.2794	0.4469	0.5472	0.3983	0.3321
1.3589	16.0	1632	1.2959	0.2063	0.4044	0.1811	0.55	0.0757	0.1116	0.0186	0.2756	0.2634	0.2029	0.0733	0.2588	0.4274	0.4442	0.7597	0.44	0.3715	0.219	0.4309	0.5285	0.3845	0.2993
1.3704	17.0	1734	1.3093	0.225	0.4359	0.2054	0.5552	0.127	0.0876	0.0502	0.3048	0.2784	0.2058	0.0672	0.2743	0.4419	0.4595	0.7611	0.4564	0.3358	0.3095	0.4346	0.5652	0.3969	0.1763
1.3464	18.0	1836	1.2737	0.2253	0.4451	0.1894	0.5269	0.105	0.1119	0.046	0.3367	0.2715	0.2237	0.0943	0.2899	0.4611	0.4872	0.75	0.5382	0.3598	0.3381	0.45	0.5967	0.4398	0.3134
1.2997	19.0	1938	1.3513	0.2108	0.4438	0.1639	0.5721	0.0839	0.0841	0.049	0.2648	0.2461	0.1924	0.0764	0.2401	0.4147	0.4407	0.7479	0.3673	0.3654	0.3143	0.4086	0.529	0.3867	0.2768
1.3026	20.0	2040	1.2170	0.2452	0.47	0.2203	0.0944	0.2252	0.3061	0.2962	0.4682	0.4834	0.2715	0.4083	0.5942	0.5735	0.7604	0.1328	0.4855	0.1514	0.4067	0.0475	0.3111	0.321	0.4531
1.2999	21.0	2142	1.1721	0.2549	0.476	0.2494	0.0937	0.2324	0.3261	0.3091	0.4881	0.5026	0.2858	0.4534	0.6074	0.5904	0.7729	0.1445	0.4927	0.1217	0.4123	0.0523	0.346	0.3654	0.4889
1.2456	22.0	2244	1.2621	0.2326	0.4787	0.1896	0.1004	0.2244	0.283	0.2898	0.4705	0.4871	0.3	0.4122	0.5997	0.5195	0.7451	0.1486	0.4745	0.1433	0.3911	0.0608	0.4032	0.2908	0.4216
1.2347	23.0	2346	1.1968	0.2498	0.4855	0.221	0.1597	0.2285	0.3066	0.3105	0.4779	0.4912	0.2936	0.4203	0.6006	0.5644	0.7611	0.1351	0.4782	0.1783	0.4358	0.0475	0.3302	0.3236	0.4506
1.1921	24.0	2448	1.1848	0.2547	0.4882	0.2391	0.0778	0.2204	0.3315	0.2964	0.4737	0.4873	0.2524	0.394	0.5864	0.5565	0.7535	0.1296	0.46	0.1757	0.4385	0.0592	0.3032	0.3528	0.4815
1.2161	25.0	2550	1.1540	0.2748	0.5	0.2762	0.1216	0.2465	0.3579	0.3206	0.4912	0.5028	0.2267	0.4431	0.6232	0.5849	0.8014	0.1621	0.4618	0.1715	0.4017	0.0842	0.3508	0.3711	0.4981
1.2265	26.0	2652	1.1872	0.2588	0.5142	0.2234	0.1049	0.2254	0.3452	0.305	0.4834	0.4956	0.2824	0.4573	0.6008	0.5858	0.7826	0.124	0.4727	0.1688	0.3849	0.0996	0.373	0.316	0.4648
1.1619	27.0	2754	1.1557	0.261	0.5139	0.2223	0.1001	0.2469	0.3395	0.3001	0.4991	0.5138	0.2947	0.4964	0.6136	0.6035	0.791	0.1446	0.5091	0.1859	0.4441	0.0738	0.3905	0.2972	0.4346
1.1671	28.0	2856	1.1103	0.2723	0.5256	0.2255	0.0904	0.2222	0.3648	0.3276	0.5035	0.518	0.2321	0.4173	0.6441	0.5958	0.7778	0.1333	0.4982	0.1702	0.438	0.0932	0.3889	0.3691	0.487
1.1463	29.0	2958	1.1234	0.2679	0.5065	0.2356	0.1073	0.2455	0.3687	0.3378	0.5025	0.5181	0.3251	0.4521	0.6292	0.5826	0.7688	0.1427	0.4982	0.1845	0.4508	0.0767	0.3968	0.3532	0.4759
1.1374	30.0	3060	1.1353	0.2815	0.5379	0.2442	0.1098	0.2314	0.3621	0.3236	0.5069	0.5243	0.2765	0.4815	0.628	0.5967	0.7694	0.1941	0.54	0.1818	0.4363	0.068	0.3905	0.3668	0.4852
1.1409	31.0	3162	1.1136	0.2944	0.5876	0.2576	0.1244	0.2457	0.3953	0.3349	0.5033	0.517	0.3338	0.4603	0.6293	0.6012	0.7708	0.1623	0.4982	0.2146	0.443	0.1384	0.3968	0.3556	0.4759
1.1216	32.0	3264	1.1179	0.2835	0.5332	0.2656	0.098	0.2522	0.3857	0.3304	0.5174	0.532	0.3335	0.4975	0.638	0.5944	0.784	0.15	0.5018	0.1956	0.4441	0.1165	0.4317	0.3608	0.4981
1.1202	33.0	3366	1.1690	0.2505	0.5131	0.2151	0.1067	0.2247	0.3412	0.2935	0.4917	0.5099	0.3288	0.4888	0.6058	0.4839	0.7375	0.124	0.4964	0.205	0.4374	0.0794	0.3905	0.3598	0.4877
1.1005	34.0	3468	1.0671	0.2997	0.5595	0.2821	0.1116	0.2669	0.4054	0.3435	0.5154	0.5322	0.3146	0.4567	0.6486	0.6208	0.7903	0.1752	0.5527	0.2243	0.4413	0.1169	0.3651	0.361	0.5117
1.095	35.0	3570	1.1332	0.2782	0.5383	0.2462	0.1002	0.2871	0.3769	0.3318	0.4947	0.5085	0.2792	0.4959	0.6081	0.5438	0.7722	0.1983	0.5236	0.1886	0.4112	0.0997	0.3476	0.3605	0.4877
1.0893	36.0	3672	1.1231	0.2884	0.5378	0.2562	0.0925	0.2626	0.3803	0.3295	0.5049	0.5224	0.2844	0.4926	0.6166	0.5897	0.7639	0.1526	0.5164	0.2039	0.4441	0.1188	0.3825	0.3768	0.5049
1.1081	37.0	3774	1.0871	0.2936	0.5527	0.2571	0.1084	0.2656	0.3852	0.3351	0.513	0.5316	0.2868	0.5013	0.6222	0.6108	0.7764	0.1648	0.5455	0.1958	0.4302	0.103	0.3937	0.3934	0.5123
1.0929	38.0	3876	1.1043	0.3024	0.5575	0.2804	0.1256	0.2607	0.409	0.3453	0.5166	0.5305	0.309	0.4687	0.64	0.6099	0.7729	0.1977	0.5236	0.1875	0.4257	0.1212	0.4111	0.3959	0.5191
1.0806	39.0	3978	1.1396	0.2842	0.5494	0.2531	0.1204	0.2438	0.378	0.3186	0.4869	0.4977	0.2946	0.4269	0.5969	0.5722	0.7674	0.1555	0.4982	0.2185	0.4196	0.1183	0.3365	0.3566	0.4667
1.0974	40.0	4080	1.0866	0.291	0.5598	0.2596	0.1355	0.2464	0.4061	0.3438	0.4977	0.5084	0.3066	0.4423	0.621	0.5999	0.791	0.1368	0.5091	0.2265	0.4447	0.126	0.3063	0.3659	0.4907
1.073	41.0	4182	1.0857	0.2995	0.5459	0.2801	0.1843	0.2416	0.4097	0.3386	0.5078	0.5186	0.3106	0.4305	0.629	0.6073	0.7924	0.1644	0.5	0.2256	0.4274	0.0944	0.3619	0.4056	0.5111
1.0465	42.0	4284	1.0739	0.3066	0.5775	0.2667	0.1102	0.2644	0.4119	0.3534	0.5116	0.5237	0.3007	0.4541	0.6397	0.5951	0.791	0.1646	0.5055	0.2441	0.4592	0.1208	0.3651	0.4084	0.4975
1.0748	43.0	4386	1.1166	0.2943	0.5668	0.2546	0.1363	0.2789	0.3821	0.3395	0.4978	0.5051	0.296	0.493	0.6026	0.6161	0.7792	0.1919	0.5055	0.2007	0.4067	0.1002	0.3556	0.3627	0.4784
1.0632	44.0	4488	1.1081	0.2808	0.5393	0.2424	0.0885	0.2449	0.4	0.3458	0.5062	0.5158	0.2818	0.4733	0.6337	0.5962	0.7875	0.1076	0.5055	0.2123	0.4369	0.1076	0.3444	0.3805	0.5049
1.047	45.0	4590	1.0471	0.3169	0.5899	0.2866	0.1514	0.2864	0.4332	0.3533	0.5187	0.5286	0.3206	0.4866	0.6547	0.6178	0.7979	0.1907	0.5055	0.2525	0.4374	0.1322	0.3952	0.3911	0.5068
1.0293	46.0	4692	1.0620	0.3132	0.5894	0.2843	0.146	0.272	0.4305	0.3423	0.5257	0.538	0.3437	0.4895	0.6481	0.6203	0.7799	0.1997	0.5455	0.2634	0.462	0.1141	0.4016	0.3683	0.5012
1.0105	47.0	4794	1.0400	0.3331	0.6222	0.3026	0.1343	0.2826	0.4504	0.3694	0.5295	0.5401	0.3587	0.4644	0.6548	0.6184	0.7854	0.2126	0.54	0.2666	0.4581	0.1769	0.4079	0.3911	0.5093
0.991	48.0	4896	1.0645	0.3199	0.6	0.2857	0.1505	0.2765	0.4383	0.3624	0.5282	0.541	0.3301	0.5116	0.6508	0.5956	0.7792	0.2264	0.5509	0.2666	0.4721	0.165	0.4238	0.3459	0.479
0.976	49.0	4998	1.0483	0.3306	0.6056	0.2997	0.1136	0.2684	0.4568	0.3617	0.543	0.5565	0.3358	0.5038	0.676	0.6141	0.7924	0.1803	0.5491	0.2743	0.4709	0.1892	0.4603	0.395	0.5099
0.9888	50.0	5100	1.0753	0.321	0.6015	0.2876	0.143	0.2657	0.4313	0.3474	0.5291	0.541	0.3402	0.438	0.6515	0.5819	0.7604	0.1978	0.5255	0.261	0.4542	0.1709	0.4476	0.3934	0.5173
1.0303	51.0	5202	1.0248	0.3282	0.5991	0.3065	0.1455	0.2856	0.4454	0.3718	0.5362	0.5502	0.3088	0.4787	0.6828	0.6119	0.7826	0.2229	0.5527	0.2601	0.4665	0.1506	0.4349	0.3953	0.5142
0.9842	52.0	5304	1.0505	0.3214	0.5961	0.3128	0.2077	0.2931	0.4294	0.3723	0.5303	0.5421	0.3205	0.4851	0.6747	0.6116	0.7792	0.2311	0.56	0.263	0.4637	0.1045	0.4127	0.3969	0.4951
0.9696	53.0	5406	1.0265	0.3293	0.6019	0.3018	0.106	0.2979	0.4461	0.3822	0.5369	0.5509	0.2992	0.4985	0.6821	0.6457	0.7889	0.1915	0.5218	0.2584	0.4598	0.1462	0.4587	0.4048	0.5253
0.9543	54.0	5508	1.0281	0.347	0.6122	0.3339	0.1872	0.3124	0.4716	0.3799	0.5466	0.5557	0.3377	0.5343	0.6737	0.6382	0.7743	0.2366	0.5873	0.2535	0.4497	0.1863	0.4381	0.4203	0.529
0.9422	55.0	5610	1.0071	0.3306	0.5881	0.3249	0.1449	0.284	0.4468	0.3578	0.5375	0.5489	0.3157	0.4889	0.6696	0.6414	0.7819	0.1648	0.4945	0.2706	0.4749	0.1572	0.4714	0.4188	0.5216
0.9466	56.0	5712	1.0298	0.3511	0.6424	0.3371	0.132	0.3184	0.4571	0.366	0.5341	0.5456	0.2969	0.4929	0.6627	0.6421	0.7826	0.2288	0.5109	0.2988	0.4955	0.1643	0.4206	0.4217	0.5185
0.9531	57.0	5814	1.0100	0.3488	0.6207	0.3287	0.1347	0.3035	0.4695	0.3805	0.5389	0.5484	0.3205	0.4835	0.6672	0.6501	0.7812	0.206	0.52	0.3229	0.4978	0.1529	0.4175	0.412	0.5253
0.9513	58.0	5916	1.0160	0.3365	0.6032	0.3187	0.1036	0.2929	0.4571	0.3723	0.547	0.5577	0.3462	0.5054	0.6651	0.6416	0.7757	0.2133	0.5345	0.2843	0.4777	0.1382	0.4698	0.405	0.5309
0.9247	59.0	6018	1.0064	0.3383	0.6145	0.3065	0.1476	0.2866	0.454	0.3707	0.541	0.5512	0.3218	0.4915	0.6703	0.6455	0.7868	0.229	0.5673	0.2756	0.4698	0.132	0.4286	0.4093	0.5037
0.9127	60.0	6120	1.0243	0.3527	0.6155	0.3353	0.1245	0.2904	0.4712	0.3676	0.5367	0.5512	0.3445	0.4531	0.6745	0.644	0.7972	0.2242	0.5345	0.2887	0.4872	0.1663	0.4079	0.44	0.529
0.924	61.0	6222	1.0201	0.3467	0.6187	0.3291	0.1259	0.3009	0.4658	0.3669	0.542	0.5563	0.3672	0.491	0.6729	0.6197	0.7778	0.2337	0.5345	0.2796	0.4899	0.1768	0.454	0.4237	0.5253
0.9289	62.0	6324	1.0056	0.3575	0.6328	0.3288	0.1522	0.3019	0.489	0.3743	0.5457	0.5581	0.3284	0.5325	0.6811	0.6302	0.7979	0.2679	0.5491	0.2943	0.4777	0.1619	0.4397	0.433	0.5259
0.9038	63.0	6426	1.0303	0.3533	0.6337	0.3302	0.1265	0.3128	0.4751	0.3771	0.5478	0.5629	0.3565	0.4998	0.683	0.6373	0.7917	0.2518	0.5673	0.3044	0.4922	0.1579	0.4429	0.415	0.5204
0.8977	64.0	6528	1.0282	0.354	0.639	0.3309	0.1772	0.2979	0.4844	0.3783	0.5482	0.5601	0.3423	0.5408	0.6769	0.6306	0.7854	0.2532	0.5655	0.2898	0.4872	0.1809	0.4349	0.4156	0.5278
0.8874	65.0	6630	1.0007	0.362	0.6424	0.3444	0.1194	0.3101	0.4973	0.3896	0.5495	0.5616	0.3523	0.4885	0.6787	0.6247	0.7833	0.2444	0.5327	0.2965	0.4849	0.2013	0.4603	0.4432	0.5469
0.8984	66.0	6732	1.0091	0.3664	0.6534	0.333	0.1443	0.3091	0.5039	0.3763	0.5434	0.5532	0.3357	0.4781	0.6748	0.6249	0.7812	0.2678	0.5527	0.3095	0.4849	0.2083	0.4222	0.4217	0.5247
0.8936	67.0	6834	1.0070	0.3602	0.6401	0.3458	0.1338	0.2956	0.4938	0.377	0.5432	0.5578	0.3382	0.4857	0.6854	0.626	0.7826	0.2655	0.5709	0.2838	0.4687	0.1844	0.4302	0.4414	0.5364
0.8855	68.0	6936	0.9896	0.3699	0.6389	0.3531	0.1421	0.331	0.4972	0.3846	0.5506	0.5585	0.2986	0.5207	0.6792	0.6444	0.7826	0.2899	0.5473	0.2925	0.4777	0.1962	0.4571	0.4267	0.5278
0.8741	69.0	7038	1.0024	0.3603	0.6323	0.3335	0.1377	0.3261	0.4786	0.3917	0.5522	0.563	0.3197	0.5005	0.6814	0.6281	0.7819	0.2722	0.5582	0.2651	0.4721	0.2004	0.4698	0.4354	0.5327
0.8719	70.0	7140	0.9893	0.3697	0.6651	0.348	0.1304	0.3254	0.495	0.3944	0.5581	0.5679	0.3414	0.5242	0.6777	0.6364	0.7819	0.2604	0.5891	0.2951	0.4849	0.2136	0.4381	0.443	0.5457
0.8492	71.0	7242	1.0143	0.3706	0.6529	0.3508	0.1309	0.3338	0.4981	0.3865	0.5528	0.5679	0.3542	0.523	0.6888	0.6563	0.784	0.2454	0.5618	0.288	0.4804	0.2199	0.4667	0.4436	0.5463
0.874	72.0	7344	0.9918	0.3635	0.6614	0.346	0.1364	0.3137	0.4868	0.3873	0.5526	0.5642	0.3492	0.5059	0.6787	0.6283	0.7875	0.2586	0.5727	0.3168	0.4894	0.1953	0.4302	0.4187	0.5414
0.8537	73.0	7446	1.0099	0.3648	0.6577	0.3484	0.1369	0.3132	0.4894	0.3839	0.553	0.567	0.3366	0.5157	0.6864	0.6386	0.7826	0.2608	0.5727	0.295	0.476	0.2088	0.473	0.421	0.5309
0.8628	74.0	7548	0.9912	0.3652	0.6553	0.3489	0.1292	0.317	0.4924	0.3826	0.5525	0.5652	0.3246	0.484	0.6899	0.636	0.7826	0.2547	0.5673	0.3105	0.4749	0.2057	0.4667	0.419	0.5346
0.8435	75.0	7650	1.0066	0.3628	0.661	0.3537	0.1267	0.3396	0.4915	0.3857	0.5514	0.5687	0.3389	0.5295	0.6942	0.6159	0.7722	0.2487	0.5927	0.3045	0.476	0.2281	0.481	0.4166	0.5216
0.8523	76.0	7752	0.9969	0.3678	0.6697	0.3632	0.1314	0.3259	0.4933	0.3774	0.5485	0.5652	0.3371	0.508	0.679	0.6266	0.7819	0.274	0.6036	0.3101	0.4883	0.2031	0.4254	0.425	0.5265
0.8321	77.0	7854	0.9937	0.3696	0.6599	0.3612	0.1106	0.3178	0.4972	0.3847	0.5484	0.5602	0.3454	0.5154	0.6671	0.6321	0.7819	0.2673	0.5836	0.3088	0.4827	0.2074	0.4317	0.4321	0.521
0.8258	78.0	7956	0.9844	0.372	0.6629	0.3677	0.1203	0.2982	0.4978	0.3911	0.5545	0.5682	0.3331	0.5148	0.691	0.6356	0.7903	0.2807	0.5982	0.3059	0.4676	0.1962	0.4556	0.4417	0.5296
0.8197	79.0	8058	0.9836	0.368	0.6454	0.3624	0.1287	0.3025	0.483	0.3724	0.5564	0.5695	0.374	0.5109	0.679	0.6286	0.7917	0.2743	0.5818	0.3096	0.4888	0.1798	0.4444	0.4477	0.5407
0.8275	80.0	8160	0.9880	0.3736	0.6596	0.3682	0.1202	0.3169	0.5054	0.3846	0.5521	0.5686	0.3481	0.5117	0.6832	0.6328	0.7917	0.2677	0.6	0.3204	0.4844	0.21	0.4476	0.4371	0.5191
0.8069	81.0	8262	0.9647	0.3675	0.6532	0.3514	0.1037	0.3088	0.497	0.3846	0.5552	0.5682	0.3302	0.5314	0.6806	0.6353	0.7889	0.245	0.58	0.3242	0.4866	0.1947	0.4476	0.4381	0.5377
0.8197	82.0	8364	0.9878	0.3676	0.643	0.3578	0.1095	0.3083	0.5017	0.3885	0.5572	0.5705	0.3481	0.532	0.684	0.6323	0.7792	0.2451	0.5909	0.3103	0.4877	0.2097	0.4587	0.4406	0.5358
0.8334	83.0	8466	0.9788	0.3707	0.6533	0.3705	0.1078	0.3213	0.5099	0.3864	0.5551	0.5679	0.3407	0.5266	0.6804	0.641	0.7861	0.2614	0.5836	0.3015	0.4888	0.2104	0.4413	0.4394	0.5395
0.8289	84.0	8568	0.9885	0.3734	0.6652	0.3639	0.1058	0.3204	0.5154	0.3872	0.5556	0.5694	0.3177	0.5334	0.6848	0.6405	0.7861	0.2605	0.5764	0.3046	0.4838	0.2081	0.4476	0.453	0.5531
0.8053	85.0	8670	0.9810	0.3755	0.658	0.3742	0.1175	0.3345	0.5092	0.3919	0.559	0.5759	0.3565	0.5274	0.6873	0.6351	0.7819	0.2796	0.6055	0.3104	0.4939	0.2044	0.4556	0.4478	0.5426
0.8035	86.0	8772	0.9798	0.3744	0.6654	0.3603	0.1094	0.3334	0.514	0.3876	0.5582	0.579	0.3611	0.5293	0.6945	0.6344	0.7875	0.2713	0.6091	0.3032	0.4916	0.2087	0.4587	0.4543	0.5481
0.7939	87.0	8874	0.9846	0.3736	0.6551	0.3568	0.1068	0.3352	0.5084	0.3896	0.5636	0.5782	0.3494	0.5635	0.6899	0.6297	0.7937	0.2678	0.5964	0.2965	0.4849	0.2197	0.4746	0.4542	0.5414
0.8006	88.0	8976	0.9720	0.3788	0.669	0.3698	0.1053	0.3169	0.5167	0.3902	0.5664	0.5805	0.3739	0.5166	0.689	0.6322	0.7986	0.2813	0.6036	0.3	0.4899	0.2262	0.4651	0.4545	0.5451
0.7917	89.0	9078	0.9779	0.3807	0.6676	0.3682	0.1162	0.3355	0.5185	0.3952	0.5612	0.5725	0.3483	0.5361	0.683	0.6412	0.791	0.2766	0.58	0.3009	0.4927	0.2255	0.4476	0.4592	0.5512
0.7827	90.0	9180	0.9686	0.3829	0.6731	0.3804	0.1092	0.3431	0.5228	0.3963	0.5632	0.5758	0.3337	0.5297	0.6945	0.6399	0.7924	0.294	0.5855	0.3017	0.4933	0.2279	0.4571	0.4512	0.5506
0.7949	91.0	9282	0.9680	0.3856	0.6755	0.3858	0.1182	0.3354	0.5257	0.3984	0.5648	0.5781	0.3553	0.5147	0.6978	0.6373	0.7861	0.2978	0.6018	0.3076	0.4911	0.2311	0.4635	0.4542	0.5481
0.7757	92.0	9384	0.9670	0.3828	0.6697	0.3923	0.1173	0.33	0.523	0.3943	0.5654	0.5779	0.3357	0.5157	0.6958	0.6448	0.7896	0.2825	0.5964	0.3008	0.4849	0.231	0.473	0.4551	0.5457
0.7868	93.0	9486	0.9613	0.3822	0.6686	0.3802	0.1122	0.3308	0.5263	0.3958	0.5645	0.5802	0.3406	0.5108	0.702	0.643	0.7972	0.2767	0.5909	0.3004	0.4905	0.2393	0.4762	0.4518	0.5463
0.7753	94.0	9588	0.9541	0.3827	0.6779	0.3753	0.1163	0.3333	0.5277	0.3949	0.5635	0.5753	0.3495	0.4991	0.6969	0.6426	0.791	0.2727	0.5855	0.3073	0.4888	0.2429	0.4635	0.448	0.5475
0.7633	95.0	9690	0.9495	0.3853	0.6736	0.3662	0.1124	0.3367	0.527	0.3972	0.5672	0.5808	0.3759	0.5119	0.7011	0.6456	0.7924	0.272	0.6018	0.3069	0.4899	0.2474	0.4683	0.4544	0.5519
0.7649	96.0	9792	0.9528	0.3867	0.6783	0.3753	0.1214	0.3328	0.5277	0.3956	0.5666	0.5815	0.3645	0.5205	0.7049	0.6516	0.7993	0.2656	0.5964	0.3118	0.4966	0.243	0.4603	0.4614	0.5549
0.7626	97.0	9894	0.9535	0.3878	0.685	0.3731	0.1215	0.3361	0.5332	0.3989	0.5678	0.5795	0.3647	0.5246	0.6998	0.6435	0.7903	0.2752	0.5891	0.3148	0.4916	0.2499	0.4746	0.4556	0.5519
0.7667	98.0	9996	0.9552	0.3872	0.682	0.3704	0.121	0.3366	0.5295	0.3952	0.5667	0.5789	0.3512	0.528	0.7004	0.644	0.7944	0.2739	0.5909	0.3099	0.4894	0.2487	0.4667	0.4593	0.5531
0.7695	99.0	10098	0.9507	0.3886	0.6838	0.3786	0.1207	0.3341	0.5331	0.3974	0.5676	0.5805	0.3699	0.5364	0.7038	0.6446	0.7951	0.2783	0.5927	0.3102	0.4899	0.2532	0.4746	0.4567	0.55
0.7535	100.0	10200	0.9557	0.3883	0.6828	0.3786	0.1193	0.3371	0.5338	0.3968	0.5689	0.58	0.3679	0.5385	0.7028	0.6436	0.7944	0.2789	0.5927	0.312	0.4922	0.2522	0.4714	0.4546	0.5494

Framework versions

• Transformers 4.51.3
• Pytorch 2.7.0+xpu
• Datasets 3.6.0
• Tokenizers 0.21.1