pupugu02/absa-setfit-resto-aspect

SetFit Aspect Model

This is a SetFit model that can be used for Aspect Based Sentiment Analysis (ABSA). A LogisticRegression instance is used for classification. In particular, this model is in charge of filtering aspect span candidates.

The model has been trained using an efficient few-shot learning technique that involves:

1. Fine-tuning a Sentence Transformer with contrastive learning.
2. Training a classification head with features from the fine-tuned Sentence Transformer.

This model was trained within the context of a larger system for ABSA, which looks like so:

1. Use a spaCy model to select possible aspect span candidates.
2. Use this SetFit model to filter these possible aspect span candidates.
3. Use a SetFit model to classify the filtered aspect span candidates.

Model Details

Model Description

• Model Type: SetFit
• Classification head: a LogisticRegression instance
• spaCy Model: id_core_news_trf
• SetFitABSA Aspect Model: pupugu02/absa-setfit-resto-aspect
• SetFitABSA Polarity Model: pupugu02/absa-setfit-resto-polarity
• Maximum Sequence Length: 512 tokens
• Number of Classes: 2 classes

Model Sources

• Repository: SetFit on GitHub
• Paper: Efficient Few-Shot Learning Without Prompts
• Blogpost: SetFit: Efficient Few-Shot Learning Without Prompts

Model Labels

Label	Examples
aspect	'tempat:Mcd selalu jadi tempat ternyaman untuk me time, selain tempat yang Sangat bersih dan nyaman, mcdonals juga selalu menjaga kualitas makanan. Bagi saya mcd sangat affdorable dan worth it, selain itu paling digemari oleh kalangan anak muda dan anak anak sangat menyukai ayam nya.' 'tempat:Makanan nya enak n harga nya juga murah.. View nya bagus dan ada tempat buat bermain anak2.. Naek beca ato perahu angsa..' 'pelayanan:McDonald’s adalah menjadi restoran cepat saji dengan pelayanan terbaik di dunia. Untuk mencapai visi ini, McDonald’s selalu menjamin mutu produk-produknya, memberikan pelayanan yang memuaskan, menawarkan kebersihan dan keamanan produk …'
no aspect	'Mcd:Mcd selalu jadi tempat ternyaman untuk me time, selain tempat yang Sangat bersih dan nyaman, mcdonals juga selalu menjaga kualitas makanan. Bagi saya mcd sangat affdorable dan worth it, selain itu paling digemari oleh kalangan anak muda dan anak anak sangat menyukai ayam nya.' 'tempat:Mcd selalu jadi tempat ternyaman untuk me time, selain tempat yang Sangat bersih dan nyaman, mcdonals juga selalu menjaga kualitas makanan. Bagi saya mcd sangat affdorable dan worth it, selain itu paling digemari oleh kalangan anak muda dan anak anak sangat menyukai ayam nya.' 'me time:Mcd selalu jadi tempat ternyaman untuk me time, selain tempat yang Sangat bersih dan nyaman, mcdonals juga selalu menjaga kualitas makanan. Bagi saya mcd sangat affdorable dan worth it, selain itu paling digemari oleh kalangan anak muda dan anak anak sangat menyukai ayam nya.'

Uses

Direct Use for Inference

First install the SetFit library:

pip install setfit

Then you can load this model and run inference.

from setfit import AbsaModel

# Download from the 🤗 Hub
model = AbsaModel.from_pretrained(
    "pupugu02/absa-setfit-resto-aspect",
    "pupugu02/absa-setfit-resto-polarity",
)
# Run inference
preds = model("The food was great, but the venue is just way too busy.")

Training Details

Training Set Metrics

Training set	Min	Median	Max
Word count	2	28.1010	61

Label	Training Sample Count
no aspect	2653
aspect	406

Training Hyperparameters

• batch_size: (128, 128)
• num_epochs: (1, 1)
• max_steps: -1
• sampling_strategy: oversampling
• body_learning_rate: (2e-05, 1e-05)
• head_learning_rate: 0.01
• loss: CosineSimilarityLoss
• distance_metric: cosine_distance
• margin: 0.25
• end_to_end: False
• use_amp: True
• warmup_proportion: 0.1
• seed: 42
• eval_max_steps: -1
• load_best_model_at_end: False

Training Results

Epoch	Step	Training Loss	Validation Loss
0.0000	1	0.3793	-
0.0009	50	0.3641	-
0.0018	100	0.3647	-
0.0027	150	0.3221	-
0.0036	200	0.2554	-
0.0044	250	0.2202	-
0.0053	300	0.1798	-
0.0062	350	0.1139	-
0.0071	400	0.1069	-
0.0080	450	0.127	-
0.0089	500	0.1267	-
0.0098	550	0.0727	-
0.0107	600	0.1005	-
0.0115	650	0.0816	-
0.0124	700	0.0915	-
0.0133	750	0.0931	-
0.0142	800	0.0555	-
0.0151	850	0.0567	-
0.0160	900	0.0599	-
0.0169	950	0.0594	-
0.0178	1000	0.0586	-
0.0187	1050	0.0639	-
0.0195	1100	0.0357	-
0.0204	1150	0.0363	-
0.0213	1200	0.0316	-
0.0222	1250	0.0372	-
0.0231	1300	0.0296	-
0.0240	1350	0.0178	-
0.0249	1400	0.0157	-
0.0258	1450	0.0206	-
0.0266	1500	0.0131	-
0.0275	1550	0.018	-
0.0284	1600	0.0175	-
0.0293	1650	0.024	-
0.0302	1700	0.0313	-
0.0311	1750	0.0125	-
0.0320	1800	0.0319	-
0.0329	1850	0.0214	-
0.0337	1900	0.0031	-
0.0346	1950	0.0109	-
0.0355	2000	0.011	-
0.0364	2050	0.0019	-
0.0373	2100	0.0256	-
0.0382	2150	0.0091	-
0.0391	2200	0.0123	-
0.0400	2250	0.0077	-
0.0409	2300	0.0073	-
0.0417	2350	0.01	-
0.0426	2400	0.0111	-
0.0435	2450	0.0134	-
0.0444	2500	0.0146	-
0.0453	2550	0.0116	-
0.0462	2600	0.0066	-
0.0471	2650	0.0045	-
0.0480	2700	0.0049	-
0.0488	2750	0.0022	-
0.0497	2800	0.0093	-
0.0506	2850	0.0084	-
0.0515	2900	0.0174	-
0.0524	2950	0.0104	-
0.0533	3000	0.0143	-
0.0542	3050	0.0089	-
0.0551	3100	0.0099	-
0.0560	3150	0.0041	-
0.0568	3200	0.0006	-
0.0577	3250	0.0212	-
0.0586	3300	0.0097	-
0.0595	3350	0.0122	-
0.0604	3400	0.0064	-
0.0613	3450	0.0222	-
0.0622	3500	0.0044	-
0.0631	3550	0.0036	-
0.0639	3600	0.0091	-
0.0648	3650	0.0121	-
0.0657	3700	0.0086	-
0.0666	3750	0.0123	-
0.0675	3800	0.0188	-
0.0684	3850	0.0107	-
0.0693	3900	0.0156	-
0.0702	3950	0.0013	-
0.0710	4000	0.0183	-
0.0719	4050	0.0181	-
0.0728	4100	0.0221	-
0.0737	4150	0.0071	-
0.0746	4200	0.0143	-
0.0755	4250	0.0185	-
0.0764	4300	0.0077	-
0.0773	4350	0.0142	-
0.0782	4400	0.0011	-
0.0790	4450	0.0048	-
0.0799	4500	0.0284	-
0.0808	4550	0.0131	-
0.0817	4600	0.0176	-
0.0826	4650	0.0201	-
0.0835	4700	0.0124	-
0.0844	4750	0.0161	-
0.0853	4800	0.0086	-
0.0861	4850	0.0059	-
0.0870	4900	0.0013	-
0.0879	4950	0.0131	-
0.0888	5000	0.0049	-
0.0897	5050	0.0254	-
0.0906	5100	0.0003	-
0.0915	5150	0.0081	-
0.0924	5200	0.0084	-
0.0933	5250	0.0094	-
0.0941	5300	0.0055	-
0.0950	5350	0.002	-
0.0959	5400	0.0145	-
0.0968	5450	0.0071	-
0.0977	5500	0.0132	-
0.0986	5550	0.0396	-
0.0995	5600	0.0137	-
0.1004	5650	0.0126	-
0.1012	5700	0.0133	-
0.1021	5750	0.0044	-
0.1030	5800	0.0082	-
0.1039	5850	0.0081	-
0.1048	5900	0.0129	-
0.1057	5950	0.0105	-
0.1066	6000	0.0205	-
0.1075	6050	0.0056	-
0.1083	6100	0.0174	-
0.1092	6150	0.0128	-
0.1101	6200	0.0044	-
0.1110	6250	0.0015	-
0.1119	6300	0.0074	-
0.1128	6350	0.0095	-
0.1137	6400	0.0106	-
0.1146	6450	0.0129	-
0.1155	6500	0.0174	-
0.1163	6550	0.0113	-
0.1172	6600	0.0095	-
0.1181	6650	0.0016	-
0.1190	6700	0.0074	-
0.1199	6750	0.0049	-
0.1208	6800	0.0178	-
0.1217	6850	0.0176	-
0.1226	6900	0.0014	-
0.1234	6950	0.0113	-
0.1243	7000	0.0069	-
0.1252	7050	0.0064	-
0.1261	7100	0.0054	-
0.1270	7150	0.008	-
0.1279	7200	0.0327	-
0.1288	7250	0.0104	-
0.1297	7300	0.0102	-
0.1306	7350	0.0163	-
0.1314	7400	0.0126	-
0.1323	7450	0.0014	-
0.1332	7500	0.0053	-
0.1341	7550	0.0102	-
0.1350	7600	0.0223	-
0.1359	7650	0.0083	-
0.1368	7700	0.003	-
0.1377	7750	0.0185	-
0.1385	7800	0.0083	-
0.1394	7850	0.0148	-
0.1403	7900	0.0172	-
0.1412	7950	0.0199	-
0.1421	8000	0.0082	-
0.1430	8050	0.0091	-
0.1439	8100	0.0098	-
0.1448	8150	0.0165	-
0.1456	8200	0.0087	-
0.1465	8250	0.001	-
0.1474	8300	0.0113	-
0.1483	8350	0.007	-
0.1492	8400	0.0034	-
0.1501	8450	0.0029	-
0.1510	8500	0.0235	-
0.1519	8550	0.0088	-
0.1528	8600	0.0164	-
0.1536	8650	0.0071	-
0.1545	8700	0.0111	-
0.1554	8750	0.004	-
0.1563	8800	0.0068	-
0.1572	8850	0.0093	-
0.1581	8900	0.0015	-
0.1590	8950	0.0056	-
0.1599	9000	0.0122	-
0.1607	9050	0.018	-
0.1616	9100	0.0165	-
0.1625	9150	0.02	-
0.1634	9200	0.0149	-
0.1643	9250	0.0057	-
0.1652	9300	0.0072	-
0.1661	9350	0.0073	-
0.1670	9400	0.0097	-
0.1679	9450	0.0059	-
0.1687	9500	0.0072	-
0.1696	9550	0.0076	-
0.1705	9600	0.0102	-
0.1714	9650	0.0077	-
0.1723	9700	0.0016	-
0.1732	9750	0.0176	-
0.1741	9800	0.0039	-
0.1750	9850	0.0085	-
0.1758	9900	0.008	-
0.1767	9950	0.0113	-
0.1776	10000	0.0093	-
0.1785	10050	0.0229	-
0.1794	10100	0.0063	-
0.1803	10150	0.0062	-
0.1812	10200	0.001	-
0.1821	10250	0.0115	-
0.1829	10300	0.0012	-
0.1838	10350	0.0106	-
0.1847	10400	0.0095	-
0.1856	10450	0.0287	-
0.1865	10500	0.003	-
0.1874	10550	0.0141	-
0.1883	10600	0.0051	-
0.1892	10650	0.0028	-
0.1901	10700	0.0208	-
0.1909	10750	0.01	-
0.1918	10800	0.008	-
0.1927	10850	0.0119	-
0.1936	10900	0.0229	-
0.1945	10950	0.0037	-
0.1954	11000	0.0132	-
0.1963	11050	0.0074	-
0.1972	11100	0.0073	-
0.1980	11150	0.0154	-
0.1989	11200	0.0086	-
0.1998	11250	0.0206	-
0.2007	11300	0.0067	-
0.2016	11350	0.0142	-
0.2025	11400	0.0104	-
0.2034	11450	0.011	-
0.2043	11500	0.0113	-
0.2052	11550	0.0048	-
0.2060	11600	0.0008	-
0.2069	11650	0.0056	-
0.2078	11700	0.0017	-
0.2087	11750	0.0263	-
0.2096	11800	0.0198	-
0.2105	11850	0.0052	-
0.2114	11900	0.0055	-
0.2123	11950	0.0039	-
0.2131	12000	0.0058	-
0.2140	12050	0.0206	-
0.2149	12100	0.0122	-
0.2158	12150	0.009	-
0.2167	12200	0.0019	-
0.2176	12250	0.0067	-
0.2185	12300	0.0059	-
0.2194	12350	0.0107	-
0.2202	12400	0.0003	-
0.2211	12450	0.0131	-
0.2220	12500	0.0069	-
0.2229	12550	0.0019	-
0.2238	12600	0.0012	-
0.2247	12650	0.0104	-
0.2256	12700	0.0051	-
0.2265	12750	0.0062	-
0.2274	12800	0.004	-
0.2282	12850	0.0121	-
0.2291	12900	0.0144	-
0.2300	12950	0.015	-
0.2309	13000	0.0191	-
0.2318	13050	0.0152	-
0.2327	13100	0.006	-
0.2336	13150	0.01	-
0.2345	13200	0.0123	-
0.2353	13250	0.0029	-
0.2362	13300	0.0036	-
0.2371	13350	0.0005	-
0.2380	13400	0.0065	-
0.2389	13450	0.0139	-
0.2398	13500	0.0056	-
0.2407	13550	0.0079	-
0.2416	13600	0.0024	-
0.2425	13650	0.0062	-
0.2433	13700	0.0082	-
0.2442	13750	0.0007	-
0.2451	13800	0.0093	-
0.2460	13850	0.007	-
0.2469	13900	0.009	-
0.2478	13950	0.0164	-
0.2487	14000	0.027	-
0.2496	14050	0.0243	-
0.2504	14100	0.0014	-
0.2513	14150	0.0072	-
0.2522	14200	0.014	-
0.2531	14250	0.0139	-
0.2540	14300	0.005	-
0.2549	14350	0.0129	-
0.2558	14400	0.0153	-
0.2567	14450	0.0035	-
0.2575	14500	0.0062	-
0.2584	14550	0.0017	-
0.2593	14600	0.0232	-
0.2602	14650	0.016	-
0.2611	14700	0.0011	-
0.2620	14750	0.0083	-
0.2629	14800	0.0202	-
0.2638	14850	0.0084	-
0.2647	14900	0.0132	-
0.2655	14950	0.0148	-
0.2664	15000	0.0061	-
0.2673	15050	0.0062	-
0.2682	15100	0.0118	-
0.2691	15150	0.0066	-
0.2700	15200	0.0007	-
0.2709	15250	0.0085	-
0.2718	15300	0.0093	-
0.2726	15350	0.0197	-
0.2735	15400	0.014	-
0.2744	15450	0.0023	-
0.2753	15500	0.0005	-
0.2762	15550	0.0059	-
0.2771	15600	0.0024	-
0.2780	15650	0.0139	-
0.2789	15700	0.0107	-
0.2798	15750	0.0063	-
0.2806	15800	0.0092	-
0.2815	15850	0.0212	-
0.2824	15900	0.0121	-
0.2833	15950	0.0011	-
0.2842	16000	0.013	-
0.2851	16050	0.0126	-
0.2860	16100	0.0107	-
0.2869	16150	0.0162	-
0.2877	16200	0.0109	-
0.2886	16250	0.0129	-
0.2895	16300	0.002	-
0.2904	16350	0.0098	-
0.2913	16400	0.0058	-
0.2922	16450	0.0186	-
0.2931	16500	0.0092	-
0.2940	16550	0.007	-
0.2948	16600	0.0147	-
0.2957	16650	0.0066	-
0.2966	16700	0.0137	-
0.2975	16750	0.0064	-
0.2984	16800	0.0085	-
0.2993	16850	0.0184	-
0.3002	16900	0.0187	-
0.3011	16950	0.0026	-
0.3020	17000	0.0087	-
0.3028	17050	0.0161	-
0.3037	17100	0.002	-
0.3046	17150	0.0007	-
0.3055	17200	0.0083	-
0.3064	17250	0.0057	-
0.3073	17300	0.007	-
0.3082	17350	0.0063	-
0.3091	17400	0.0021	-
0.3099	17450	0.0014	-
0.3108	17500	0.0156	-
0.3117	17550	0.0072	-
0.3126	17600	0.0017	-
0.3135	17650	0.002	-
0.3144	17700	0.0055	-
0.3153	17750	0.005	-
0.3162	17800	0.0067	-
0.3171	17850	0.0007	-
0.3179	17900	0.0019	-
0.3188	17950	0.0125	-
0.3197	18000	0.0157	-
0.3206	18050	0.0087	-
0.3215	18100	0.0051	-
0.3224	18150	0.0102	-
0.3233	18200	0.0147	-
0.3242	18250	0.0161	-
0.3250	18300	0.0068	-
0.3259	18350	0.0199	-
0.3268	18400	0.0101	-
0.3277	18450	0.0132	-
0.3286	18500	0.0028	-
0.3295	18550	0.0127	-
0.3304	18600	0.0089	-
0.3313	18650	0.0111	-
0.3321	18700	0.006	-
0.3330	18750	0.0062	-
0.3339	18800	0.0006	-
0.3348	18850	0.0063	-
0.3357	18900	0.0005	-
0.3366	18950	0.0024	-
0.3375	19000	0.019	-
0.3384	19050	0.0101	-
0.3393	19100	0.0073	-
0.3401	19150	0.0031	-
0.3410	19200	0.0108	-
0.3419	19250	0.0024	-
0.3428	19300	0.0137	-
0.3437	19350	0.0137	-
0.3446	19400	0.0064	-
0.3455	19450	0.0057	-
0.3464	19500	0.0076	-
0.3472	19550	0.0065	-
0.3481	19600	0.0008	-
0.3490	19650	0.0048	-
0.3499	19700	0.005	-
0.3508	19750	0.0047	-
0.3517	19800	0.0219	-
0.3526	19850	0.0181	-
0.3535	19900	0.0059	-
0.3544	19950	0.0071	-
0.3552	20000	0.0058	-
0.3561	20050	0.0113	-
0.3570	20100	0.0063	-
0.3579	20150	0.0082	-
0.3588	20200	0.0203	-
0.3597	20250	0.0027	-
0.3606	20300	0.0118	-
0.3615	20350	0.0165	-
0.3623	20400	0.0095	-
0.3632	20450	0.0084	-
0.3641	20500	0.0101	-
0.3650	20550	0.014	-
0.3659	20600	0.0062	-
0.3668	20650	0.004	-
0.3677	20700	0.0131	-
0.3686	20750	0.0123	-
0.3694	20800	0.0093	-
0.3703	20850	0.0232	-
0.3712	20900	0.0027	-
0.3721	20950	0.0156	-
0.3730	21000	0.0034	-
0.3739	21050	0.0143	-
0.3748	21100	0.0058	-
0.3757	21150	0.0115	-
0.3766	21200	0.0051	-
0.3774	21250	0.0008	-
0.3783	21300	0.0007	-
0.3792	21350	0.0035	-
0.3801	21400	0.0056	-
0.3810	21450	0.0128	-
0.3819	21500	0.0079	-
0.3828	21550	0.0127	-
0.3837	21600	0.0085	-
0.3845	21650	0.0173	-
0.3854	21700	0.0015	-
0.3863	21750	0.0184	-
0.3872	21800	0.0091	-
0.3881	21850	0.0007	-
0.3890	21900	0.0035	-
0.3899	21950	0.011	-
0.3908	22000	0.004	-
0.3917	22050	0.012	-
0.3925	22100	0.0109	-
0.3934	22150	0.0129	-
0.3943	22200	0.0056	-
0.3952	22250	0.0095	-
0.3961	22300	0.0107	-
0.3970	22350	0.0083	-
0.3979	22400	0.0102	-
0.3988	22450	0.0138	-
0.3996	22500	0.0053	-
0.4005	22550	0.0075	-
0.4014	22600	0.0079	-
0.4023	22650	0.0063	-
0.4032	22700	0.0011	-
0.4041	22750	0.0048	-
0.4050	22800	0.0012	-
0.4059	22850	0.001	-
0.4067	22900	0.0088	-
0.4076	22950	0.0087	-
0.4085	23000	0.0007	-
0.4094	23050	0.0247	-
0.4103	23100	0.0065	-
0.4112	23150	0.0037	-
0.4121	23200	0.0011	-
0.4130	23250	0.0114	-
0.4139	23300	0.0109	-
0.4147	23350	0.0135	-
0.4156	23400	0.0164	-
0.4165	23450	0.0069	-
0.4174	23500	0.006	-
0.4183	23550	0.0069	-
0.4192	23600	0.0047	-
0.4201	23650	0.0149	-
0.4210	23700	0.0113	-
0.4218	23750	0.0066	-
0.4227	23800	0.0113	-
0.4236	23850	0.0111	-
0.4245	23900	0.0207	-
0.4254	23950	0.0206	-
0.4263	24000	0.0136	-
0.4272	24050	0.009	-
0.4281	24100	0.0122	-
0.4290	24150	0.0065	-
0.4298	24200	0.0074	-
0.4307	24250	0.0207	-
0.4316	24300	0.0004	-
0.4325	24350	0.0125	-
0.4334	24400	0.0147	-
0.4343	24450	0.0025	-
0.4352	24500	0.0116	-
0.4361	24550	0.0101	-
0.4369	24600	0.005	-
0.4378	24650	0.0018	-
0.4387	24700	0.0125	-
0.4396	24750	0.0027	-
0.4405	24800	0.0213	-
0.4414	24850	0.0162	-
0.4423	24900	0.0062	-
0.4432	24950	0.0089	-
0.4440	25000	0.0056	-
0.4449	25050	0.0141	-
0.4458	25100	0.0123	-
0.4467	25150	0.0003	-
0.4476	25200	0.0157	-
0.4485	25250	0.03	-
0.4494	25300	0.0067	-
0.4503	25350	0.0009	-
0.4512	25400	0.0125	-
0.4520	25450	0.0066	-
0.4529	25500	0.0133	-
0.4538	25550	0.0064	-
0.4547	25600	0.0104	-
0.4556	25650	0.0043	-
0.4565	25700	0.0068	-
0.4574	25750	0.0067	-
0.4583	25800	0.0088	-
0.4591	25850	0.0039	-
0.4600	25900	0.0122	-
0.4609	25950	0.0181	-
0.4618	26000	0.0058	-
0.4627	26050	0.0208	-
0.4636	26100	0.0107	-
0.4645	26150	0.0066	-
0.4654	26200	0.0072	-
0.4663	26250	0.0046	-
0.4671	26300	0.0004	-
0.4680	26350	0.0021	-
0.4689	26400	0.013	-
0.4698	26450	0.0141	-
0.4707	26500	0.001	-
0.4716	26550	0.001	-
0.4725	26600	0.0023	-
0.4734	26650	0.0106	-
0.4742	26700	0.0023	-
0.4751	26750	0.0082	-
0.4760	26800	0.0014	-
0.4769	26850	0.0063	-
0.4778	26900	0.0022	-
0.4787	26950	0.0059	-
0.4796	27000	0.0011	-
0.4805	27050	0.0082	-
0.4813	27100	0.0034	-
0.4822	27150	0.0107	-
0.4831	27200	0.0004	-
0.4840	27250	0.0112	-
0.4849	27300	0.0079	-
0.4858	27350	0.0069	-
0.4867	27400	0.0116	-
0.4876	27450	0.0069	-
0.4885	27500	0.0103	-
0.4893	27550	0.0072	-
0.4902	27600	0.0029	-
0.4911	27650	0.0073	-
0.4920	27700	0.0143	-
0.4929	27750	0.0024	-
0.4938	27800	0.0142	-
0.4947	27850	0.0119	-
0.4956	27900	0.01	-
0.4964	27950	0.0057	-
0.4973	28000	0.015	-
0.4982	28050	0.0108	-
0.4991	28100	0.0054	-
0.5	28150	0.0017	-
0.5009	28200	0.0079	-
0.5018	28250	0.0232	-
0.5027	28300	0.0108	-
0.5036	28350	0.0024	-
0.5044	28400	0.0094	-
0.5053	28450	0.0142	-
0.5062	28500	0.0133	-
0.5071	28550	0.0048	-
0.5080	28600	0.0108	-
0.5089	28650	0.0061	-
0.5098	28700	0.0241	-
0.5107	28750	0.0105	-
0.5115	28800	0.0162	-
0.5124	28850	0.0012	-
0.5133	28900	0.0074	-
0.5142	28950	0.0055	-
0.5151	29000	0.007	-
0.5160	29050	0.0031	-
0.5169	29100	0.0105	-
0.5178	29150	0.0039	-
0.5187	29200	0.011	-
0.5195	29250	0.0192	-
0.5204	29300	0.0021	-
0.5213	29350	0.0033	-
0.5222	29400	0.0082	-
0.5231	29450	0.0068	-
0.5240	29500	0.0038	-
0.5249	29550	0.0051	-
0.5258	29600	0.0068	-
0.5266	29650	0.0084	-
0.5275	29700	0.0201	-
0.5284	29750	0.0088	-
0.5293	29800	0.0111	-
0.5302	29850	0.006	-
0.5311	29900	0.0123	-
0.5320	29950	0.0067	-
0.5329	30000	0.0053	-
0.5337	30050	0.0052	-
0.5346	30100	0.0075	-
0.5355	30150	0.0126	-
0.5364	30200	0.0005	-
0.5373	30250	0.0076	-
0.5382	30300	0.012	-
0.5391	30350	0.0148	-
0.5400	30400	0.0072	-
0.5409	30450	0.0123	-
0.5417	30500	0.0073	-
0.5426	30550	0.0051	-
0.5435	30600	0.0052	-
0.5444	30650	0.0095	-
0.5453	30700	0.0062	-
0.5462	30750	0.0083	-
0.5471	30800	0.013	-
0.5480	30850	0.0072	-
0.5488	30900	0.0089	-
0.5497	30950	0.0073	-
0.5506	31000	0.0056	-
0.5515	31050	0.0026	-
0.5524	31100	0.006	-
0.5533	31150	0.0079	-
0.5542	31200	0.0138	-
0.5551	31250	0.0111	-
0.5560	31300	0.0104	-
0.5568	31350	0.0204	-
0.5577	31400	0.0058	-
0.5586	31450	0.0107	-
0.5595	31500	0.0027	-
0.5604	31550	0.0208	-
0.5613	31600	0.001	-
0.5622	31650	0.0062	-
0.5631	31700	0.0116	-
0.5639	31750	0.0034	-
0.5648	31800	0.0059	-
0.5657	31850	0.0118	-
0.5666	31900	0.0116	-
0.5675	31950	0.0074	-
0.5684	32000	0.0026	-
0.5693	32050	0.0122	-
0.5702	32100	0.014	-
0.5710	32150	0.0004	-
0.5719	32200	0.0169	-
0.5728	32250	0.0076	-
0.5737	32300	0.0066	-
0.5746	32350	0.0106	-
0.5755	32400	0.0063	-
0.5764	32450	0.0154	-
0.5773	32500	0.0062	-
0.5782	32550	0.0126	-
0.5790	32600	0.0077	-
0.5799	32650	0.0106	-
0.5808	32700	0.0179	-
0.5817	32750	0.0082	-
0.5826	32800	0.0064	-
0.5835	32850	0.0179	-
0.5844	32900	0.0063	-
0.5853	32950	0.0157	-
0.5861	33000	0.0237	-
0.5870	33050	0.0272	-
0.5879	33100	0.0091	-
0.5888	33150	0.0023	-
0.5897	33200	0.0114	-
0.5906	33250	0.001	-
0.5915	33300	0.0089	-
0.5924	33350	0.0077	-
0.5933	33400	0.0139	-
0.5941	33450	0.0021	-
0.5950	33500	0.0098	-
0.5959	33550	0.0009	-
0.5968	33600	0.002	-
0.5977	33650	0.0082	-
0.5986	33700	0.0204	-
0.5995	33750	0.0026	-
0.6004	33800	0.0116	-
0.6012	33850	0.0063	-
0.6021	33900	0.005	-
0.6030	33950	0.0111	-
0.6039	34000	0.0013	-
0.6048	34050	0.0153	-
0.6057	34100	0.0223	-
0.6066	34150	0.0094	-
0.6075	34200	0.012	-
0.6083	34250	0.0202	-
0.6092	34300	0.0015	-
0.6101	34350	0.0063	-
0.6110	34400	0.0052	-
0.6119	34450	0.0034	-
0.6128	34500	0.0075	-
0.6137	34550	0.0062	-
0.6146	34600	0.0061	-
0.6155	34650	0.0176	-
0.6163	34700	0.0074	-
0.6172	34750	0.0006	-
0.6181	34800	0.0056	-
0.6190	34850	0.0059	-
0.6199	34900	0.0069	-
0.6208	34950	0.0081	-
0.6217	35000	0.0161	-
0.6226	35050	0.0223	-
0.6234	35100	0.0118	-
0.6243	35150	0.0024	-
0.6252	35200	0.0106	-
0.6261	35250	0.0135	-
0.6270	35300	0.0068	-
0.6279	35350	0.0062	-
0.6288	35400	0.0081	-
0.6297	35450	0.0166	-
0.6306	35500	0.0055	-
0.6314	35550	0.0211	-
0.6323	35600	0.0032	-
0.6332	35650	0.0017	-
0.6341	35700	0.0012	-
0.6350	35750	0.0185	-
0.6359	35800	0.0056	-
0.6368	35850	0.0008	-
0.6377	35900	0.0072	-
0.6385	35950	0.007	-
0.6394	36000	0.0082	-
0.6403	36050	0.0061	-
0.6412	36100	0.002	-
0.6421	36150	0.0084	-
0.6430	36200	0.0111	-
0.6439	36250	0.0091	-
0.6448	36300	0.0112	-
0.6456	36350	0.0074	-
0.6465	36400	0.0056	-
0.6474	36450	0.0071	-
0.6483	36500	0.007	-
0.6492	36550	0.0011	-
0.6501	36600	0.0052	-
0.6510	36650	0.016	-
0.6519	36700	0.0103	-
0.6528	36750	0.0119	-
0.6536	36800	0.0114	-
0.6545	36850	0.0093	-
0.6554	36900	0.0017	-
0.6563	36950	0.001	-
0.6572	37000	0.0067	-
0.6581	37050	0.0025	-
0.6590	37100	0.0059	-
0.6599	37150	0.0066	-
0.6607	37200	0.0181	-
0.6616	37250	0.01	-
0.6625	37300	0.0192	-
0.6634	37350	0.0039	-
0.6643	37400	0.0207	-
0.6652	37450	0.0005	-
0.6661	37500	0.0006	-
0.6670	37550	0.0056	-
0.6679	37600	0.0122	-
0.6687	37650	0.0049	-
0.6696	37700	0.0113	-
0.6705	37750	0.0086	-
0.6714	37800	0.0064	-
0.6723	37850	0.0008	-
0.6732	37900	0.0025	-
0.6741	37950	0.0167	-
0.6750	38000	0.0018	-
0.6758	38050	0.0034	-
0.6767	38100	0.0011	-
0.6776	38150	0.0067	-
0.6785	38200	0.0147	-
0.6794	38250	0.0169	-
0.6803	38300	0.0159	-
0.6812	38350	0.0081	-
0.6821	38400	0.0157	-
0.6829	38450	0.0088	-
0.6838	38500	0.0075	-
0.6847	38550	0.0131	-
0.6856	38600	0.0048	-
0.6865	38650	0.0104	-
0.6874	38700	0.0059	-
0.6883	38750	0.0035	-
0.6892	38800	0.0025	-
0.6901	38850	0.0062	-
0.6909	38900	0.019	-
0.6918	38950	0.013	-
0.6927	39000	0.0097	-
0.6936	39050	0.0062	-
0.6945	39100	0.0114	-
0.6954	39150	0.0149	-
0.6963	39200	0.003	-
0.6972	39250	0.003	-
0.6980	39300	0.011	-
0.6989	39350	0.0055	-
0.6998	39400	0.0082	-
0.7007	39450	0.0007	-
0.7016	39500	0.0113	-
0.7025	39550	0.0156	-
0.7034	39600	0.0108	-
0.7043	39650	0.0059	-
0.7052	39700	0.0045	-
0.7060	39750	0.0016	-
0.7069	39800	0.0092	-
0.7078	39850	0.0123	-
0.7087	39900	0.0095	-
0.7096	39950	0.0027	-
0.7105	40000	0.0161	-
0.7114	40050	0.006	-
0.7123	40100	0.0107	-
0.7131	40150	0.0064	-
0.7140	40200	0.0118	-
0.7149	40250	0.0124	-
0.7158	40300	0.0054	-
0.7167	40350	0.0141	-
0.7176	40400	0.0048	-
0.7185	40450	0.0021	-
0.7194	40500	0.0025	-
0.7202	40550	0.0108	-
0.7211	40600	0.0111	-
0.7220	40650	0.0201	-
0.7229	40700	0.0056	-
0.7238	40750	0.0215	-
0.7247	40800	0.0108	-
0.7256	40850	0.0055	-
0.7265	40900	0.0078	-
0.7274	40950	0.0106	-
0.7282	41000	0.0089	-
0.7291	41050	0.0029	-
0.7300	41100	0.03	-
0.7309	41150	0.0067	-
0.7318	41200	0.0065	-
0.7327	41250	0.0012	-
0.7336	41300	0.0142	-
0.7345	41350	0.0027	-
0.7353	41400	0.0069	-
0.7362	41450	0.0126	-
0.7371	41500	0.002	-
0.7380	41550	0.0027	-
0.7389	41600	0.0027	-
0.7398	41650	0.0204	-
0.7407	41700	0.0114	-
0.7416	41750	0.0059	-
0.7425	41800	0.0024	-
0.7433	41850	0.0062	-
0.7442	41900	0.0059	-
0.7451	41950	0.0092	-
0.7460	42000	0.0009	-
0.7469	42050	0.0055	-
0.7478	42100	0.0088	-
0.7487	42150	0.0025	-
0.7496	42200	0.0016	-
0.7504	42250	0.0059	-
0.7513	42300	0.0077	-
0.7522	42350	0.0072	-
0.7531	42400	0.025	-
0.7540	42450	0.0111	-
0.7549	42500	0.0165	-
0.7558	42550	0.0114	-
0.7567	42600	0.0049	-
0.7575	42650	0.0099	-
0.7584	42700	0.0051	-
0.7593	42750	0.0058	-
0.7602	42800	0.0132	-
0.7611	42850	0.0184	-
0.7620	42900	0.0043	-
0.7629	42950	0.0138	-
0.7638	43000	0.0197	-
0.7647	43050	0.0085	-
0.7655	43100	0.0012	-
0.7664	43150	0.0107	-
0.7673	43200	0.0161	-
0.7682	43250	0.0059	-
0.7691	43300	0.0067	-
0.7700	43350	0.0257	-
0.7709	43400	0.0128	-
0.7718	43450	0.012	-
0.7726	43500	0.0016	-
0.7735	43550	0.0004	-
0.7744	43600	0.002	-
0.7753	43650	0.0208	-
0.7762	43700	0.0229	-
0.7771	43750	0.0103	-
0.7780	43800	0.0027	-
0.7789	43850	0.006	-
0.7798	43900	0.0082	-
0.7806	43950	0.0014	-
0.7815	44000	0.01	-
0.7824	44050	0.0113	-
0.7833	44100	0.0111	-
0.7842	44150	0.0108	-
0.7851	44200	0.011	-
0.7860	44250	0.0198	-
0.7869	44300	0.0114	-
0.7877	44350	0.001	-
0.7886	44400	0.0083	-
0.7895	44450	0.006	-
0.7904	44500	0.0115	-
0.7913	44550	0.0106	-
0.7922	44600	0.0064	-
0.7931	44650	0.0141	-
0.7940	44700	0.0089	-
0.7948	44750	0.0054	-
0.7957	44800	0.0134	-
0.7966	44850	0.0172	-
0.7975	44900	0.003	-
0.7984	44950	0.0173	-
0.7993	45000	0.0079	-
0.8002	45050	0.0171	-
0.8011	45100	0.0003	-
0.8020	45150	0.0029	-
0.8028	45200	0.008	-
0.8037	45250	0.0204	-
0.8046	45300	0.0018	-
0.8055	45350	0.0065	-
0.8064	45400	0.0064	-
0.8073	45450	0.0057	-
0.8082	45500	0.0014	-
0.8091	45550	0.009	-
0.8099	45600	0.0109	-
0.8108	45650	0.0012	-
0.8117	45700	0.0018	-
0.8126	45750	0.0035	-
0.8135	45800	0.0101	-
0.8144	45850	0.0201	-
0.8153	45900	0.0135	-
0.8162	45950	0.0016	-
0.8171	46000	0.0065	-
0.8179	46050	0.0184	-
0.8188	46100	0.0146	-
0.8197	46150	0.017	-
0.8206	46200	0.0072	-
0.8215	46250	0.005	-
0.8224	46300	0.003	-
0.8233	46350	0.0015	-
0.8242	46400	0.0357	-
0.8250	46450	0.0006	-
0.8259	46500	0.0026	-
0.8268	46550	0.0015	-
0.8277	46600	0.0016	-
0.8286	46650	0.0087	-
0.8295	46700	0.0063	-
0.8304	46750	0.0147	-
0.8313	46800	0.0016	-
0.8321	46850	0.0119	-
0.8330	46900	0.0015	-
0.8339	46950	0.0024	-
0.8348	47000	0.0113	-
0.8357	47050	0.0031	-
0.8366	47100	0.0071	-
0.8375	47150	0.0114	-
0.8384	47200	0.005	-
0.8393	47250	0.0007	-
0.8401	47300	0.005	-
0.8410	47350	0.0068	-
0.8419	47400	0.0102	-
0.8428	47450	0.0004	-
0.8437	47500	0.0185	-
0.8446	47550	0.0066	-
0.8455	47600	0.0168	-
0.8464	47650	0.0121	-
0.8472	47700	0.012	-
0.8481	47750	0.0185	-
0.8490	47800	0.0254	-
0.8499	47850	0.0164	-
0.8508	47900	0.0057	-
0.8517	47950	0.0168	-
0.8526	48000	0.01	-
0.8535	48050	0.0008	-
0.8544	48100	0.0054	-
0.8552	48150	0.0062	-
0.8561	48200	0.0079	-
0.8570	48250	0.0123	-
0.8579	48300	0.0073	-
0.8588	48350	0.0056	-
0.8597	48400	0.0008	-
0.8606	48450	0.0157	-
0.8615	48500	0.0072	-
0.8623	48550	0.0071	-
0.8632	48600	0.0059	-
0.8641	48650	0.0102	-
0.8650	48700	0.0014	-
0.8659	48750	0.0066	-
0.8668	48800	0.0065	-
0.8677	48850	0.0058	-
0.8686	48900	0.0034	-
0.8694	48950	0.014	-
0.8703	49000	0.0091	-
0.8712	49050	0.002	-
0.8721	49100	0.0059	-
0.8730	49150	0.0175	-
0.8739	49200	0.0103	-
0.8748	49250	0.0057	-
0.8757	49300	0.0032	-
0.8766	49350	0.011	-
0.8774	49400	0.0242	-
0.8783	49450	0.0044	-
0.8792	49500	0.0135	-
0.8801	49550	0.0061	-
0.8810	49600	0.0135	-
0.8819	49650	0.0016	-
0.8828	49700	0.0022	-
0.8837	49750	0.0082	-
0.8845	49800	0.0126	-
0.8854	49850	0.0	-
0.8863	49900	0.0137	-
0.8872	49950	0.0119	-
0.8881	50000	0.0066	-
0.8890	50050	0.0109	-
0.8899	50100	0.0025	-
0.8908	50150	0.0119	-
0.8917	50200	0.0035	-
0.8925	50250	0.002	-
0.8934	50300	0.0112	-
0.8943	50350	0.0132	-
0.8952	50400	0.0048	-
0.8961	50450	0.0008	-
0.8970	50500	0.0114	-
0.8979	50550	0.0139	-
0.8988	50600	0.0019	-
0.8996	50650	0.0116	-
0.9005	50700	0.008	-
0.9014	50750	0.0218	-
0.9023	50800	0.0008	-
0.9032	50850	0.0087	-
0.9041	50900	0.0156	-
0.9050	50950	0.0117	-
0.9059	51000	0.0109	-
0.9067	51050	0.0075	-
0.9076	51100	0.0069	-
0.9085	51150	0.0064	-
0.9094	51200	0.0075	-
0.9103	51250	0.0049	-
0.9112	51300	0.0061	-
0.9121	51350	0.0007	-
0.9130	51400	0.0066	-
0.9139	51450	0.0016	-
0.9147	51500	0.001	-
0.9156	51550	0.0027	-
0.9165	51600	0.007	-
0.9174	51650	0.0055	-
0.9183	51700	0.0089	-
0.9192	51750	0.0035	-
0.9201	51800	0.0068	-
0.9210	51850	0.015	-
0.9218	51900	0.009	-
0.9227	51950	0.0117	-
0.9236	52000	0.0014	-
0.9245	52050	0.0058	-
0.9254	52100	0.001	-
0.9263	52150	0.0143	-
0.9272	52200	0.0064	-
0.9281	52250	0.0	-
0.9290	52300	0.0025	-
0.9298	52350	0.0074	-
0.9307	52400	0.0173	-
0.9316	52450	0.0028	-
0.9325	52500	0.0103	-
0.9334	52550	0.005	-
0.9343	52600	0.0073	-
0.9352	52650	0.0049	-
0.9361	52700	0.0023	-
0.9369	52750	0.0141	-
0.9378	52800	0.0116	-
0.9387	52850	0.01	-
0.9396	52900	0.0062	-
0.9405	52950	0.006	-
0.9414	53000	0.0011	-
0.9423	53050	0.0148	-
0.9432	53100	0.0012	-
0.9440	53150	0.0096	-
0.9449	53200	0.0035	-
0.9458	53250	0.012	-
0.9467	53300	0.0054	-
0.9476	53350	0.0032	-
0.9485	53400	0.0112	-
0.9494	53450	0.007	-
0.9503	53500	0.0098	-
0.9512	53550	0.0075	-
0.9520	53600	0.0116	-
0.9529	53650	0.002	-
0.9538	53700	0.0114	-
0.9547	53750	0.0168	-
0.9556	53800	0.0107	-
0.9565	53850	0.0052	-
0.9574	53900	0.0004	-
0.9583	53950	0.0114	-
0.9591	54000	0.0068	-
0.9600	54050	0.009	-
0.9609	54100	0.0027	-
0.9618	54150	0.0063	-
0.9627	54200	0.01	-
0.9636	54250	0.0099	-
0.9645	54300	0.0116	-
0.9654	54350	0.0126	-
0.9663	54400	0.003	-
0.9671	54450	0.0063	-
0.9680	54500	0.0096	-
0.9689	54550	0.0025	-
0.9698	54600	0.0166	-
0.9707	54650	0.0104	-
0.9716	54700	0.0179	-
0.9725	54750	0.0073	-
0.9734	54800	0.0069	-
0.9742	54850	0.0058	-
0.9751	54900	0.0199	-
0.9760	54950	0.0116	-
0.9769	55000	0.0072	-
0.9778	55050	0.0012	-
0.9787	55100	0.0064	-
0.9796	55150	0.0201	-
0.9805	55200	0.0138	-
0.9813	55250	0.0016	-
0.9822	55300	0.0208	-
0.9831	55350	0.015	-
0.9840	55400	0.0015	-
0.9849	55450	0.003	-
0.9858	55500	0.004	-
0.9867	55550	0.0064	-
0.9876	55600	0.0017	-
0.9885	55650	0.0059	-
0.9893	55700	0.0058	-
0.9902	55750	0.0004	-
0.9911	55800	0.0012	-
0.9920	55850	0.0054	-
0.9929	55900	0.0012	-
0.9938	55950	0.0055	-
0.9947	56000	0.0039	-
0.9956	56050	0.0079	-
0.9964	56100	0.0076	-
0.9973	56150	0.0038	-
0.9982	56200	0.0074	-
0.9991	56250	0.0066	-
1.0	56300	0.0237	-

Framework Versions

• Python: 3.10.12
• SetFit: 1.0.3
• Sentence Transformers: 3.0.0
• spaCy: 3.7.4
• Transformers: 4.36.2
• PyTorch: 2.3.0+cu121
• Datasets: 2.19.2
• Tokenizers: 0.15.2

Citation

BibTeX

@article{https://doi.org/10.48550/arxiv.2209.11055,
    doi = {10.48550/ARXIV.2209.11055},
    url = {https://arxiv.org/abs/2209.11055},
    author = {Tunstall, Lewis and Reimers, Nils and Jo, Unso Eun Seo and Bates, Luke and Korat, Daniel and Wasserblat, Moshe and Pereg, Oren},
    keywords = {Computation and Language (cs.CL), FOS: Computer and information sciences, FOS: Computer and information sciences},
    title = {Efficient Few-Shot Learning Without Prompts},
    publisher = {arXiv},
    year = {2022},
    copyright = {Creative Commons Attribution 4.0 International}
}