AlexWortega commited on
Commit
3d2dac1
1 Parent(s): 23cea90

Update README.md

Browse files
Files changed (1) hide show
  1. README.md +10 -1
README.md CHANGED
@@ -4,4 +4,13 @@ datasets:
4
  - IlyaGusev/habr
5
  language:
6
  - ru
7
- ---
 
 
 
 
 
 
 
 
 
 
4
  - IlyaGusev/habr
5
  language:
6
  - ru
7
+ ---
8
+ # VikhrT5-3b: Улучшенная модель на базе FLAN T5 3b для русского языка
9
+
10
+ Cкорее всего она лучше чем FRED T5XL
11
+
12
+ | Dataset | VikhrT5-3b | FRED-T5-XL(1.7b) | FLAN-t5-xl(3b) |
13
+ |----------------|------------|------------------|----------------|
14
+ | ru_mmlu | 0.32 | 0.252 | 0.28 (лол2) |
15
+ | xwinograd_ru | 0.71 (lol) | 0.57 | 0.52 |
16
+ | xnli_ru | 0.4280 | 0.34 | 0.33 |