End of training
Browse files- README.md +6 -1
- all_results.json +12 -6
- generated_predictions.txt +37 -37
- generation_config.json +1 -1
- predict_results.json +6 -6
- train_results.json +8 -0
- trainer_state.json +136 -0
README.md
CHANGED
@@ -1,8 +1,13 @@
|
|
1 |
---
|
|
|
|
|
|
|
2 |
license: mit
|
3 |
base_model: facebook/m2m100_1.2B
|
4 |
tags:
|
5 |
- generated_from_trainer
|
|
|
|
|
6 |
model-index:
|
7 |
- name: m2m100_1.2B_ft_kbd-ru_63K
|
8 |
results: []
|
@@ -13,7 +18,7 @@ should probably proofread and complete it, then remove this comment. -->
|
|
13 |
|
14 |
# m2m100_1.2B_ft_kbd-ru_63K
|
15 |
|
16 |
-
This model is a fine-tuned version of [facebook/m2m100_1.2B](https://huggingface.co/facebook/m2m100_1.2B) on
|
17 |
|
18 |
## Model description
|
19 |
|
|
|
1 |
---
|
2 |
+
language:
|
3 |
+
- zu
|
4 |
+
- ru
|
5 |
license: mit
|
6 |
base_model: facebook/m2m100_1.2B
|
7 |
tags:
|
8 |
- generated_from_trainer
|
9 |
+
datasets:
|
10 |
+
- anzorq/ru-kbd
|
11 |
model-index:
|
12 |
- name: m2m100_1.2B_ft_kbd-ru_63K
|
13 |
results: []
|
|
|
18 |
|
19 |
# m2m100_1.2B_ft_kbd-ru_63K
|
20 |
|
21 |
+
This model is a fine-tuned version of [facebook/m2m100_1.2B](https://huggingface.co/facebook/m2m100_1.2B) on the anzorq/ru-kbd dataset.
|
22 |
|
23 |
## Model description
|
24 |
|
all_results.json
CHANGED
@@ -1,9 +1,15 @@
|
|
1 |
{
|
2 |
-
"
|
3 |
-
"
|
4 |
-
"
|
5 |
-
"
|
|
|
6 |
"predict_samples": 641,
|
7 |
-
"predict_samples_per_second":
|
8 |
-
"predict_steps_per_second": 0.
|
|
|
|
|
|
|
|
|
|
|
9 |
}
|
|
|
1 |
{
|
2 |
+
"epoch": 2.27,
|
3 |
+
"predict_bleu": 25.5069,
|
4 |
+
"predict_gen_len": 9.3963,
|
5 |
+
"predict_loss": 1.5133029222488403,
|
6 |
+
"predict_runtime": 98.9855,
|
7 |
"predict_samples": 641,
|
8 |
+
"predict_samples_per_second": 6.476,
|
9 |
+
"predict_steps_per_second": 0.414,
|
10 |
+
"train_loss": 5.4469778463318936e-05,
|
11 |
+
"train_runtime": 1.6018,
|
12 |
+
"train_samples": 63407,
|
13 |
+
"train_samples_per_second": 89898.478,
|
14 |
+
"train_steps_per_second": 5618.655
|
15 |
}
|
generated_predictions.txt
CHANGED
@@ -22,7 +22,7 @@
|
|
22 |
анонимное письмо
|
23 |
ты принесешь
|
24 |
мы не стали?
|
25 |
-
быть
|
26 |
всегда
|
27 |
мелкие яблоки
|
28 |
последовательность
|
@@ -77,7 +77,7 @@
|
|
77 |
рост урожая
|
78 |
блюдо
|
79 |
тоже
|
80 |
-
скотный
|
81 |
возвратить в дело
|
82 |
остеречься мороза
|
83 |
пуговица
|
@@ -85,7 +85,7 @@
|
|
85 |
он учится в стамбуле.
|
86 |
неразрешимый
|
87 |
ты съел яблоко.
|
88 |
-
из-за храбрости подвига в великой отечественной войне,
|
89 |
баловаться
|
90 |
абсурдный
|
91 |
яркий
|
@@ -95,7 +95,7 @@
|
|
95 |
диспут
|
96 |
красный карандаш
|
97 |
словарь
|
98 |
-
отсюда до города
|
99 |
оказать благородство
|
100 |
подойти к дому вплотную
|
101 |
мы вместе работали
|
@@ -115,8 +115,8 @@
|
|
115 |
"пошел чубуком дым, и панов кивнул кинжалом."
|
116 |
снова видеться
|
117 |
холодный родник.
|
118 |
-
конец аркана возвратился с
|
119 |
-
|
120 |
туалетный часовой
|
121 |
выпасть снег
|
122 |
вскрикнуть
|
@@ -151,7 +151,7 @@
|
|
151 |
сковорода
|
152 |
озорничать
|
153 |
вы бы ее понесли.
|
154 |
-
держать
|
155 |
пример: дерево (что сделало?) цветет.
|
156 |
вы нас послали.
|
157 |
три тысячи
|
@@ -182,7 +182,7 @@
|
|
182 |
влечение
|
183 |
к
|
184 |
испытать непонятное ясность.
|
185 |
-
нет на
|
186 |
сдернуть
|
187 |
что же не напишешь?
|
188 |
дезориентация
|
@@ -233,7 +233,7 @@
|
|
233 |
иметь сходство
|
234 |
предплечье
|
235 |
вырваться
|
236 |
-
все, что ты говоришь, или все слова лезгина, которые ты говоришь? - чуть-чуть
|
237 |
соревнование
|
238 |
супница
|
239 |
мнение
|
@@ -245,9 +245,9 @@
|
|
245 |
уползти
|
246 |
нуль
|
247 |
добросердечный служащий
|
248 |
-
в глубь
|
249 |
крестьянин
|
250 |
-
как
|
251 |
что это?
|
252 |
вид брюк
|
253 |
солнечный луч
|
@@ -256,7 +256,7 @@
|
|
256 |
мы были красивы
|
257 |
о
|
258 |
он надел его и вышел из дома.
|
259 |
-
в каждом
|
260 |
доказать действительность какого-либо дела
|
261 |
сдать товары багажу
|
262 |
в темноте двухлетнего хозяина
|
@@ -267,7 +267,7 @@
|
|
267 |
выкупаться
|
268 |
спай!
|
269 |
плотницкий топор
|
270 |
-
"в
|
271 |
фонема
|
272 |
вы отвели?
|
273 |
работа остановилась
|
@@ -304,7 +304,7 @@
|
|
304 |
воспретить
|
305 |
выбиться из ребенка
|
306 |
"когда он упал, он все время лежал, не сдаваясь и не сдаваясь."
|
307 |
-
|
308 |
взмах
|
309 |
глубоко выкопать яму
|
310 |
выделенные слова прочитайте, вставляя вопросы.
|
@@ -331,17 +331,17 @@
|
|
331 |
длинное платье
|
332 |
чем ты боишься?
|
333 |
ты не отвел обратно?
|
334 |
-
|
335 |
съесть без объятий
|
336 |
площадь куба
|
337 |
затянув пояс
|
338 |
быть неприступным
|
339 |
-
|
340 |
длинная юбка
|
341 |
подойти к окну втайне
|
342 |
быть неприступным
|
343 |
анализировать книгу
|
344 |
-
|
345 |
зафер лежит на крыше.
|
346 |
снежная птица
|
347 |
хорошо, я приду
|
@@ -367,13 +367,13 @@
|
|
367 |
этот кусок показывает многое.
|
368 |
определить недостатки в работе
|
369 |
мухараб обращен в мех
|
370 |
-
|
371 |
натуральный (неразбериха, неразбериха)
|
372 |
костный хозяин
|
373 |
я не дал тебе вещи
|
374 |
безмолвное соглашение
|
375 |
холодный дождь, как из ведра, катится
|
376 |
-
"– и жена
|
377 |
ты дал умару яблоки.
|
378 |
старый конь не был одолел шала, потому что, когда мысост похитил вооруженных войсками, находилось отдельное отделение кожи
|
379 |
текстиль из шерсти (ткань)
|
@@ -384,7 +384,7 @@
|
|
384 |
мохнатые мухи
|
385 |
сосруко пошел и вошел во двор, потонул в грушевой лошади и вошел в дом.
|
386 |
мачеха
|
387 |
-
"– он был против того, что будет
|
388 |
это мой рисунок No 1рат.
|
389 |
остеречь знакомство
|
390 |
1. какая дорога шла в деревню?
|
@@ -402,7 +402,7 @@
|
|
402 |
ты веди лошадь в конюшню!
|
403 |
гораздо
|
404 |
воспитывать
|
405 |
-
незваный сын хьэтхьэмэт жил на берегу реки
|
406 |
поле, с которого убрали пшеницу
|
407 |
мы едим.
|
408 |
свидетельство о том, что человек сидит
|
@@ -412,8 +412,8 @@
|
|
412 |
последователь
|
413 |
ельбурганокоса
|
414 |
делать
|
415 |
-
|
416 |
-
бурный
|
417 |
автомобиль делает семьдесят километров в час
|
418 |
похолодающая собака
|
419 |
я не бежал
|
@@ -424,7 +424,7 @@
|
|
424 |
триста
|
425 |
корабль
|
426 |
я бабушка?
|
427 |
-
|
428 |
нарушить правила этикета
|
429 |
вязка
|
430 |
беспокоиться о детях
|
@@ -440,7 +440,7 @@
|
|
440 |
мы отнесли гупсе одежду.
|
441 |
шприц
|
442 |
где ты был до сих пор?
|
443 |
-
|
444 |
– чего хочешь, зачем не возвращаешься? – сказал он, когда дочь обыкновенно оседлалалалала. он ответил:
|
445 |
испытать оскорбление
|
446 |
по запискам соны в абдулчери.
|
@@ -465,7 +465,7 @@
|
|
465 |
соус
|
466 |
снять веревку
|
467 |
"он видел, что самое важное, важное в жизни, – это рождение человека, смерть, смерть, смерть, смерть, смерть, смерть, смерть, смерть, смерть, смерть, смерть, смерть, и смерть от смерти офицера."
|
468 |
-
|
469 |
часы остановились
|
470 |
но озырмедж ничего не спросил, только поговорил о нартах, чтобы прийти и унести сатаней.
|
471 |
ошибиться
|
@@ -484,7 +484,7 @@
|
|
484 |
он шел?
|
485 |
осмелеть
|
486 |
кадка оторвалась
|
487 |
-
кататься на
|
488 |
вы не говорите этого.
|
489 |
вспухло кислый ручей
|
490 |
мы, не одевшись, спустились в сад.
|
@@ -517,12 +517,12 @@
|
|
517 |
женщины, подобные мужским женщинам, включены в выборы
|
518 |
в соседней комнате слышится звук хаджи-мурата.
|
519 |
ни разу он не был не на своем месте.
|
520 |
-
на свете нет такого, что она сама не обиделась и не вспомнила о ней – пыль вьется, не вернешься, исчезает из
|
521 |
она становится?
|
522 |
написанный
|
523 |
дать повышенную работу
|
524 |
зимой идет снег, погода холодна.
|
525 |
-
|
526 |
храбрый воин
|
527 |
бесшумный
|
528 |
он купил книгу
|
@@ -530,7 +530,7 @@
|
|
530 |
милый привет
|
531 |
учащиеся учатся
|
532 |
сидеть рядом с девушкой
|
533 |
-
|
534 |
резьба
|
535 |
некто
|
536 |
толстый голос
|
@@ -577,7 +577,7 @@
|
|
577 |
мои силы растянулись
|
578 |
декорация
|
579 |
квадратный метр
|
580 |
-
заклеить
|
581 |
ты разве не покрасишь?
|
582 |
сломать старую комнату
|
583 |
разгребать кусок снега
|
@@ -603,7 +603,7 @@
|
|
603 |
обогреть землю
|
604 |
взбежать
|
605 |
замешательство
|
606 |
-
это к мадам ферриолу не относится, и
|
607 |
косой
|
608 |
я веду его к нему
|
609 |
центровой
|
@@ -614,17 +614,17 @@
|
|
614 |
вас к нам они отправили.
|
615 |
он остался жив и не работая
|
616 |
переломиться
|
617 |
-
|
618 |
возмутить
|
619 |
рано
|
620 |
он дал умару яблоки.
|
621 |
-
|
622 |
благодатный
|
623 |
дождливый
|
624 |
двинуть
|
625 |
-
|
626 |
задумчивый
|
627 |
-
|
628 |
оглянуться вокруг
|
629 |
однородный
|
630 |
объем
|
@@ -638,4 +638,4 @@
|
|
638 |
ребенок
|
639 |
нуна читает книгу.
|
640 |
купить книги в аренду
|
641 |
-
|
|
|
22 |
анонимное письмо
|
23 |
ты принесешь
|
24 |
мы не стали?
|
25 |
+
быть неприспособленным к собственному желанию
|
26 |
всегда
|
27 |
мелкие яблоки
|
28 |
последовательность
|
|
|
77 |
рост урожая
|
78 |
блюдо
|
79 |
тоже
|
80 |
+
скотный скот
|
81 |
возвратить в дело
|
82 |
остеречься мороза
|
83 |
пуговица
|
|
|
85 |
он учится в стамбуле.
|
86 |
неразрешимый
|
87 |
ты съел яблоко.
|
88 |
+
из-за храбрости подвига в великой отечественной войне, маседин удочкой был удочкой родины
|
89 |
баловаться
|
90 |
абсурдный
|
91 |
яркий
|
|
|
95 |
диспут
|
96 |
красный карандаш
|
97 |
словарь
|
98 |
+
отсюда до города находится до километра
|
99 |
оказать благородство
|
100 |
подойти к дому вплотную
|
101 |
мы вместе работали
|
|
|
115 |
"пошел чубуком дым, и панов кивнул кинжалом."
|
116 |
снова видеться
|
117 |
холодный родник.
|
118 |
+
конец аркана возвратился с дерева и держал коня в синевой лошадине.
|
119 |
+
ты идешь
|
120 |
туалетный часовой
|
121 |
выпасть снег
|
122 |
вскрикнуть
|
|
|
151 |
сковорода
|
152 |
озорничать
|
153 |
вы бы ее понесли.
|
154 |
+
держать конверте в почте
|
155 |
пример: дерево (что сделало?) цветет.
|
156 |
вы нас послали.
|
157 |
три тысячи
|
|
|
182 |
влечение
|
183 |
к
|
184 |
испытать непонятное ясность.
|
185 |
+
нет на родной земле
|
186 |
сдернуть
|
187 |
что же не напишешь?
|
188 |
дезориентация
|
|
|
233 |
иметь сходство
|
234 |
предплечье
|
235 |
вырваться
|
236 |
+
все, что ты говоришь, или все слова лезгина, которые ты говоришь? - чуть-чуть прорвалось в глаза шамилю
|
237 |
соревнование
|
238 |
супница
|
239 |
мнение
|
|
|
245 |
уползти
|
246 |
нуль
|
247 |
добросердечный служащий
|
248 |
+
в глубь инджиджа, в мечетине, жил нарт с женой. у женщины белобрысый, у мужчины белобрысый
|
249 |
крестьянин
|
250 |
+
как вы понимаете, что слово становится слогом?
|
251 |
что это?
|
252 |
вид брюк
|
253 |
солнечный луч
|
|
|
256 |
мы были красивы
|
257 |
о
|
258 |
он надел его и вышел из дома.
|
259 |
+
в каждом предложении, выделенном слове, вместо точек, вставьте значения.
|
260 |
доказать действительность какого-либо дела
|
261 |
сдать товары багажу
|
262 |
в темноте двухлетнего хозяина
|
|
|
267 |
выкупаться
|
268 |
спай!
|
269 |
плотницкий топор
|
270 |
+
"в утробе, рано, незаметно, под началом полторацкого, два ротного, топорного, выходящего из-за ворот чахрин, начались шаги по крепости, и группа винтовки, сидевшая около версти."
|
271 |
фонема
|
272 |
вы отвели?
|
273 |
работа остановилась
|
|
|
304 |
воспретить
|
305 |
выбиться из ребенка
|
306 |
"когда он упал, он все время лежал, не сдаваясь и не сдаваясь."
|
307 |
+
забывчивость
|
308 |
взмах
|
309 |
глубоко выкопать яму
|
310 |
выделенные слова прочитайте, вставляя вопросы.
|
|
|
331 |
длинное платье
|
332 |
чем ты боишься?
|
333 |
ты не отвел обратно?
|
334 |
+
озорник
|
335 |
съесть без объятий
|
336 |
площадь куба
|
337 |
затянув пояс
|
338 |
быть неприступным
|
339 |
+
перешептываться
|
340 |
длинная юбка
|
341 |
подойти к окну втайне
|
342 |
быть неприступным
|
343 |
анализировать книгу
|
344 |
+
река варилась
|
345 |
зафер лежит на крыше.
|
346 |
снежная птица
|
347 |
хорошо, я приду
|
|
|
367 |
этот кусок показывает многое.
|
368 |
определить недостатки в работе
|
369 |
мухараб обращен в мех
|
370 |
+
перешептывать
|
371 |
натуральный (неразбериха, неразбериха)
|
372 |
костный хозяин
|
373 |
я не дал тебе вещи
|
374 |
безмолвное соглашение
|
375 |
холодный дождь, как из ведра, катится
|
376 |
+
"– и жена «сердара», – вопреки его возрасту, гости были гостины, как будто хаджи-мурат вчера был в театре, – сказал хаджи-мурат, обращаясь к хаджи-мурату."
|
377 |
ты дал умару яблоки.
|
378 |
старый конь не был одолел шала, потому что, когда мысост похитил вооруженных войсками, находилось отдельное отделение кожи
|
379 |
текстиль из шерсти (ткань)
|
|
|
384 |
мохнатые мухи
|
385 |
сосруко пошел и вошел во двор, потонул в грушевой лошади и вошел в дом.
|
386 |
мачеха
|
387 |
+
"– он был против того, что будет убит, что будет убит, но хану все-таки отказался, он уехал, и он вышел из сильной жены лежавшего на выручке."
|
388 |
это мой рисунок No 1рат.
|
389 |
остеречь знакомство
|
390 |
1. какая дорога шла в деревню?
|
|
|
402 |
ты веди лошадь в конюшню!
|
403 |
гораздо
|
404 |
воспитывать
|
405 |
+
незваный сын хьэтхьэмэт жил на берегу реки
|
406 |
поле, с которого убрали пшеницу
|
407 |
мы едим.
|
408 |
свидетельство о том, что человек сидит
|
|
|
412 |
последователь
|
413 |
ельбурганокоса
|
414 |
делать
|
415 |
+
приди и увидишь
|
416 |
+
бурный выстрел воды
|
417 |
автомобиль делает семьдесят километров в час
|
418 |
похолодающая собака
|
419 |
я не бежал
|
|
|
424 |
триста
|
425 |
корабль
|
426 |
я бабушка?
|
427 |
+
выделить
|
428 |
нарушить правила этикета
|
429 |
вязка
|
430 |
беспокоиться о детях
|
|
|
440 |
мы отнесли гупсе одежду.
|
441 |
шприц
|
442 |
где ты был до сих пор?
|
443 |
+
вместе
|
444 |
– чего хочешь, зачем не возвращаешься? – сказал он, когда дочь обыкновенно оседлалалалала. он ответил:
|
445 |
испытать оскорбление
|
446 |
по запискам соны в абдулчери.
|
|
|
465 |
соус
|
466 |
снять веревку
|
467 |
"он видел, что самое важное, важное в жизни, – это рождение человека, смерть, смерть, смерть, смерть, смерть, смерть, смерть, смерть, смерть, смерть, смерть, смерть, и смерть от смерти офицера."
|
468 |
+
влезть
|
469 |
часы остановились
|
470 |
но озырмедж ничего не спросил, только поговорил о нартах, чтобы прийти и унести сатаней.
|
471 |
ошибиться
|
|
|
484 |
он шел?
|
485 |
осмелеть
|
486 |
кадка оторвалась
|
487 |
+
кататься на санях, на велосипеде
|
488 |
вы не говорите этого.
|
489 |
вспухло кислый ручей
|
490 |
мы, не одевшись, спустились в сад.
|
|
|
517 |
женщины, подобные мужским женщинам, включены в выборы
|
518 |
в соседней комнате слышится звук хаджи-мурата.
|
519 |
ни разу он не был не на своем месте.
|
520 |
+
на свете нет такого, что она сама не обиделась и не вспомнила о ней – пыль вьется, не вернешься, исчезает из кожи.
|
521 |
она становится?
|
522 |
написанный
|
523 |
дать повышенную работу
|
524 |
зимой идет снег, погода холодна.
|
525 |
+
горец перечный
|
526 |
храбрый воин
|
527 |
бесшумный
|
528 |
он купил книгу
|
|
|
530 |
милый привет
|
531 |
учащиеся учатся
|
532 |
сидеть рядом с девушкой
|
533 |
+
быть учтивым
|
534 |
резьба
|
535 |
некто
|
536 |
толстый голос
|
|
|
577 |
мои силы растянулись
|
578 |
декорация
|
579 |
квадратный метр
|
580 |
+
заклеить одеяло
|
581 |
ты разве не покрасишь?
|
582 |
сломать старую комнату
|
583 |
разгребать кусок снега
|
|
|
603 |
обогреть землю
|
604 |
взбежать
|
605 |
замешательство
|
606 |
+
это к мадам ферриолу не относится, и поэтому он не нервничает.
|
607 |
косой
|
608 |
я веду его к нему
|
609 |
центровой
|
|
|
614 |
вас к нам они отправили.
|
615 |
он остался жив и не работая
|
616 |
переломиться
|
617 |
+
воображающая сила
|
618 |
возмутить
|
619 |
рано
|
620 |
он дал умару яблоки.
|
621 |
+
вскоре
|
622 |
благодатный
|
623 |
дождливый
|
624 |
двинуть
|
625 |
+
нагъуэ - нагъуэ.
|
626 |
задумчивый
|
627 |
+
избежать
|
628 |
оглянуться вокруг
|
629 |
однородный
|
630 |
объем
|
|
|
638 |
ребенок
|
639 |
нуна читает книгу.
|
640 |
купить книги в аренду
|
641 |
+
трудовой период
|
generation_config.json
CHANGED
@@ -1,9 +1,9 @@
|
|
1 |
{
|
2 |
-
"_from_model_config": true,
|
3 |
"bos_token_id": 0,
|
4 |
"decoder_start_token_id": 2,
|
5 |
"early_stopping": true,
|
6 |
"eos_token_id": 2,
|
|
|
7 |
"max_length": 200,
|
8 |
"num_beams": 5,
|
9 |
"pad_token_id": 1,
|
|
|
1 |
{
|
|
|
2 |
"bos_token_id": 0,
|
3 |
"decoder_start_token_id": 2,
|
4 |
"early_stopping": true,
|
5 |
"eos_token_id": 2,
|
6 |
+
"forced_bos_token_id": 128077,
|
7 |
"max_length": 200,
|
8 |
"num_beams": 5,
|
9 |
"pad_token_id": 1,
|
predict_results.json
CHANGED
@@ -1,9 +1,9 @@
|
|
1 |
{
|
2 |
-
"predict_bleu": 25.
|
3 |
-
"predict_gen_len": 9.
|
4 |
-
"predict_loss": 1.
|
5 |
-
"predict_runtime":
|
6 |
"predict_samples": 641,
|
7 |
-
"predict_samples_per_second":
|
8 |
-
"predict_steps_per_second": 0.
|
9 |
}
|
|
|
1 |
{
|
2 |
+
"predict_bleu": 25.5069,
|
3 |
+
"predict_gen_len": 9.3963,
|
4 |
+
"predict_loss": 1.5133029222488403,
|
5 |
+
"predict_runtime": 98.9855,
|
6 |
"predict_samples": 641,
|
7 |
+
"predict_samples_per_second": 6.476,
|
8 |
+
"predict_steps_per_second": 0.414
|
9 |
}
|
train_results.json
ADDED
@@ -0,0 +1,8 @@
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
1 |
+
{
|
2 |
+
"epoch": 2.27,
|
3 |
+
"train_loss": 5.4469778463318936e-05,
|
4 |
+
"train_runtime": 1.6018,
|
5 |
+
"train_samples": 63407,
|
6 |
+
"train_samples_per_second": 89898.478,
|
7 |
+
"train_steps_per_second": 5618.655
|
8 |
+
}
|
trainer_state.json
ADDED
@@ -0,0 +1,136 @@
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
1 |
+
{
|
2 |
+
"best_metric": null,
|
3 |
+
"best_model_checkpoint": null,
|
4 |
+
"epoch": 2.271259147110775,
|
5 |
+
"eval_steps": 500,
|
6 |
+
"global_step": 9001,
|
7 |
+
"is_hyper_param_search": false,
|
8 |
+
"is_local_process_zero": true,
|
9 |
+
"is_world_process_zero": true,
|
10 |
+
"log_history": [
|
11 |
+
{
|
12 |
+
"epoch": 0.19,
|
13 |
+
"learning_rate": 4.8952813525107246e-05,
|
14 |
+
"loss": 2.8381,
|
15 |
+
"step": 500
|
16 |
+
},
|
17 |
+
{
|
18 |
+
"epoch": 0.38,
|
19 |
+
"learning_rate": 4.790142148204223e-05,
|
20 |
+
"loss": 2.3291,
|
21 |
+
"step": 1000
|
22 |
+
},
|
23 |
+
{
|
24 |
+
"epoch": 0.47,
|
25 |
+
"learning_rate": 4.7377273205087775e-05,
|
26 |
+
"loss": 1.8496,
|
27 |
+
"step": 1500
|
28 |
+
},
|
29 |
+
{
|
30 |
+
"epoch": 0.63,
|
31 |
+
"learning_rate": 4.650303094011704e-05,
|
32 |
+
"loss": 2.0352,
|
33 |
+
"step": 2000
|
34 |
+
},
|
35 |
+
{
|
36 |
+
"epoch": 0.63,
|
37 |
+
"learning_rate": 4.650096728067962e-05,
|
38 |
+
"loss": 1.2524,
|
39 |
+
"step": 2500
|
40 |
+
},
|
41 |
+
{
|
42 |
+
"epoch": 0.76,
|
43 |
+
"learning_rate": 4.580003925196961e-05,
|
44 |
+
"loss": 1.9539,
|
45 |
+
"step": 3000
|
46 |
+
},
|
47 |
+
{
|
48 |
+
"epoch": 0.88,
|
49 |
+
"learning_rate": 4.510051307931702e-05,
|
50 |
+
"loss": 1.8607,
|
51 |
+
"step": 3500
|
52 |
+
},
|
53 |
+
{
|
54 |
+
"epoch": 1.01,
|
55 |
+
"learning_rate": 4.4399585050607007e-05,
|
56 |
+
"loss": 1.7809,
|
57 |
+
"step": 4000
|
58 |
+
},
|
59 |
+
{
|
60 |
+
"epoch": 1.14,
|
61 |
+
"learning_rate": 4.369865702189699e-05,
|
62 |
+
"loss": 1.297,
|
63 |
+
"step": 4500
|
64 |
+
},
|
65 |
+
{
|
66 |
+
"epoch": 1.26,
|
67 |
+
"learning_rate": 4.299772899318698e-05,
|
68 |
+
"loss": 1.3119,
|
69 |
+
"step": 5000
|
70 |
+
},
|
71 |
+
{
|
72 |
+
"epoch": 1.39,
|
73 |
+
"learning_rate": 4.229820282053439e-05,
|
74 |
+
"loss": 1.343,
|
75 |
+
"step": 5500
|
76 |
+
},
|
77 |
+
{
|
78 |
+
"epoch": 1.51,
|
79 |
+
"learning_rate": 4.1597274791824374e-05,
|
80 |
+
"loss": 1.2962,
|
81 |
+
"step": 6000
|
82 |
+
},
|
83 |
+
{
|
84 |
+
"epoch": 1.64,
|
85 |
+
"learning_rate": 4.0897748619171785e-05,
|
86 |
+
"loss": 1.2929,
|
87 |
+
"step": 6500
|
88 |
+
},
|
89 |
+
{
|
90 |
+
"epoch": 1.77,
|
91 |
+
"learning_rate": 4.019682059046178e-05,
|
92 |
+
"loss": 1.2726,
|
93 |
+
"step": 7000
|
94 |
+
},
|
95 |
+
{
|
96 |
+
"epoch": 1.89,
|
97 |
+
"learning_rate": 3.949589256175176e-05,
|
98 |
+
"loss": 1.2686,
|
99 |
+
"step": 7500
|
100 |
+
},
|
101 |
+
{
|
102 |
+
"epoch": 2.02,
|
103 |
+
"learning_rate": 3.879496453304175e-05,
|
104 |
+
"loss": 1.1702,
|
105 |
+
"step": 8000
|
106 |
+
},
|
107 |
+
{
|
108 |
+
"epoch": 2.14,
|
109 |
+
"learning_rate": 3.8094036504331735e-05,
|
110 |
+
"loss": 0.8145,
|
111 |
+
"step": 8500
|
112 |
+
},
|
113 |
+
{
|
114 |
+
"epoch": 2.27,
|
115 |
+
"learning_rate": 3.739310847562173e-05,
|
116 |
+
"loss": 0.8225,
|
117 |
+
"step": 9000
|
118 |
+
},
|
119 |
+
{
|
120 |
+
"epoch": 2.27,
|
121 |
+
"step": 9001,
|
122 |
+
"total_flos": 5.460691370980147e+16,
|
123 |
+
"train_loss": 5.4469778463318936e-05,
|
124 |
+
"train_runtime": 1.6018,
|
125 |
+
"train_samples_per_second": 89898.478,
|
126 |
+
"train_steps_per_second": 5618.655
|
127 |
+
}
|
128 |
+
],
|
129 |
+
"logging_steps": 500,
|
130 |
+
"max_steps": 9000,
|
131 |
+
"num_train_epochs": 3,
|
132 |
+
"save_steps": 1000,
|
133 |
+
"total_flos": 5.460691370980147e+16,
|
134 |
+
"trial_name": null,
|
135 |
+
"trial_params": null
|
136 |
+
}
|