| { | |
| "best_metric": 8.8020814247499, | |
| "best_model_checkpoint": "./checkpoint-8000", | |
| "epoch": 4.148, | |
| "eval_steps": 500, | |
| "global_step": 8000, | |
| "is_hyper_param_search": false, | |
| "is_local_process_zero": true, | |
| "is_world_process_zero": true, | |
| "log_history": [ | |
| { | |
| "epoch": 0.003125, | |
| "grad_norm": 15.080086708068848, | |
| "learning_rate": 2.875e-07, | |
| "loss": 1.3478, | |
| "step": 25 | |
| }, | |
| { | |
| "epoch": 0.00625, | |
| "grad_norm": 11.962413787841797, | |
| "learning_rate": 6.000000000000001e-07, | |
| "loss": 1.14, | |
| "step": 50 | |
| }, | |
| { | |
| "epoch": 0.009375, | |
| "grad_norm": 10.828227996826172, | |
| "learning_rate": 9.124999999999999e-07, | |
| "loss": 0.8401, | |
| "step": 75 | |
| }, | |
| { | |
| "epoch": 0.0125, | |
| "grad_norm": 9.401681900024414, | |
| "learning_rate": 1.2250000000000001e-06, | |
| "loss": 0.7112, | |
| "step": 100 | |
| }, | |
| { | |
| "epoch": 0.015625, | |
| "grad_norm": 9.252142906188965, | |
| "learning_rate": 1.5375e-06, | |
| "loss": 0.6528, | |
| "step": 125 | |
| }, | |
| { | |
| "epoch": 0.01875, | |
| "grad_norm": 10.718783378601074, | |
| "learning_rate": 1.85e-06, | |
| "loss": 0.6492, | |
| "step": 150 | |
| }, | |
| { | |
| "epoch": 0.021875, | |
| "grad_norm": 7.8105082511901855, | |
| "learning_rate": 2.1625e-06, | |
| "loss": 0.5886, | |
| "step": 175 | |
| }, | |
| { | |
| "epoch": 0.025, | |
| "grad_norm": 8.969450950622559, | |
| "learning_rate": 2.4750000000000004e-06, | |
| "loss": 0.5284, | |
| "step": 200 | |
| }, | |
| { | |
| "epoch": 0.028125, | |
| "grad_norm": 8.110017776489258, | |
| "learning_rate": 2.7875e-06, | |
| "loss": 0.5097, | |
| "step": 225 | |
| }, | |
| { | |
| "epoch": 0.03125, | |
| "grad_norm": 8.07854175567627, | |
| "learning_rate": 3.1e-06, | |
| "loss": 0.48, | |
| "step": 250 | |
| }, | |
| { | |
| "epoch": 0.034375, | |
| "grad_norm": 9.469429016113281, | |
| "learning_rate": 3.4125000000000004e-06, | |
| "loss": 0.4453, | |
| "step": 275 | |
| }, | |
| { | |
| "epoch": 0.0375, | |
| "grad_norm": 6.849759578704834, | |
| "learning_rate": 3.725e-06, | |
| "loss": 0.4249, | |
| "step": 300 | |
| }, | |
| { | |
| "epoch": 0.040625, | |
| "grad_norm": 8.43980598449707, | |
| "learning_rate": 4.037500000000001e-06, | |
| "loss": 0.4093, | |
| "step": 325 | |
| }, | |
| { | |
| "epoch": 0.04375, | |
| "grad_norm": 7.9978132247924805, | |
| "learning_rate": 4.35e-06, | |
| "loss": 0.4179, | |
| "step": 350 | |
| }, | |
| { | |
| "epoch": 0.046875, | |
| "grad_norm": 7.179676532745361, | |
| "learning_rate": 4.6625e-06, | |
| "loss": 0.366, | |
| "step": 375 | |
| }, | |
| { | |
| "epoch": 0.05, | |
| "grad_norm": 8.746236801147461, | |
| "learning_rate": 4.975000000000001e-06, | |
| "loss": 0.3484, | |
| "step": 400 | |
| }, | |
| { | |
| "epoch": 0.053125, | |
| "grad_norm": 6.08207893371582, | |
| "learning_rate": 5.2875e-06, | |
| "loss": 0.3177, | |
| "step": 425 | |
| }, | |
| { | |
| "epoch": 0.05625, | |
| "grad_norm": 7.5096235275268555, | |
| "learning_rate": 5.600000000000001e-06, | |
| "loss": 0.3407, | |
| "step": 450 | |
| }, | |
| { | |
| "epoch": 0.059375, | |
| "grad_norm": 6.521783828735352, | |
| "learning_rate": 5.9125e-06, | |
| "loss": 0.3323, | |
| "step": 475 | |
| }, | |
| { | |
| "epoch": 0.0625, | |
| "grad_norm": 6.018587589263916, | |
| "learning_rate": 6.2250000000000005e-06, | |
| "loss": 0.3171, | |
| "step": 500 | |
| }, | |
| { | |
| "epoch": 0.0625, | |
| "eval_loss": 0.33685919642448425, | |
| "eval_runtime": 2424.3615, | |
| "eval_samples_per_second": 5.622, | |
| "eval_steps_per_second": 0.703, | |
| "eval_wer": 25.53043350800689, | |
| "step": 500 | |
| }, | |
| { | |
| "epoch": 0.065625, | |
| "grad_norm": 6.343411922454834, | |
| "learning_rate": 6.230833333333334e-06, | |
| "loss": 0.323, | |
| "step": 525 | |
| }, | |
| { | |
| "epoch": 0.06875, | |
| "grad_norm": 6.164433479309082, | |
| "learning_rate": 6.210000000000001e-06, | |
| "loss": 0.2979, | |
| "step": 550 | |
| }, | |
| { | |
| "epoch": 0.071875, | |
| "grad_norm": 7.514057159423828, | |
| "learning_rate": 6.1891666666666666e-06, | |
| "loss": 0.2956, | |
| "step": 575 | |
| }, | |
| { | |
| "epoch": 0.075, | |
| "grad_norm": 5.7609992027282715, | |
| "learning_rate": 6.168333333333333e-06, | |
| "loss": 0.2966, | |
| "step": 600 | |
| }, | |
| { | |
| "epoch": 0.078125, | |
| "grad_norm": 6.035708427429199, | |
| "learning_rate": 6.147500000000001e-06, | |
| "loss": 0.2914, | |
| "step": 625 | |
| }, | |
| { | |
| "epoch": 0.08125, | |
| "grad_norm": 6.485240459442139, | |
| "learning_rate": 6.126666666666667e-06, | |
| "loss": 0.2929, | |
| "step": 650 | |
| }, | |
| { | |
| "epoch": 0.084375, | |
| "grad_norm": 5.631970405578613, | |
| "learning_rate": 6.1058333333333335e-06, | |
| "loss": 0.2676, | |
| "step": 675 | |
| }, | |
| { | |
| "epoch": 0.0875, | |
| "grad_norm": 6.642117977142334, | |
| "learning_rate": 6.085e-06, | |
| "loss": 0.2756, | |
| "step": 700 | |
| }, | |
| { | |
| "epoch": 0.090625, | |
| "grad_norm": 6.473007678985596, | |
| "learning_rate": 6.064166666666667e-06, | |
| "loss": 0.2613, | |
| "step": 725 | |
| }, | |
| { | |
| "epoch": 0.09375, | |
| "grad_norm": 6.47869348526001, | |
| "learning_rate": 6.043333333333334e-06, | |
| "loss": 0.2667, | |
| "step": 750 | |
| }, | |
| { | |
| "epoch": 0.096875, | |
| "grad_norm": 6.658367156982422, | |
| "learning_rate": 6.0225e-06, | |
| "loss": 0.2778, | |
| "step": 775 | |
| }, | |
| { | |
| "epoch": 0.1, | |
| "grad_norm": 7.887542724609375, | |
| "learning_rate": 6.001666666666667e-06, | |
| "loss": 0.3095, | |
| "step": 800 | |
| }, | |
| { | |
| "epoch": 0.103125, | |
| "grad_norm": 6.103913307189941, | |
| "learning_rate": 5.980833333333334e-06, | |
| "loss": 0.297, | |
| "step": 825 | |
| }, | |
| { | |
| "epoch": 0.10625, | |
| "grad_norm": 6.087416648864746, | |
| "learning_rate": 5.9600000000000005e-06, | |
| "loss": 0.2326, | |
| "step": 850 | |
| }, | |
| { | |
| "epoch": 0.109375, | |
| "grad_norm": 5.486704349517822, | |
| "learning_rate": 5.939166666666667e-06, | |
| "loss": 0.2215, | |
| "step": 875 | |
| }, | |
| { | |
| "epoch": 0.1125, | |
| "grad_norm": 5.353816986083984, | |
| "learning_rate": 5.918333333333333e-06, | |
| "loss": 0.205, | |
| "step": 900 | |
| }, | |
| { | |
| "epoch": 0.115625, | |
| "grad_norm": 5.429187774658203, | |
| "learning_rate": 5.8975e-06, | |
| "loss": 0.2185, | |
| "step": 925 | |
| }, | |
| { | |
| "epoch": 0.11875, | |
| "grad_norm": 5.181328773498535, | |
| "learning_rate": 5.8766666666666674e-06, | |
| "loss": 0.2069, | |
| "step": 950 | |
| }, | |
| { | |
| "epoch": 0.121875, | |
| "grad_norm": 4.126291751861572, | |
| "learning_rate": 5.855833333333333e-06, | |
| "loss": 0.2062, | |
| "step": 975 | |
| }, | |
| { | |
| "epoch": 0.125, | |
| "grad_norm": 5.896920204162598, | |
| "learning_rate": 5.835e-06, | |
| "loss": 0.1852, | |
| "step": 1000 | |
| }, | |
| { | |
| "epoch": 0.125, | |
| "eval_loss": 0.2408558428287506, | |
| "eval_runtime": 2415.6545, | |
| "eval_samples_per_second": 5.642, | |
| "eval_steps_per_second": 0.705, | |
| "eval_wer": 17.311004434021037, | |
| "step": 1000 | |
| }, | |
| { | |
| "epoch": 0.128125, | |
| "grad_norm": 5.046872138977051, | |
| "learning_rate": 5.814166666666667e-06, | |
| "loss": 0.2142, | |
| "step": 1025 | |
| }, | |
| { | |
| "epoch": 0.13125, | |
| "grad_norm": 6.671748638153076, | |
| "learning_rate": 5.793333333333334e-06, | |
| "loss": 0.2208, | |
| "step": 1050 | |
| }, | |
| { | |
| "epoch": 0.134375, | |
| "grad_norm": 6.533191680908203, | |
| "learning_rate": 5.7725e-06, | |
| "loss": 0.1944, | |
| "step": 1075 | |
| }, | |
| { | |
| "epoch": 0.1375, | |
| "grad_norm": 4.43493127822876, | |
| "learning_rate": 5.751666666666667e-06, | |
| "loss": 0.1816, | |
| "step": 1100 | |
| }, | |
| { | |
| "epoch": 0.140625, | |
| "grad_norm": 5.601134777069092, | |
| "learning_rate": 5.730833333333334e-06, | |
| "loss": 0.1884, | |
| "step": 1125 | |
| }, | |
| { | |
| "epoch": 0.14375, | |
| "grad_norm": 4.886395454406738, | |
| "learning_rate": 5.71e-06, | |
| "loss": 0.1712, | |
| "step": 1150 | |
| }, | |
| { | |
| "epoch": 0.146875, | |
| "grad_norm": 5.513830184936523, | |
| "learning_rate": 5.689166666666667e-06, | |
| "loss": 0.1835, | |
| "step": 1175 | |
| }, | |
| { | |
| "epoch": 0.15, | |
| "grad_norm": 6.305610179901123, | |
| "learning_rate": 5.668333333333334e-06, | |
| "loss": 0.2221, | |
| "step": 1200 | |
| }, | |
| { | |
| "epoch": 0.153125, | |
| "grad_norm": 6.482845306396484, | |
| "learning_rate": 5.6475e-06, | |
| "loss": 0.2138, | |
| "step": 1225 | |
| }, | |
| { | |
| "epoch": 0.15625, | |
| "grad_norm": 6.316329002380371, | |
| "learning_rate": 5.626666666666667e-06, | |
| "loss": 0.2338, | |
| "step": 1250 | |
| }, | |
| { | |
| "epoch": 0.159375, | |
| "grad_norm": 6.650278091430664, | |
| "learning_rate": 5.605833333333334e-06, | |
| "loss": 0.2231, | |
| "step": 1275 | |
| }, | |
| { | |
| "epoch": 0.1625, | |
| "grad_norm": 5.289668560028076, | |
| "learning_rate": 5.585e-06, | |
| "loss": 0.2018, | |
| "step": 1300 | |
| }, | |
| { | |
| "epoch": 0.165625, | |
| "grad_norm": 6.051737308502197, | |
| "learning_rate": 5.564166666666667e-06, | |
| "loss": 0.2092, | |
| "step": 1325 | |
| }, | |
| { | |
| "epoch": 0.16875, | |
| "grad_norm": 4.950199604034424, | |
| "learning_rate": 5.543333333333333e-06, | |
| "loss": 0.1934, | |
| "step": 1350 | |
| }, | |
| { | |
| "epoch": 0.171875, | |
| "grad_norm": 5.296252727508545, | |
| "learning_rate": 5.522500000000001e-06, | |
| "loss": 0.1806, | |
| "step": 1375 | |
| }, | |
| { | |
| "epoch": 0.175, | |
| "grad_norm": 5.999615669250488, | |
| "learning_rate": 5.501666666666667e-06, | |
| "loss": 0.1782, | |
| "step": 1400 | |
| }, | |
| { | |
| "epoch": 0.178125, | |
| "grad_norm": 3.7982959747314453, | |
| "learning_rate": 5.4808333333333335e-06, | |
| "loss": 0.1712, | |
| "step": 1425 | |
| }, | |
| { | |
| "epoch": 0.18125, | |
| "grad_norm": 6.798803806304932, | |
| "learning_rate": 5.46e-06, | |
| "loss": 0.1972, | |
| "step": 1450 | |
| }, | |
| { | |
| "epoch": 0.184375, | |
| "grad_norm": 5.545141220092773, | |
| "learning_rate": 5.439166666666667e-06, | |
| "loss": 0.2153, | |
| "step": 1475 | |
| }, | |
| { | |
| "epoch": 0.1875, | |
| "grad_norm": 5.619574546813965, | |
| "learning_rate": 5.418333333333334e-06, | |
| "loss": 0.2353, | |
| "step": 1500 | |
| }, | |
| { | |
| "epoch": 0.1875, | |
| "eval_loss": 0.20496371388435364, | |
| "eval_runtime": 2428.1499, | |
| "eval_samples_per_second": 5.613, | |
| "eval_steps_per_second": 0.702, | |
| "eval_wer": 14.222763750961926, | |
| "step": 1500 | |
| }, | |
| { | |
| "epoch": 0.190625, | |
| "grad_norm": 6.522052764892578, | |
| "learning_rate": 5.3975e-06, | |
| "loss": 0.2049, | |
| "step": 1525 | |
| }, | |
| { | |
| "epoch": 0.19375, | |
| "grad_norm": 5.805539608001709, | |
| "learning_rate": 5.376666666666666e-06, | |
| "loss": 0.1931, | |
| "step": 1550 | |
| }, | |
| { | |
| "epoch": 0.196875, | |
| "grad_norm": 5.707961082458496, | |
| "learning_rate": 5.355833333333334e-06, | |
| "loss": 0.1944, | |
| "step": 1575 | |
| }, | |
| { | |
| "epoch": 0.2, | |
| "grad_norm": 6.126225471496582, | |
| "learning_rate": 5.335000000000001e-06, | |
| "loss": 0.225, | |
| "step": 1600 | |
| }, | |
| { | |
| "epoch": 0.203125, | |
| "grad_norm": 5.682012557983398, | |
| "learning_rate": 5.3141666666666665e-06, | |
| "loss": 0.2225, | |
| "step": 1625 | |
| }, | |
| { | |
| "epoch": 0.20625, | |
| "grad_norm": 5.529600620269775, | |
| "learning_rate": 5.293333333333333e-06, | |
| "loss": 0.2154, | |
| "step": 1650 | |
| }, | |
| { | |
| "epoch": 0.209375, | |
| "grad_norm": 8.373395919799805, | |
| "learning_rate": 5.272500000000001e-06, | |
| "loss": 0.1866, | |
| "step": 1675 | |
| }, | |
| { | |
| "epoch": 0.2125, | |
| "grad_norm": 4.936291694641113, | |
| "learning_rate": 5.2516666666666675e-06, | |
| "loss": 0.1615, | |
| "step": 1700 | |
| }, | |
| { | |
| "epoch": 1.002625, | |
| "grad_norm": 4.893776893615723, | |
| "learning_rate": 5.230833333333333e-06, | |
| "loss": 0.172, | |
| "step": 1725 | |
| }, | |
| { | |
| "epoch": 1.00575, | |
| "grad_norm": 4.98813533782959, | |
| "learning_rate": 5.21e-06, | |
| "loss": 0.1591, | |
| "step": 1750 | |
| }, | |
| { | |
| "epoch": 1.008875, | |
| "grad_norm": 6.166538715362549, | |
| "learning_rate": 5.189166666666667e-06, | |
| "loss": 0.1712, | |
| "step": 1775 | |
| }, | |
| { | |
| "epoch": 1.012, | |
| "grad_norm": 4.1829071044921875, | |
| "learning_rate": 5.1683333333333335e-06, | |
| "loss": 0.1908, | |
| "step": 1800 | |
| }, | |
| { | |
| "epoch": 1.015125, | |
| "grad_norm": 5.497808456420898, | |
| "learning_rate": 5.1475e-06, | |
| "loss": 0.1791, | |
| "step": 1825 | |
| }, | |
| { | |
| "epoch": 1.01825, | |
| "grad_norm": 4.581858158111572, | |
| "learning_rate": 5.126666666666667e-06, | |
| "loss": 0.1685, | |
| "step": 1850 | |
| }, | |
| { | |
| "epoch": 1.021375, | |
| "grad_norm": 4.6282267570495605, | |
| "learning_rate": 5.105833333333334e-06, | |
| "loss": 0.1691, | |
| "step": 1875 | |
| }, | |
| { | |
| "epoch": 1.0245, | |
| "grad_norm": 5.748936653137207, | |
| "learning_rate": 5.0850000000000004e-06, | |
| "loss": 0.1577, | |
| "step": 1900 | |
| }, | |
| { | |
| "epoch": 1.027625, | |
| "grad_norm": 4.339770793914795, | |
| "learning_rate": 5.064166666666667e-06, | |
| "loss": 0.168, | |
| "step": 1925 | |
| }, | |
| { | |
| "epoch": 1.03075, | |
| "grad_norm": 3.72379469871521, | |
| "learning_rate": 5.043333333333333e-06, | |
| "loss": 0.1616, | |
| "step": 1950 | |
| }, | |
| { | |
| "epoch": 1.033875, | |
| "grad_norm": 5.169766902923584, | |
| "learning_rate": 5.0225e-06, | |
| "loss": 0.1663, | |
| "step": 1975 | |
| }, | |
| { | |
| "epoch": 1.037, | |
| "grad_norm": 6.120935440063477, | |
| "learning_rate": 5.001666666666667e-06, | |
| "loss": 0.1569, | |
| "step": 2000 | |
| }, | |
| { | |
| "epoch": 1.037, | |
| "eval_loss": 0.181504026055336, | |
| "eval_runtime": 2441.5281, | |
| "eval_samples_per_second": 5.583, | |
| "eval_steps_per_second": 0.698, | |
| "eval_wer": 12.286085968705338, | |
| "step": 2000 | |
| }, | |
| { | |
| "epoch": 1.040125, | |
| "grad_norm": 3.2327628135681152, | |
| "learning_rate": 4.980833333333334e-06, | |
| "loss": 0.1526, | |
| "step": 2025 | |
| }, | |
| { | |
| "epoch": 1.04325, | |
| "grad_norm": 4.2089948654174805, | |
| "learning_rate": 4.96e-06, | |
| "loss": 0.1427, | |
| "step": 2050 | |
| }, | |
| { | |
| "epoch": 1.046375, | |
| "grad_norm": 4.837276458740234, | |
| "learning_rate": 4.939166666666667e-06, | |
| "loss": 0.1429, | |
| "step": 2075 | |
| }, | |
| { | |
| "epoch": 1.0495, | |
| "grad_norm": 4.590527057647705, | |
| "learning_rate": 4.918333333333334e-06, | |
| "loss": 0.1306, | |
| "step": 2100 | |
| }, | |
| { | |
| "epoch": 1.052625, | |
| "grad_norm": 5.821957111358643, | |
| "learning_rate": 4.8975e-06, | |
| "loss": 0.1504, | |
| "step": 2125 | |
| }, | |
| { | |
| "epoch": 1.05575, | |
| "grad_norm": 4.136687278747559, | |
| "learning_rate": 4.876666666666667e-06, | |
| "loss": 0.1431, | |
| "step": 2150 | |
| }, | |
| { | |
| "epoch": 1.058875, | |
| "grad_norm": 4.310347080230713, | |
| "learning_rate": 4.8558333333333336e-06, | |
| "loss": 0.1364, | |
| "step": 2175 | |
| }, | |
| { | |
| "epoch": 1.062, | |
| "grad_norm": 4.1295485496521, | |
| "learning_rate": 4.835e-06, | |
| "loss": 0.1272, | |
| "step": 2200 | |
| }, | |
| { | |
| "epoch": 1.065125, | |
| "grad_norm": 4.432501316070557, | |
| "learning_rate": 4.814166666666667e-06, | |
| "loss": 0.1256, | |
| "step": 2225 | |
| }, | |
| { | |
| "epoch": 1.06825, | |
| "grad_norm": 3.792029619216919, | |
| "learning_rate": 4.793333333333334e-06, | |
| "loss": 0.1322, | |
| "step": 2250 | |
| }, | |
| { | |
| "epoch": 1.071375, | |
| "grad_norm": 4.919213771820068, | |
| "learning_rate": 4.7725e-06, | |
| "loss": 0.1477, | |
| "step": 2275 | |
| }, | |
| { | |
| "epoch": 1.0745, | |
| "grad_norm": 5.92459774017334, | |
| "learning_rate": 4.751666666666666e-06, | |
| "loss": 0.1518, | |
| "step": 2300 | |
| }, | |
| { | |
| "epoch": 1.077625, | |
| "grad_norm": 5.6381635665893555, | |
| "learning_rate": 4.730833333333334e-06, | |
| "loss": 0.1489, | |
| "step": 2325 | |
| }, | |
| { | |
| "epoch": 1.08075, | |
| "grad_norm": 4.690910816192627, | |
| "learning_rate": 4.710000000000001e-06, | |
| "loss": 0.1216, | |
| "step": 2350 | |
| }, | |
| { | |
| "epoch": 1.083875, | |
| "grad_norm": 3.847102165222168, | |
| "learning_rate": 4.6891666666666665e-06, | |
| "loss": 0.1243, | |
| "step": 2375 | |
| }, | |
| { | |
| "epoch": 1.087, | |
| "grad_norm": 2.3183677196502686, | |
| "learning_rate": 4.668333333333333e-06, | |
| "loss": 0.1301, | |
| "step": 2400 | |
| }, | |
| { | |
| "epoch": 1.090125, | |
| "grad_norm": 3.9808385372161865, | |
| "learning_rate": 4.647500000000001e-06, | |
| "loss": 0.1289, | |
| "step": 2425 | |
| }, | |
| { | |
| "epoch": 1.09325, | |
| "grad_norm": 4.1279616355896, | |
| "learning_rate": 4.626666666666667e-06, | |
| "loss": 0.119, | |
| "step": 2450 | |
| }, | |
| { | |
| "epoch": 1.096375, | |
| "grad_norm": 4.029735088348389, | |
| "learning_rate": 4.605833333333333e-06, | |
| "loss": 0.1235, | |
| "step": 2475 | |
| }, | |
| { | |
| "epoch": 1.0995, | |
| "grad_norm": 5.72581148147583, | |
| "learning_rate": 4.585e-06, | |
| "loss": 0.125, | |
| "step": 2500 | |
| }, | |
| { | |
| "epoch": 1.0995, | |
| "eval_loss": 0.16921907663345337, | |
| "eval_runtime": 2457.6523, | |
| "eval_samples_per_second": 5.546, | |
| "eval_steps_per_second": 0.693, | |
| "eval_wer": 11.114368426838652, | |
| "step": 2500 | |
| }, | |
| { | |
| "epoch": 1.102625, | |
| "grad_norm": 4.8854875564575195, | |
| "learning_rate": 4.564166666666667e-06, | |
| "loss": 0.122, | |
| "step": 2525 | |
| }, | |
| { | |
| "epoch": 1.10575, | |
| "grad_norm": 3.682393789291382, | |
| "learning_rate": 4.543333333333334e-06, | |
| "loss": 0.1169, | |
| "step": 2550 | |
| }, | |
| { | |
| "epoch": 1.108875, | |
| "grad_norm": 3.8288307189941406, | |
| "learning_rate": 4.5225e-06, | |
| "loss": 0.1184, | |
| "step": 2575 | |
| }, | |
| { | |
| "epoch": 1.112, | |
| "grad_norm": 5.098357677459717, | |
| "learning_rate": 4.501666666666667e-06, | |
| "loss": 0.1235, | |
| "step": 2600 | |
| }, | |
| { | |
| "epoch": 1.115125, | |
| "grad_norm": 3.420466899871826, | |
| "learning_rate": 4.480833333333334e-06, | |
| "loss": 0.1277, | |
| "step": 2625 | |
| }, | |
| { | |
| "epoch": 1.11825, | |
| "grad_norm": 4.542791843414307, | |
| "learning_rate": 4.4600000000000005e-06, | |
| "loss": 0.1214, | |
| "step": 2650 | |
| }, | |
| { | |
| "epoch": 1.121375, | |
| "grad_norm": 3.245755195617676, | |
| "learning_rate": 4.439166666666667e-06, | |
| "loss": 0.1109, | |
| "step": 2675 | |
| }, | |
| { | |
| "epoch": 1.1245, | |
| "grad_norm": 5.041585445404053, | |
| "learning_rate": 4.418333333333333e-06, | |
| "loss": 0.1295, | |
| "step": 2700 | |
| }, | |
| { | |
| "epoch": 1.127625, | |
| "grad_norm": 4.113171577453613, | |
| "learning_rate": 4.3975e-06, | |
| "loss": 0.1153, | |
| "step": 2725 | |
| }, | |
| { | |
| "epoch": 1.13075, | |
| "grad_norm": 5.032025337219238, | |
| "learning_rate": 4.376666666666667e-06, | |
| "loss": 0.1204, | |
| "step": 2750 | |
| }, | |
| { | |
| "epoch": 1.133875, | |
| "grad_norm": 5.080983638763428, | |
| "learning_rate": 4.355833333333333e-06, | |
| "loss": 0.1213, | |
| "step": 2775 | |
| }, | |
| { | |
| "epoch": 1.137, | |
| "grad_norm": 4.304152011871338, | |
| "learning_rate": 4.335e-06, | |
| "loss": 0.1069, | |
| "step": 2800 | |
| }, | |
| { | |
| "epoch": 1.140125, | |
| "grad_norm": 3.1360485553741455, | |
| "learning_rate": 4.314166666666667e-06, | |
| "loss": 0.1167, | |
| "step": 2825 | |
| }, | |
| { | |
| "epoch": 1.14325, | |
| "grad_norm": 4.444480895996094, | |
| "learning_rate": 4.2933333333333334e-06, | |
| "loss": 0.1117, | |
| "step": 2850 | |
| }, | |
| { | |
| "epoch": 1.146375, | |
| "grad_norm": 3.8886942863464355, | |
| "learning_rate": 4.2725e-06, | |
| "loss": 0.1134, | |
| "step": 2875 | |
| }, | |
| { | |
| "epoch": 1.1495, | |
| "grad_norm": 4.360485076904297, | |
| "learning_rate": 4.251666666666667e-06, | |
| "loss": 0.1334, | |
| "step": 2900 | |
| }, | |
| { | |
| "epoch": 1.152625, | |
| "grad_norm": 5.376945972442627, | |
| "learning_rate": 4.230833333333334e-06, | |
| "loss": 0.1163, | |
| "step": 2925 | |
| }, | |
| { | |
| "epoch": 1.15575, | |
| "grad_norm": 4.359200954437256, | |
| "learning_rate": 4.21e-06, | |
| "loss": 0.1351, | |
| "step": 2950 | |
| }, | |
| { | |
| "epoch": 1.158875, | |
| "grad_norm": 5.360095977783203, | |
| "learning_rate": 4.189166666666667e-06, | |
| "loss": 0.1113, | |
| "step": 2975 | |
| }, | |
| { | |
| "epoch": 1.162, | |
| "grad_norm": 3.6014363765716553, | |
| "learning_rate": 4.168333333333334e-06, | |
| "loss": 0.12, | |
| "step": 3000 | |
| }, | |
| { | |
| "epoch": 1.162, | |
| "eval_loss": 0.15999051928520203, | |
| "eval_runtime": 2448.4453, | |
| "eval_samples_per_second": 5.567, | |
| "eval_steps_per_second": 0.696, | |
| "eval_wer": 10.697533804829785, | |
| "step": 3000 | |
| }, | |
| { | |
| "epoch": 1.165125, | |
| "grad_norm": 4.150473594665527, | |
| "learning_rate": 4.1475e-06, | |
| "loss": 0.1196, | |
| "step": 3025 | |
| }, | |
| { | |
| "epoch": 1.16825, | |
| "grad_norm": 4.962148666381836, | |
| "learning_rate": 4.126666666666667e-06, | |
| "loss": 0.1261, | |
| "step": 3050 | |
| }, | |
| { | |
| "epoch": 1.171375, | |
| "grad_norm": 2.9675393104553223, | |
| "learning_rate": 4.105833333333334e-06, | |
| "loss": 0.1087, | |
| "step": 3075 | |
| }, | |
| { | |
| "epoch": 1.1745, | |
| "grad_norm": 5.842774868011475, | |
| "learning_rate": 4.085e-06, | |
| "loss": 0.1067, | |
| "step": 3100 | |
| }, | |
| { | |
| "epoch": 1.177625, | |
| "grad_norm": 5.209335803985596, | |
| "learning_rate": 4.064166666666667e-06, | |
| "loss": 0.114, | |
| "step": 3125 | |
| }, | |
| { | |
| "epoch": 1.18075, | |
| "grad_norm": 4.343747138977051, | |
| "learning_rate": 4.043333333333333e-06, | |
| "loss": 0.1398, | |
| "step": 3150 | |
| }, | |
| { | |
| "epoch": 1.183875, | |
| "grad_norm": 4.5666890144348145, | |
| "learning_rate": 4.0225e-06, | |
| "loss": 0.112, | |
| "step": 3175 | |
| }, | |
| { | |
| "epoch": 1.187, | |
| "grad_norm": 3.5483310222625732, | |
| "learning_rate": 4.001666666666667e-06, | |
| "loss": 0.1041, | |
| "step": 3200 | |
| }, | |
| { | |
| "epoch": 1.190125, | |
| "grad_norm": 5.006927013397217, | |
| "learning_rate": 3.9808333333333335e-06, | |
| "loss": 0.1184, | |
| "step": 3225 | |
| }, | |
| { | |
| "epoch": 1.19325, | |
| "grad_norm": 5.658267498016357, | |
| "learning_rate": 3.96e-06, | |
| "loss": 0.1141, | |
| "step": 3250 | |
| }, | |
| { | |
| "epoch": 1.196375, | |
| "grad_norm": 2.7597854137420654, | |
| "learning_rate": 3.939166666666667e-06, | |
| "loss": 0.1107, | |
| "step": 3275 | |
| }, | |
| { | |
| "epoch": 1.1995, | |
| "grad_norm": 4.687257289886475, | |
| "learning_rate": 3.918333333333334e-06, | |
| "loss": 0.1223, | |
| "step": 3300 | |
| }, | |
| { | |
| "epoch": 1.202625, | |
| "grad_norm": 5.1347336769104, | |
| "learning_rate": 3.8975e-06, | |
| "loss": 0.1277, | |
| "step": 3325 | |
| }, | |
| { | |
| "epoch": 1.20575, | |
| "grad_norm": 7.7792067527771, | |
| "learning_rate": 3.876666666666666e-06, | |
| "loss": 0.1293, | |
| "step": 3350 | |
| }, | |
| { | |
| "epoch": 1.208875, | |
| "grad_norm": 3.461538791656494, | |
| "learning_rate": 3.855833333333334e-06, | |
| "loss": 0.1235, | |
| "step": 3375 | |
| }, | |
| { | |
| "epoch": 1.212, | |
| "grad_norm": 3.458538055419922, | |
| "learning_rate": 3.8350000000000006e-06, | |
| "loss": 0.1094, | |
| "step": 3400 | |
| }, | |
| { | |
| "epoch": 2.002125, | |
| "grad_norm": 6.5652313232421875, | |
| "learning_rate": 3.8141666666666664e-06, | |
| "loss": 0.0766, | |
| "step": 3425 | |
| }, | |
| { | |
| "epoch": 2.00525, | |
| "grad_norm": 2.599691152572632, | |
| "learning_rate": 3.7933333333333336e-06, | |
| "loss": 0.0666, | |
| "step": 3450 | |
| }, | |
| { | |
| "epoch": 2.008375, | |
| "grad_norm": 5.211915493011475, | |
| "learning_rate": 3.7725000000000003e-06, | |
| "loss": 0.0635, | |
| "step": 3475 | |
| }, | |
| { | |
| "epoch": 2.0115, | |
| "grad_norm": 3.1992459297180176, | |
| "learning_rate": 3.7516666666666666e-06, | |
| "loss": 0.069, | |
| "step": 3500 | |
| }, | |
| { | |
| "epoch": 2.0115, | |
| "eval_loss": 0.15404893457889557, | |
| "eval_runtime": 2458.0949, | |
| "eval_samples_per_second": 5.545, | |
| "eval_steps_per_second": 0.693, | |
| "eval_wer": 9.764923595587966, | |
| "step": 3500 | |
| }, | |
| { | |
| "epoch": 2.014625, | |
| "grad_norm": 3.740165948867798, | |
| "learning_rate": 3.7308333333333333e-06, | |
| "loss": 0.0699, | |
| "step": 3525 | |
| }, | |
| { | |
| "epoch": 2.01775, | |
| "grad_norm": 2.624305009841919, | |
| "learning_rate": 3.7100000000000005e-06, | |
| "loss": 0.0644, | |
| "step": 3550 | |
| }, | |
| { | |
| "epoch": 2.020875, | |
| "grad_norm": 3.66835355758667, | |
| "learning_rate": 3.689166666666667e-06, | |
| "loss": 0.0552, | |
| "step": 3575 | |
| }, | |
| { | |
| "epoch": 2.024, | |
| "grad_norm": 3.7992517948150635, | |
| "learning_rate": 3.6683333333333335e-06, | |
| "loss": 0.0715, | |
| "step": 3600 | |
| }, | |
| { | |
| "epoch": 2.027125, | |
| "grad_norm": 3.4328665733337402, | |
| "learning_rate": 3.6475000000000002e-06, | |
| "loss": 0.0642, | |
| "step": 3625 | |
| }, | |
| { | |
| "epoch": 2.03025, | |
| "grad_norm": 3.206305503845215, | |
| "learning_rate": 3.626666666666667e-06, | |
| "loss": 0.068, | |
| "step": 3650 | |
| }, | |
| { | |
| "epoch": 2.033375, | |
| "grad_norm": 3.6906914710998535, | |
| "learning_rate": 3.6058333333333333e-06, | |
| "loss": 0.065, | |
| "step": 3675 | |
| }, | |
| { | |
| "epoch": 2.0365, | |
| "grad_norm": 3.6564929485321045, | |
| "learning_rate": 3.585e-06, | |
| "loss": 0.0634, | |
| "step": 3700 | |
| }, | |
| { | |
| "epoch": 2.039625, | |
| "grad_norm": 2.8516416549682617, | |
| "learning_rate": 3.564166666666667e-06, | |
| "loss": 0.0632, | |
| "step": 3725 | |
| }, | |
| { | |
| "epoch": 2.04275, | |
| "grad_norm": 2.905165672302246, | |
| "learning_rate": 3.5433333333333334e-06, | |
| "loss": 0.0528, | |
| "step": 3750 | |
| }, | |
| { | |
| "epoch": 2.045875, | |
| "grad_norm": 2.2724170684814453, | |
| "learning_rate": 3.5225e-06, | |
| "loss": 0.0604, | |
| "step": 3775 | |
| }, | |
| { | |
| "epoch": 2.049, | |
| "grad_norm": 2.6760237216949463, | |
| "learning_rate": 3.501666666666667e-06, | |
| "loss": 0.0528, | |
| "step": 3800 | |
| }, | |
| { | |
| "epoch": 2.052125, | |
| "grad_norm": 4.052576541900635, | |
| "learning_rate": 3.480833333333333e-06, | |
| "loss": 0.0535, | |
| "step": 3825 | |
| }, | |
| { | |
| "epoch": 2.05525, | |
| "grad_norm": 3.6434435844421387, | |
| "learning_rate": 3.46e-06, | |
| "loss": 0.0499, | |
| "step": 3850 | |
| }, | |
| { | |
| "epoch": 2.058375, | |
| "grad_norm": 2.612650156021118, | |
| "learning_rate": 3.439166666666667e-06, | |
| "loss": 0.0489, | |
| "step": 3875 | |
| }, | |
| { | |
| "epoch": 2.0615, | |
| "grad_norm": 1.6679494380950928, | |
| "learning_rate": 3.4183333333333338e-06, | |
| "loss": 0.0475, | |
| "step": 3900 | |
| }, | |
| { | |
| "epoch": 2.064625, | |
| "grad_norm": 2.7951669692993164, | |
| "learning_rate": 3.3975e-06, | |
| "loss": 0.0517, | |
| "step": 3925 | |
| }, | |
| { | |
| "epoch": 2.06775, | |
| "grad_norm": 2.6957435607910156, | |
| "learning_rate": 3.376666666666667e-06, | |
| "loss": 0.0508, | |
| "step": 3950 | |
| }, | |
| { | |
| "epoch": 2.070875, | |
| "grad_norm": 2.930025577545166, | |
| "learning_rate": 3.355833333333334e-06, | |
| "loss": 0.0554, | |
| "step": 3975 | |
| }, | |
| { | |
| "epoch": 2.074, | |
| "grad_norm": 2.0811214447021484, | |
| "learning_rate": 3.335e-06, | |
| "loss": 0.0606, | |
| "step": 4000 | |
| }, | |
| { | |
| "epoch": 2.074, | |
| "eval_loss": 0.1549645960330963, | |
| "eval_runtime": 2475.9667, | |
| "eval_samples_per_second": 5.505, | |
| "eval_steps_per_second": 0.688, | |
| "eval_wer": 9.819890798490235, | |
| "step": 4000 | |
| }, | |
| { | |
| "epoch": 2.077125, | |
| "grad_norm": 2.389423370361328, | |
| "learning_rate": 3.314166666666667e-06, | |
| "loss": 0.0551, | |
| "step": 4025 | |
| }, | |
| { | |
| "epoch": 2.08025, | |
| "grad_norm": 1.8350708484649658, | |
| "learning_rate": 3.2933333333333337e-06, | |
| "loss": 0.0501, | |
| "step": 4050 | |
| }, | |
| { | |
| "epoch": 2.083375, | |
| "grad_norm": 3.053312063217163, | |
| "learning_rate": 3.2725e-06, | |
| "loss": 0.0526, | |
| "step": 4075 | |
| }, | |
| { | |
| "epoch": 2.0865, | |
| "grad_norm": 3.489823341369629, | |
| "learning_rate": 3.2516666666666667e-06, | |
| "loss": 0.0476, | |
| "step": 4100 | |
| }, | |
| { | |
| "epoch": 2.089625, | |
| "grad_norm": 3.742950916290283, | |
| "learning_rate": 3.2308333333333335e-06, | |
| "loss": 0.0614, | |
| "step": 4125 | |
| }, | |
| { | |
| "epoch": 2.09275, | |
| "grad_norm": 1.9854848384857178, | |
| "learning_rate": 3.2099999999999998e-06, | |
| "loss": 0.0487, | |
| "step": 4150 | |
| }, | |
| { | |
| "epoch": 2.095875, | |
| "grad_norm": 2.3751885890960693, | |
| "learning_rate": 3.1891666666666665e-06, | |
| "loss": 0.0496, | |
| "step": 4175 | |
| }, | |
| { | |
| "epoch": 2.099, | |
| "grad_norm": 2.182997703552246, | |
| "learning_rate": 3.1683333333333336e-06, | |
| "loss": 0.0442, | |
| "step": 4200 | |
| }, | |
| { | |
| "epoch": 2.102125, | |
| "grad_norm": 1.963120937347412, | |
| "learning_rate": 3.1475000000000004e-06, | |
| "loss": 0.0437, | |
| "step": 4225 | |
| }, | |
| { | |
| "epoch": 2.10525, | |
| "grad_norm": 1.7127807140350342, | |
| "learning_rate": 3.1266666666666667e-06, | |
| "loss": 0.0479, | |
| "step": 4250 | |
| }, | |
| { | |
| "epoch": 2.108375, | |
| "grad_norm": 3.277400016784668, | |
| "learning_rate": 3.1058333333333334e-06, | |
| "loss": 0.0535, | |
| "step": 4275 | |
| }, | |
| { | |
| "epoch": 2.1115, | |
| "grad_norm": 3.1404621601104736, | |
| "learning_rate": 3.085e-06, | |
| "loss": 0.0431, | |
| "step": 4300 | |
| }, | |
| { | |
| "epoch": 2.114625, | |
| "grad_norm": 3.8738794326782227, | |
| "learning_rate": 3.064166666666667e-06, | |
| "loss": 0.0436, | |
| "step": 4325 | |
| }, | |
| { | |
| "epoch": 2.11775, | |
| "grad_norm": 2.9267311096191406, | |
| "learning_rate": 3.0433333333333336e-06, | |
| "loss": 0.0496, | |
| "step": 4350 | |
| }, | |
| { | |
| "epoch": 2.120875, | |
| "grad_norm": 4.0710320472717285, | |
| "learning_rate": 3.0225e-06, | |
| "loss": 0.047, | |
| "step": 4375 | |
| }, | |
| { | |
| "epoch": 2.124, | |
| "grad_norm": 2.9265050888061523, | |
| "learning_rate": 3.001666666666667e-06, | |
| "loss": 0.0434, | |
| "step": 4400 | |
| }, | |
| { | |
| "epoch": 2.127125, | |
| "grad_norm": 2.666417121887207, | |
| "learning_rate": 2.9808333333333333e-06, | |
| "loss": 0.0357, | |
| "step": 4425 | |
| }, | |
| { | |
| "epoch": 2.13025, | |
| "grad_norm": 3.082674741744995, | |
| "learning_rate": 2.9600000000000005e-06, | |
| "loss": 0.0486, | |
| "step": 4450 | |
| }, | |
| { | |
| "epoch": 2.133375, | |
| "grad_norm": 2.291168689727783, | |
| "learning_rate": 2.9391666666666668e-06, | |
| "loss": 0.046, | |
| "step": 4475 | |
| }, | |
| { | |
| "epoch": 2.1365, | |
| "grad_norm": 2.878455877304077, | |
| "learning_rate": 2.9183333333333335e-06, | |
| "loss": 0.0434, | |
| "step": 4500 | |
| }, | |
| { | |
| "epoch": 2.1365, | |
| "eval_loss": 0.15800228714942932, | |
| "eval_runtime": 2430.3639, | |
| "eval_samples_per_second": 5.608, | |
| "eval_steps_per_second": 0.701, | |
| "eval_wer": 9.457107259335263, | |
| "step": 4500 | |
| }, | |
| { | |
| "epoch": 2.139625, | |
| "grad_norm": 2.2872824668884277, | |
| "learning_rate": 2.8975e-06, | |
| "loss": 0.0507, | |
| "step": 4525 | |
| }, | |
| { | |
| "epoch": 2.14275, | |
| "grad_norm": 1.6797173023223877, | |
| "learning_rate": 2.876666666666667e-06, | |
| "loss": 0.044, | |
| "step": 4550 | |
| }, | |
| { | |
| "epoch": 2.145875, | |
| "grad_norm": 2.690349817276001, | |
| "learning_rate": 2.8558333333333337e-06, | |
| "loss": 0.041, | |
| "step": 4575 | |
| }, | |
| { | |
| "epoch": 2.149, | |
| "grad_norm": 2.515873670578003, | |
| "learning_rate": 2.835e-06, | |
| "loss": 0.0503, | |
| "step": 4600 | |
| }, | |
| { | |
| "epoch": 2.152125, | |
| "grad_norm": 3.210235595703125, | |
| "learning_rate": 2.8141666666666667e-06, | |
| "loss": 0.0539, | |
| "step": 4625 | |
| }, | |
| { | |
| "epoch": 2.15525, | |
| "grad_norm": 2.19775128364563, | |
| "learning_rate": 2.7933333333333334e-06, | |
| "loss": 0.0486, | |
| "step": 4650 | |
| }, | |
| { | |
| "epoch": 2.158375, | |
| "grad_norm": 2.8275535106658936, | |
| "learning_rate": 2.7725e-06, | |
| "loss": 0.0455, | |
| "step": 4675 | |
| }, | |
| { | |
| "epoch": 2.1615, | |
| "grad_norm": 2.911288022994995, | |
| "learning_rate": 2.7516666666666664e-06, | |
| "loss": 0.0495, | |
| "step": 4700 | |
| }, | |
| { | |
| "epoch": 2.164625, | |
| "grad_norm": 3.446293592453003, | |
| "learning_rate": 2.7308333333333336e-06, | |
| "loss": 0.0527, | |
| "step": 4725 | |
| }, | |
| { | |
| "epoch": 2.16775, | |
| "grad_norm": 2.1223082542419434, | |
| "learning_rate": 2.71e-06, | |
| "loss": 0.0437, | |
| "step": 4750 | |
| }, | |
| { | |
| "epoch": 2.170875, | |
| "grad_norm": 2.4212393760681152, | |
| "learning_rate": 2.689166666666667e-06, | |
| "loss": 0.0504, | |
| "step": 4775 | |
| }, | |
| { | |
| "epoch": 2.174, | |
| "grad_norm": 2.440826177597046, | |
| "learning_rate": 2.6683333333333333e-06, | |
| "loss": 0.0432, | |
| "step": 4800 | |
| }, | |
| { | |
| "epoch": 2.177125, | |
| "grad_norm": 2.3568456172943115, | |
| "learning_rate": 2.6475e-06, | |
| "loss": 0.0404, | |
| "step": 4825 | |
| }, | |
| { | |
| "epoch": 2.18025, | |
| "grad_norm": 2.638301372528076, | |
| "learning_rate": 2.6266666666666668e-06, | |
| "loss": 0.0528, | |
| "step": 4850 | |
| }, | |
| { | |
| "epoch": 2.183375, | |
| "grad_norm": 2.1262662410736084, | |
| "learning_rate": 2.6058333333333335e-06, | |
| "loss": 0.0468, | |
| "step": 4875 | |
| }, | |
| { | |
| "epoch": 2.1865, | |
| "grad_norm": 1.8121278285980225, | |
| "learning_rate": 2.5850000000000002e-06, | |
| "loss": 0.0414, | |
| "step": 4900 | |
| }, | |
| { | |
| "epoch": 2.189625, | |
| "grad_norm": 3.5271337032318115, | |
| "learning_rate": 2.564166666666667e-06, | |
| "loss": 0.0477, | |
| "step": 4925 | |
| }, | |
| { | |
| "epoch": 2.19275, | |
| "grad_norm": 2.0672607421875, | |
| "learning_rate": 2.5433333333333333e-06, | |
| "loss": 0.0402, | |
| "step": 4950 | |
| }, | |
| { | |
| "epoch": 2.195875, | |
| "grad_norm": 2.3378803730010986, | |
| "learning_rate": 2.5225000000000004e-06, | |
| "loss": 0.0458, | |
| "step": 4975 | |
| }, | |
| { | |
| "epoch": 2.199, | |
| "grad_norm": 2.3618690967559814, | |
| "learning_rate": 2.5016666666666667e-06, | |
| "loss": 0.0455, | |
| "step": 5000 | |
| }, | |
| { | |
| "epoch": 2.199, | |
| "eval_loss": 0.15326862037181854, | |
| "eval_runtime": 2431.3758, | |
| "eval_samples_per_second": 5.606, | |
| "eval_steps_per_second": 0.701, | |
| "eval_wer": 9.14104584264722, | |
| "step": 5000 | |
| }, | |
| { | |
| "epoch": 2.202125, | |
| "grad_norm": 3.066169261932373, | |
| "learning_rate": 2.4808333333333334e-06, | |
| "loss": 0.0514, | |
| "step": 5025 | |
| }, | |
| { | |
| "epoch": 2.20525, | |
| "grad_norm": 2.8991472721099854, | |
| "learning_rate": 2.46e-06, | |
| "loss": 0.0454, | |
| "step": 5050 | |
| }, | |
| { | |
| "epoch": 2.208375, | |
| "grad_norm": 2.641075611114502, | |
| "learning_rate": 2.439166666666667e-06, | |
| "loss": 0.0448, | |
| "step": 5075 | |
| }, | |
| { | |
| "epoch": 2.2115, | |
| "grad_norm": 3.234225034713745, | |
| "learning_rate": 2.4183333333333336e-06, | |
| "loss": 0.0504, | |
| "step": 5100 | |
| }, | |
| { | |
| "epoch": 3.001625, | |
| "grad_norm": 1.9421311616897583, | |
| "learning_rate": 2.3975e-06, | |
| "loss": 0.0377, | |
| "step": 5125 | |
| }, | |
| { | |
| "epoch": 3.00475, | |
| "grad_norm": 1.9280989170074463, | |
| "learning_rate": 2.3766666666666666e-06, | |
| "loss": 0.0291, | |
| "step": 5150 | |
| }, | |
| { | |
| "epoch": 3.007875, | |
| "grad_norm": 1.701106309890747, | |
| "learning_rate": 2.3558333333333334e-06, | |
| "loss": 0.0254, | |
| "step": 5175 | |
| }, | |
| { | |
| "epoch": 3.011, | |
| "grad_norm": 1.4093270301818848, | |
| "learning_rate": 2.335e-06, | |
| "loss": 0.0267, | |
| "step": 5200 | |
| }, | |
| { | |
| "epoch": 3.014125, | |
| "grad_norm": 2.7806079387664795, | |
| "learning_rate": 2.314166666666667e-06, | |
| "loss": 0.0271, | |
| "step": 5225 | |
| }, | |
| { | |
| "epoch": 3.01725, | |
| "grad_norm": 2.454941511154175, | |
| "learning_rate": 2.2933333333333335e-06, | |
| "loss": 0.0296, | |
| "step": 5250 | |
| }, | |
| { | |
| "epoch": 3.020375, | |
| "grad_norm": 1.8080620765686035, | |
| "learning_rate": 2.2725e-06, | |
| "loss": 0.0254, | |
| "step": 5275 | |
| }, | |
| { | |
| "epoch": 3.0235, | |
| "grad_norm": 2.4920754432678223, | |
| "learning_rate": 2.251666666666667e-06, | |
| "loss": 0.0242, | |
| "step": 5300 | |
| }, | |
| { | |
| "epoch": 3.026625, | |
| "grad_norm": 1.4802467823028564, | |
| "learning_rate": 2.2308333333333333e-06, | |
| "loss": 0.0242, | |
| "step": 5325 | |
| }, | |
| { | |
| "epoch": 3.02975, | |
| "grad_norm": 4.049746036529541, | |
| "learning_rate": 2.2100000000000004e-06, | |
| "loss": 0.026, | |
| "step": 5350 | |
| }, | |
| { | |
| "epoch": 3.032875, | |
| "grad_norm": 2.304689884185791, | |
| "learning_rate": 2.1891666666666667e-06, | |
| "loss": 0.0261, | |
| "step": 5375 | |
| }, | |
| { | |
| "epoch": 3.036, | |
| "grad_norm": 1.9863944053649902, | |
| "learning_rate": 2.1683333333333335e-06, | |
| "loss": 0.0251, | |
| "step": 5400 | |
| }, | |
| { | |
| "epoch": 3.039125, | |
| "grad_norm": 2.0497422218322754, | |
| "learning_rate": 2.1475e-06, | |
| "loss": 0.0254, | |
| "step": 5425 | |
| }, | |
| { | |
| "epoch": 3.04225, | |
| "grad_norm": 2.5717766284942627, | |
| "learning_rate": 2.126666666666667e-06, | |
| "loss": 0.0238, | |
| "step": 5450 | |
| }, | |
| { | |
| "epoch": 3.045375, | |
| "grad_norm": 1.1389164924621582, | |
| "learning_rate": 2.1058333333333332e-06, | |
| "loss": 0.0208, | |
| "step": 5475 | |
| }, | |
| { | |
| "epoch": 3.0485, | |
| "grad_norm": 1.5230340957641602, | |
| "learning_rate": 2.085e-06, | |
| "loss": 0.0216, | |
| "step": 5500 | |
| }, | |
| { | |
| "epoch": 3.0485, | |
| "eval_loss": 0.1619918942451477, | |
| "eval_runtime": 2437.6868, | |
| "eval_samples_per_second": 5.591, | |
| "eval_steps_per_second": 0.699, | |
| "eval_wer": 9.08424639964821, | |
| "step": 5500 | |
| }, | |
| { | |
| "epoch": 3.051625, | |
| "grad_norm": 1.907436728477478, | |
| "learning_rate": 2.0641666666666667e-06, | |
| "loss": 0.0224, | |
| "step": 5525 | |
| }, | |
| { | |
| "epoch": 3.05475, | |
| "grad_norm": 1.5222604274749756, | |
| "learning_rate": 2.0433333333333334e-06, | |
| "loss": 0.0197, | |
| "step": 5550 | |
| }, | |
| { | |
| "epoch": 3.057875, | |
| "grad_norm": 1.5284624099731445, | |
| "learning_rate": 2.0225e-06, | |
| "loss": 0.0152, | |
| "step": 5575 | |
| }, | |
| { | |
| "epoch": 3.061, | |
| "grad_norm": 0.7098265886306763, | |
| "learning_rate": 2.0016666666666664e-06, | |
| "loss": 0.019, | |
| "step": 5600 | |
| }, | |
| { | |
| "epoch": 3.064125, | |
| "grad_norm": 2.1706318855285645, | |
| "learning_rate": 1.9808333333333336e-06, | |
| "loss": 0.0189, | |
| "step": 5625 | |
| }, | |
| { | |
| "epoch": 3.06725, | |
| "grad_norm": 2.888962745666504, | |
| "learning_rate": 1.96e-06, | |
| "loss": 0.0201, | |
| "step": 5650 | |
| }, | |
| { | |
| "epoch": 3.070375, | |
| "grad_norm": 3.0322179794311523, | |
| "learning_rate": 1.939166666666667e-06, | |
| "loss": 0.0211, | |
| "step": 5675 | |
| }, | |
| { | |
| "epoch": 3.0735, | |
| "grad_norm": 3.066394329071045, | |
| "learning_rate": 1.9183333333333333e-06, | |
| "loss": 0.0253, | |
| "step": 5700 | |
| }, | |
| { | |
| "epoch": 3.076625, | |
| "grad_norm": 2.5032601356506348, | |
| "learning_rate": 1.8975e-06, | |
| "loss": 0.0236, | |
| "step": 5725 | |
| }, | |
| { | |
| "epoch": 3.07975, | |
| "grad_norm": 1.5625773668289185, | |
| "learning_rate": 1.8766666666666668e-06, | |
| "loss": 0.0193, | |
| "step": 5750 | |
| }, | |
| { | |
| "epoch": 3.082875, | |
| "grad_norm": 1.7981406450271606, | |
| "learning_rate": 1.8558333333333333e-06, | |
| "loss": 0.0157, | |
| "step": 5775 | |
| }, | |
| { | |
| "epoch": 3.086, | |
| "grad_norm": 1.1411957740783691, | |
| "learning_rate": 1.8350000000000002e-06, | |
| "loss": 0.0217, | |
| "step": 5800 | |
| }, | |
| { | |
| "epoch": 3.089125, | |
| "grad_norm": 1.1639596223831177, | |
| "learning_rate": 1.8141666666666667e-06, | |
| "loss": 0.0239, | |
| "step": 5825 | |
| }, | |
| { | |
| "epoch": 3.09225, | |
| "grad_norm": 0.7168381810188293, | |
| "learning_rate": 1.7933333333333332e-06, | |
| "loss": 0.0218, | |
| "step": 5850 | |
| }, | |
| { | |
| "epoch": 3.095375, | |
| "grad_norm": 1.1308009624481201, | |
| "learning_rate": 1.7725000000000002e-06, | |
| "loss": 0.0214, | |
| "step": 5875 | |
| }, | |
| { | |
| "epoch": 3.0985, | |
| "grad_norm": 2.1142430305480957, | |
| "learning_rate": 1.7516666666666667e-06, | |
| "loss": 0.0155, | |
| "step": 5900 | |
| }, | |
| { | |
| "epoch": 3.101625, | |
| "grad_norm": 1.479252815246582, | |
| "learning_rate": 1.7308333333333332e-06, | |
| "loss": 0.0176, | |
| "step": 5925 | |
| }, | |
| { | |
| "epoch": 3.10475, | |
| "grad_norm": 1.3254590034484863, | |
| "learning_rate": 1.7100000000000001e-06, | |
| "loss": 0.0144, | |
| "step": 5950 | |
| }, | |
| { | |
| "epoch": 3.107875, | |
| "grad_norm": 2.1925458908081055, | |
| "learning_rate": 1.6891666666666667e-06, | |
| "loss": 0.0162, | |
| "step": 5975 | |
| }, | |
| { | |
| "epoch": 3.111, | |
| "grad_norm": 1.774483561515808, | |
| "learning_rate": 1.6683333333333336e-06, | |
| "loss": 0.017, | |
| "step": 6000 | |
| }, | |
| { | |
| "epoch": 3.111, | |
| "eval_loss": 0.17044013738632202, | |
| "eval_runtime": 2431.1861, | |
| "eval_samples_per_second": 5.606, | |
| "eval_steps_per_second": 0.701, | |
| "eval_wer": 9.097988200373777, | |
| "step": 6000 | |
| }, | |
| { | |
| "epoch": 3.114125, | |
| "grad_norm": 3.372814893722534, | |
| "learning_rate": 1.6483333333333334e-06, | |
| "loss": 0.0216, | |
| "step": 6025 | |
| }, | |
| { | |
| "epoch": 3.11725, | |
| "grad_norm": 0.39716529846191406, | |
| "learning_rate": 1.6275000000000003e-06, | |
| "loss": 0.0161, | |
| "step": 6050 | |
| }, | |
| { | |
| "epoch": 3.120375, | |
| "grad_norm": 1.4220778942108154, | |
| "learning_rate": 1.6066666666666668e-06, | |
| "loss": 0.0211, | |
| "step": 6075 | |
| }, | |
| { | |
| "epoch": 3.1235, | |
| "grad_norm": 1.2959835529327393, | |
| "learning_rate": 1.5858333333333333e-06, | |
| "loss": 0.0187, | |
| "step": 6100 | |
| }, | |
| { | |
| "epoch": 3.1266249999999998, | |
| "grad_norm": 1.9399360418319702, | |
| "learning_rate": 1.565e-06, | |
| "loss": 0.0123, | |
| "step": 6125 | |
| }, | |
| { | |
| "epoch": 3.12975, | |
| "grad_norm": 2.898085594177246, | |
| "learning_rate": 1.5441666666666668e-06, | |
| "loss": 0.0197, | |
| "step": 6150 | |
| }, | |
| { | |
| "epoch": 3.132875, | |
| "grad_norm": 3.642364263534546, | |
| "learning_rate": 1.5233333333333333e-06, | |
| "loss": 0.0162, | |
| "step": 6175 | |
| }, | |
| { | |
| "epoch": 3.136, | |
| "grad_norm": 1.7888002395629883, | |
| "learning_rate": 1.5025e-06, | |
| "loss": 0.0164, | |
| "step": 6200 | |
| }, | |
| { | |
| "epoch": 3.139125, | |
| "grad_norm": 2.3871753215789795, | |
| "learning_rate": 1.4816666666666667e-06, | |
| "loss": 0.0175, | |
| "step": 6225 | |
| }, | |
| { | |
| "epoch": 3.1422499999999998, | |
| "grad_norm": 1.4263437986373901, | |
| "learning_rate": 1.4608333333333333e-06, | |
| "loss": 0.0152, | |
| "step": 6250 | |
| }, | |
| { | |
| "epoch": 3.145375, | |
| "grad_norm": 2.174880027770996, | |
| "learning_rate": 1.44e-06, | |
| "loss": 0.0172, | |
| "step": 6275 | |
| }, | |
| { | |
| "epoch": 3.1485, | |
| "grad_norm": 0.9558664560317993, | |
| "learning_rate": 1.4191666666666667e-06, | |
| "loss": 0.0172, | |
| "step": 6300 | |
| }, | |
| { | |
| "epoch": 3.151625, | |
| "grad_norm": 2.228374719619751, | |
| "learning_rate": 1.3983333333333334e-06, | |
| "loss": 0.0173, | |
| "step": 6325 | |
| }, | |
| { | |
| "epoch": 3.15475, | |
| "grad_norm": 1.3473858833312988, | |
| "learning_rate": 1.3775000000000002e-06, | |
| "loss": 0.0211, | |
| "step": 6350 | |
| }, | |
| { | |
| "epoch": 3.1578749999999998, | |
| "grad_norm": 1.575217843055725, | |
| "learning_rate": 1.3566666666666667e-06, | |
| "loss": 0.0195, | |
| "step": 6375 | |
| }, | |
| { | |
| "epoch": 3.161, | |
| "grad_norm": 1.4997564554214478, | |
| "learning_rate": 1.3358333333333334e-06, | |
| "loss": 0.0174, | |
| "step": 6400 | |
| }, | |
| { | |
| "epoch": 3.164125, | |
| "grad_norm": 1.6651334762573242, | |
| "learning_rate": 1.3150000000000001e-06, | |
| "loss": 0.0178, | |
| "step": 6425 | |
| }, | |
| { | |
| "epoch": 3.16725, | |
| "grad_norm": 1.9218391180038452, | |
| "learning_rate": 1.2941666666666668e-06, | |
| "loss": 0.0168, | |
| "step": 6450 | |
| }, | |
| { | |
| "epoch": 3.170375, | |
| "grad_norm": 1.322709560394287, | |
| "learning_rate": 1.2733333333333334e-06, | |
| "loss": 0.0155, | |
| "step": 6475 | |
| }, | |
| { | |
| "epoch": 3.1734999999999998, | |
| "grad_norm": 0.7265995144844055, | |
| "learning_rate": 1.2525e-06, | |
| "loss": 0.0174, | |
| "step": 6500 | |
| }, | |
| { | |
| "epoch": 3.1734999999999998, | |
| "eval_loss": 0.16809040307998657, | |
| "eval_runtime": 2425.0716, | |
| "eval_samples_per_second": 5.62, | |
| "eval_steps_per_second": 0.703, | |
| "eval_wer": 9.072336839019385, | |
| "step": 6500 | |
| }, | |
| { | |
| "epoch": 3.176625, | |
| "grad_norm": 3.6835756301879883, | |
| "learning_rate": 1.2316666666666668e-06, | |
| "loss": 0.0177, | |
| "step": 6525 | |
| }, | |
| { | |
| "epoch": 3.17975, | |
| "grad_norm": 1.7619342803955078, | |
| "learning_rate": 1.2108333333333335e-06, | |
| "loss": 0.0212, | |
| "step": 6550 | |
| }, | |
| { | |
| "epoch": 3.182875, | |
| "grad_norm": 1.547814130783081, | |
| "learning_rate": 1.19e-06, | |
| "loss": 0.0213, | |
| "step": 6575 | |
| }, | |
| { | |
| "epoch": 3.186, | |
| "grad_norm": 2.0077638626098633, | |
| "learning_rate": 1.1691666666666668e-06, | |
| "loss": 0.016, | |
| "step": 6600 | |
| }, | |
| { | |
| "epoch": 3.1891249999999998, | |
| "grad_norm": 1.806665062904358, | |
| "learning_rate": 1.1483333333333333e-06, | |
| "loss": 0.0165, | |
| "step": 6625 | |
| }, | |
| { | |
| "epoch": 3.19225, | |
| "grad_norm": 1.9576735496520996, | |
| "learning_rate": 1.1283333333333333e-06, | |
| "loss": 0.0173, | |
| "step": 6650 | |
| }, | |
| { | |
| "epoch": 3.195375, | |
| "grad_norm": 1.992625117301941, | |
| "learning_rate": 1.1075e-06, | |
| "loss": 0.0179, | |
| "step": 6675 | |
| }, | |
| { | |
| "epoch": 3.1985, | |
| "grad_norm": 1.9625897407531738, | |
| "learning_rate": 1.0866666666666667e-06, | |
| "loss": 0.0174, | |
| "step": 6700 | |
| }, | |
| { | |
| "epoch": 3.201625, | |
| "grad_norm": 1.079950213432312, | |
| "learning_rate": 1.0658333333333334e-06, | |
| "loss": 0.0189, | |
| "step": 6725 | |
| }, | |
| { | |
| "epoch": 3.2047499999999998, | |
| "grad_norm": 1.7856156826019287, | |
| "learning_rate": 1.045e-06, | |
| "loss": 0.0179, | |
| "step": 6750 | |
| }, | |
| { | |
| "epoch": 3.207875, | |
| "grad_norm": 0.44674980640411377, | |
| "learning_rate": 1.0241666666666667e-06, | |
| "loss": 0.0185, | |
| "step": 6775 | |
| }, | |
| { | |
| "epoch": 3.211, | |
| "grad_norm": 2.1849780082702637, | |
| "learning_rate": 1.0033333333333334e-06, | |
| "loss": 0.0208, | |
| "step": 6800 | |
| }, | |
| { | |
| "epoch": 4.001125, | |
| "grad_norm": 1.4259858131408691, | |
| "learning_rate": 9.825000000000001e-07, | |
| "loss": 0.0162, | |
| "step": 6825 | |
| }, | |
| { | |
| "epoch": 4.00425, | |
| "grad_norm": 0.5507416129112244, | |
| "learning_rate": 9.616666666666668e-07, | |
| "loss": 0.0099, | |
| "step": 6850 | |
| }, | |
| { | |
| "epoch": 4.007375, | |
| "grad_norm": 1.9662590026855469, | |
| "learning_rate": 9.408333333333334e-07, | |
| "loss": 0.0117, | |
| "step": 6875 | |
| }, | |
| { | |
| "epoch": 4.0105, | |
| "grad_norm": 1.9439060688018799, | |
| "learning_rate": 9.2e-07, | |
| "loss": 0.0114, | |
| "step": 6900 | |
| }, | |
| { | |
| "epoch": 4.013625, | |
| "grad_norm": 1.266473412513733, | |
| "learning_rate": 8.991666666666667e-07, | |
| "loss": 0.0085, | |
| "step": 6925 | |
| }, | |
| { | |
| "epoch": 4.01675, | |
| "grad_norm": 1.4318881034851074, | |
| "learning_rate": 8.783333333333334e-07, | |
| "loss": 0.0095, | |
| "step": 6950 | |
| }, | |
| { | |
| "epoch": 4.019875, | |
| "grad_norm": 1.7301366329193115, | |
| "learning_rate": 8.574999999999999e-07, | |
| "loss": 0.01, | |
| "step": 6975 | |
| }, | |
| { | |
| "epoch": 4.023, | |
| "grad_norm": 0.7250347137451172, | |
| "learning_rate": 8.366666666666667e-07, | |
| "loss": 0.0098, | |
| "step": 7000 | |
| }, | |
| { | |
| "epoch": 4.023, | |
| "eval_loss": 0.17248913645744324, | |
| "eval_runtime": 2424.7286, | |
| "eval_samples_per_second": 5.621, | |
| "eval_steps_per_second": 0.703, | |
| "eval_wer": 8.862545347942394, | |
| "step": 7000 | |
| }, | |
| { | |
| "epoch": 4.026125, | |
| "grad_norm": 0.9742090702056885, | |
| "learning_rate": 8.158333333333334e-07, | |
| "loss": 0.0083, | |
| "step": 7025 | |
| }, | |
| { | |
| "epoch": 4.02925, | |
| "grad_norm": 1.966017723083496, | |
| "learning_rate": 7.950000000000001e-07, | |
| "loss": 0.0098, | |
| "step": 7050 | |
| }, | |
| { | |
| "epoch": 4.032375, | |
| "grad_norm": 0.3238462209701538, | |
| "learning_rate": 7.741666666666667e-07, | |
| "loss": 0.0106, | |
| "step": 7075 | |
| }, | |
| { | |
| "epoch": 4.0355, | |
| "grad_norm": 1.1980866193771362, | |
| "learning_rate": 7.533333333333334e-07, | |
| "loss": 0.0095, | |
| "step": 7100 | |
| }, | |
| { | |
| "epoch": 4.038625, | |
| "grad_norm": 1.5639567375183105, | |
| "learning_rate": 7.325e-07, | |
| "loss": 0.0079, | |
| "step": 7125 | |
| }, | |
| { | |
| "epoch": 4.04175, | |
| "grad_norm": 2.4864511489868164, | |
| "learning_rate": 7.116666666666667e-07, | |
| "loss": 0.0081, | |
| "step": 7150 | |
| }, | |
| { | |
| "epoch": 4.044875, | |
| "grad_norm": 0.3260515332221985, | |
| "learning_rate": 6.908333333333333e-07, | |
| "loss": 0.0078, | |
| "step": 7175 | |
| }, | |
| { | |
| "epoch": 4.048, | |
| "grad_norm": 1.6305910348892212, | |
| "learning_rate": 6.7e-07, | |
| "loss": 0.0093, | |
| "step": 7200 | |
| }, | |
| { | |
| "epoch": 4.051125, | |
| "grad_norm": 0.6141969561576843, | |
| "learning_rate": 6.491666666666667e-07, | |
| "loss": 0.0082, | |
| "step": 7225 | |
| }, | |
| { | |
| "epoch": 4.05425, | |
| "grad_norm": 1.9699019193649292, | |
| "learning_rate": 6.283333333333334e-07, | |
| "loss": 0.0089, | |
| "step": 7250 | |
| }, | |
| { | |
| "epoch": 4.057375, | |
| "grad_norm": 0.2788224518299103, | |
| "learning_rate": 6.075e-07, | |
| "loss": 0.0053, | |
| "step": 7275 | |
| }, | |
| { | |
| "epoch": 4.0605, | |
| "grad_norm": 1.0774401426315308, | |
| "learning_rate": 5.866666666666667e-07, | |
| "loss": 0.0074, | |
| "step": 7300 | |
| }, | |
| { | |
| "epoch": 4.063625, | |
| "grad_norm": 0.2802826166152954, | |
| "learning_rate": 5.658333333333334e-07, | |
| "loss": 0.007, | |
| "step": 7325 | |
| }, | |
| { | |
| "epoch": 4.06675, | |
| "grad_norm": 0.459989458322525, | |
| "learning_rate": 5.450000000000001e-07, | |
| "loss": 0.0061, | |
| "step": 7350 | |
| }, | |
| { | |
| "epoch": 4.069875, | |
| "grad_norm": 1.6869885921478271, | |
| "learning_rate": 5.241666666666667e-07, | |
| "loss": 0.007, | |
| "step": 7375 | |
| }, | |
| { | |
| "epoch": 4.073, | |
| "grad_norm": 1.150252103805542, | |
| "learning_rate": 5.033333333333333e-07, | |
| "loss": 0.009, | |
| "step": 7400 | |
| }, | |
| { | |
| "epoch": 4.076125, | |
| "grad_norm": 0.7096041440963745, | |
| "learning_rate": 4.825e-07, | |
| "loss": 0.0074, | |
| "step": 7425 | |
| }, | |
| { | |
| "epoch": 4.07925, | |
| "grad_norm": 1.9114930629730225, | |
| "learning_rate": 4.6166666666666666e-07, | |
| "loss": 0.0081, | |
| "step": 7450 | |
| }, | |
| { | |
| "epoch": 4.082375, | |
| "grad_norm": 0.41340845823287964, | |
| "learning_rate": 4.408333333333334e-07, | |
| "loss": 0.0078, | |
| "step": 7475 | |
| }, | |
| { | |
| "epoch": 4.0855, | |
| "grad_norm": 1.241665005683899, | |
| "learning_rate": 4.2e-07, | |
| "loss": 0.0076, | |
| "step": 7500 | |
| }, | |
| { | |
| "epoch": 4.0855, | |
| "eval_loss": 0.17651478946208954, | |
| "eval_runtime": 2432.1699, | |
| "eval_samples_per_second": 5.604, | |
| "eval_steps_per_second": 0.701, | |
| "eval_wer": 8.83506174649126, | |
| "step": 7500 | |
| }, | |
| { | |
| "epoch": 4.088625, | |
| "grad_norm": 0.6228423714637756, | |
| "learning_rate": 3.991666666666667e-07, | |
| "loss": 0.0075, | |
| "step": 7525 | |
| }, | |
| { | |
| "epoch": 4.09175, | |
| "grad_norm": 0.5548863410949707, | |
| "learning_rate": 3.7833333333333335e-07, | |
| "loss": 0.007, | |
| "step": 7550 | |
| }, | |
| { | |
| "epoch": 4.094875, | |
| "grad_norm": 0.33007875084877014, | |
| "learning_rate": 3.575e-07, | |
| "loss": 0.0058, | |
| "step": 7575 | |
| }, | |
| { | |
| "epoch": 4.098, | |
| "grad_norm": 1.3314837217330933, | |
| "learning_rate": 3.366666666666667e-07, | |
| "loss": 0.0068, | |
| "step": 7600 | |
| }, | |
| { | |
| "epoch": 4.101125, | |
| "grad_norm": 2.230480909347534, | |
| "learning_rate": 3.1583333333333336e-07, | |
| "loss": 0.007, | |
| "step": 7625 | |
| }, | |
| { | |
| "epoch": 4.10425, | |
| "grad_norm": 0.3246554136276245, | |
| "learning_rate": 2.95e-07, | |
| "loss": 0.0058, | |
| "step": 7650 | |
| }, | |
| { | |
| "epoch": 4.107375, | |
| "grad_norm": 3.8842251300811768, | |
| "learning_rate": 2.7416666666666665e-07, | |
| "loss": 0.0071, | |
| "step": 7675 | |
| }, | |
| { | |
| "epoch": 4.1105, | |
| "grad_norm": 0.27049753069877625, | |
| "learning_rate": 2.533333333333333e-07, | |
| "loss": 0.0068, | |
| "step": 7700 | |
| }, | |
| { | |
| "epoch": 4.113625, | |
| "grad_norm": 1.5919678211212158, | |
| "learning_rate": 2.325e-07, | |
| "loss": 0.009, | |
| "step": 7725 | |
| }, | |
| { | |
| "epoch": 4.11675, | |
| "grad_norm": 1.0917800664901733, | |
| "learning_rate": 2.116666666666667e-07, | |
| "loss": 0.0083, | |
| "step": 7750 | |
| }, | |
| { | |
| "epoch": 4.119875, | |
| "grad_norm": 1.6236002445220947, | |
| "learning_rate": 1.9083333333333334e-07, | |
| "loss": 0.0077, | |
| "step": 7775 | |
| }, | |
| { | |
| "epoch": 4.123, | |
| "grad_norm": 0.34154245257377625, | |
| "learning_rate": 1.7e-07, | |
| "loss": 0.0064, | |
| "step": 7800 | |
| }, | |
| { | |
| "epoch": 4.126125, | |
| "grad_norm": 0.7562180757522583, | |
| "learning_rate": 1.4916666666666669e-07, | |
| "loss": 0.0073, | |
| "step": 7825 | |
| }, | |
| { | |
| "epoch": 4.12925, | |
| "grad_norm": 1.4198355674743652, | |
| "learning_rate": 1.2833333333333333e-07, | |
| "loss": 0.0051, | |
| "step": 7850 | |
| }, | |
| { | |
| "epoch": 4.132375, | |
| "grad_norm": 0.38768094778060913, | |
| "learning_rate": 1.075e-07, | |
| "loss": 0.0073, | |
| "step": 7875 | |
| }, | |
| { | |
| "epoch": 4.1355, | |
| "grad_norm": 2.1387102603912354, | |
| "learning_rate": 8.666666666666666e-08, | |
| "loss": 0.0078, | |
| "step": 7900 | |
| }, | |
| { | |
| "epoch": 4.138625, | |
| "grad_norm": 0.7683693170547485, | |
| "learning_rate": 6.583333333333333e-08, | |
| "loss": 0.006, | |
| "step": 7925 | |
| }, | |
| { | |
| "epoch": 4.14175, | |
| "grad_norm": 0.40976452827453613, | |
| "learning_rate": 4.5e-08, | |
| "loss": 0.0059, | |
| "step": 7950 | |
| }, | |
| { | |
| "epoch": 4.144875, | |
| "grad_norm": 0.3620973229408264, | |
| "learning_rate": 2.4166666666666668e-08, | |
| "loss": 0.0054, | |
| "step": 7975 | |
| }, | |
| { | |
| "epoch": 4.148, | |
| "grad_norm": 0.28266406059265137, | |
| "learning_rate": 3.333333333333334e-09, | |
| "loss": 0.007, | |
| "step": 8000 | |
| }, | |
| { | |
| "epoch": 4.148, | |
| "eval_loss": 0.17873740196228027, | |
| "eval_runtime": 2435.5612, | |
| "eval_samples_per_second": 5.596, | |
| "eval_steps_per_second": 0.7, | |
| "eval_wer": 8.8020814247499, | |
| "step": 8000 | |
| }, | |
| { | |
| "epoch": 4.148, | |
| "step": 8000, | |
| "total_flos": 1.3062109848403968e+20, | |
| "train_loss": 0.11351343880966305, | |
| "train_runtime": 52381.6915, | |
| "train_samples_per_second": 2.444, | |
| "train_steps_per_second": 0.153 | |
| } | |
| ], | |
| "logging_steps": 25, | |
| "max_steps": 8000, | |
| "num_input_tokens_seen": 0, | |
| "num_train_epochs": 9223372036854775807, | |
| "save_steps": 1000, | |
| "stateful_callbacks": { | |
| "TrainerControl": { | |
| "args": { | |
| "should_epoch_stop": false, | |
| "should_evaluate": false, | |
| "should_log": false, | |
| "should_save": true, | |
| "should_training_stop": true | |
| }, | |
| "attributes": {} | |
| } | |
| }, | |
| "total_flos": 1.3062109848403968e+20, | |
| "train_batch_size": 16, | |
| "trial_name": null, | |
| "trial_params": null | |
| } | |