{ "best_metric": null, "best_model_checkpoint": null, "epoch": 0.08333333333333333, "global_step": 10000, "is_hyper_param_search": false, "is_local_process_zero": true, "is_world_process_zero": true, "log_history": [ { "epoch": 0.0, "learning_rate": 4.995833333333333e-05, "loss": 1.3073, "step": 100 }, { "epoch": 0.0, "learning_rate": 4.991666666666667e-05, "loss": 1.2549, "step": 200 }, { "epoch": 0.0, "learning_rate": 4.9875000000000006e-05, "loss": 1.25, "step": 300 }, { "epoch": 0.0, "learning_rate": 4.9833333333333336e-05, "loss": 1.246, "step": 400 }, { "epoch": 0.0, "learning_rate": 4.979166666666667e-05, "loss": 1.2451, "step": 500 }, { "epoch": 0.01, "learning_rate": 4.975e-05, "loss": 1.2441, "step": 600 }, { "epoch": 0.01, "learning_rate": 4.970833333333333e-05, "loss": 1.2395, "step": 700 }, { "epoch": 0.01, "learning_rate": 4.966666666666667e-05, "loss": 1.2372, "step": 800 }, { "epoch": 0.01, "learning_rate": 4.962500000000001e-05, "loss": 1.2331, "step": 900 }, { "epoch": 0.01, "learning_rate": 4.958333333333334e-05, "loss": 1.2305, "step": 1000 }, { "epoch": 0.01, "learning_rate": 4.954166666666667e-05, "loss": 1.2285, "step": 1100 }, { "epoch": 0.01, "learning_rate": 4.9500000000000004e-05, "loss": 1.2243, "step": 1200 }, { "epoch": 0.01, "learning_rate": 4.9458333333333334e-05, "loss": 1.2198, "step": 1300 }, { "epoch": 0.01, "learning_rate": 4.9416666666666664e-05, "loss": 1.2159, "step": 1400 }, { "epoch": 0.01, "learning_rate": 4.937500000000001e-05, "loss": 1.2087, "step": 1500 }, { "epoch": 0.01, "learning_rate": 4.933333333333334e-05, "loss": 1.2026, "step": 1600 }, { "epoch": 0.01, "learning_rate": 4.929166666666667e-05, "loss": 1.1936, "step": 1700 }, { "epoch": 0.01, "learning_rate": 4.9250000000000004e-05, "loss": 1.1834, "step": 1800 }, { "epoch": 0.02, "learning_rate": 4.9208333333333335e-05, "loss": 1.1723, "step": 1900 }, { "epoch": 0.02, "learning_rate": 4.9166666666666665e-05, "loss": 1.169, "step": 2000 }, { "epoch": 0.02, "learning_rate": 4.9125e-05, "loss": 1.1601, "step": 2100 }, { "epoch": 0.02, "learning_rate": 4.908333333333334e-05, "loss": 1.1525, "step": 2200 }, { "epoch": 0.02, "learning_rate": 4.904166666666667e-05, "loss": 1.1431, "step": 2300 }, { "epoch": 0.02, "learning_rate": 4.9e-05, "loss": 1.1363, "step": 2400 }, { "epoch": 0.02, "learning_rate": 4.8958333333333335e-05, "loss": 1.1299, "step": 2500 }, { "epoch": 0.02, "learning_rate": 4.891666666666667e-05, "loss": 1.1271, "step": 2600 }, { "epoch": 0.02, "learning_rate": 4.8875e-05, "loss": 1.1212, "step": 2700 }, { "epoch": 0.02, "learning_rate": 4.883333333333334e-05, "loss": 1.1154, "step": 2800 }, { "epoch": 0.02, "learning_rate": 4.879166666666667e-05, "loss": 1.1082, "step": 2900 }, { "epoch": 0.03, "learning_rate": 4.875e-05, "loss": 1.1026, "step": 3000 }, { "epoch": 0.03, "learning_rate": 4.8708333333333336e-05, "loss": 1.0973, "step": 3100 }, { "epoch": 0.03, "learning_rate": 4.866666666666667e-05, "loss": 1.0964, "step": 3200 }, { "epoch": 0.03, "learning_rate": 4.8625e-05, "loss": 1.0899, "step": 3300 }, { "epoch": 0.03, "learning_rate": 4.858333333333333e-05, "loss": 1.0854, "step": 3400 }, { "epoch": 0.03, "learning_rate": 4.854166666666667e-05, "loss": 1.0802, "step": 3500 }, { "epoch": 0.03, "learning_rate": 4.85e-05, "loss": 1.0733, "step": 3600 }, { "epoch": 0.03, "learning_rate": 4.845833333333334e-05, "loss": 1.0709, "step": 3700 }, { "epoch": 0.03, "learning_rate": 4.8416666666666673e-05, "loss": 1.0693, "step": 3800 }, { "epoch": 0.03, "learning_rate": 4.8375000000000004e-05, "loss": 1.0644, "step": 3900 }, { "epoch": 0.03, "learning_rate": 4.8333333333333334e-05, "loss": 1.059, "step": 4000 }, { "epoch": 0.03, "learning_rate": 4.829166666666667e-05, "loss": 1.0531, "step": 4100 }, { "epoch": 0.04, "learning_rate": 4.825e-05, "loss": 1.0509, "step": 4200 }, { "epoch": 0.04, "learning_rate": 4.820833333333333e-05, "loss": 1.0507, "step": 4300 }, { "epoch": 0.04, "learning_rate": 4.8166666666666674e-05, "loss": 1.045, "step": 4400 }, { "epoch": 0.04, "learning_rate": 4.8125000000000004e-05, "loss": 1.0429, "step": 4500 }, { "epoch": 0.04, "learning_rate": 4.8083333333333334e-05, "loss": 1.0416, "step": 4600 }, { "epoch": 0.04, "learning_rate": 4.804166666666667e-05, "loss": 1.0363, "step": 4700 }, { "epoch": 0.04, "learning_rate": 4.8e-05, "loss": 1.0326, "step": 4800 }, { "epoch": 0.04, "learning_rate": 4.795833333333333e-05, "loss": 1.0299, "step": 4900 }, { "epoch": 0.04, "learning_rate": 4.791666666666667e-05, "loss": 1.0266, "step": 5000 }, { "epoch": 0.04, "learning_rate": 4.7875000000000005e-05, "loss": 1.0297, "step": 5100 }, { "epoch": 0.04, "learning_rate": 4.7833333333333335e-05, "loss": 1.0238, "step": 5200 }, { "epoch": 0.04, "learning_rate": 4.7791666666666665e-05, "loss": 1.0213, "step": 5300 }, { "epoch": 0.04, "learning_rate": 4.775e-05, "loss": 1.0212, "step": 5400 }, { "epoch": 0.05, "learning_rate": 4.770833333333334e-05, "loss": 1.0162, "step": 5500 }, { "epoch": 0.05, "learning_rate": 4.766666666666667e-05, "loss": 1.0146, "step": 5600 }, { "epoch": 0.05, "learning_rate": 4.7625000000000006e-05, "loss": 1.0142, "step": 5700 }, { "epoch": 0.05, "learning_rate": 4.7583333333333336e-05, "loss": 1.0069, "step": 5800 }, { "epoch": 0.05, "learning_rate": 4.7541666666666666e-05, "loss": 1.0074, "step": 5900 }, { "epoch": 0.05, "learning_rate": 4.75e-05, "loss": 1.0053, "step": 6000 }, { "epoch": 0.05, "learning_rate": 4.745833333333334e-05, "loss": 1.0032, "step": 6100 }, { "epoch": 0.05, "learning_rate": 4.741666666666667e-05, "loss": 1.0019, "step": 6200 }, { "epoch": 0.05, "learning_rate": 4.7375e-05, "loss": 0.9987, "step": 6300 }, { "epoch": 0.05, "learning_rate": 4.7333333333333336e-05, "loss": 0.9983, "step": 6400 }, { "epoch": 0.05, "learning_rate": 4.7291666666666666e-05, "loss": 0.992, "step": 6500 }, { "epoch": 0.06, "learning_rate": 4.7249999999999997e-05, "loss": 0.9953, "step": 6600 }, { "epoch": 0.06, "learning_rate": 4.720833333333334e-05, "loss": 0.9907, "step": 6700 }, { "epoch": 0.06, "learning_rate": 4.716666666666667e-05, "loss": 0.9861, "step": 6800 }, { "epoch": 0.06, "learning_rate": 4.7125e-05, "loss": 0.9873, "step": 6900 }, { "epoch": 0.06, "learning_rate": 4.708333333333334e-05, "loss": 0.9877, "step": 7000 }, { "epoch": 0.06, "learning_rate": 4.704166666666667e-05, "loss": 0.9857, "step": 7100 }, { "epoch": 0.06, "learning_rate": 4.7e-05, "loss": 0.9856, "step": 7200 }, { "epoch": 0.06, "learning_rate": 4.695833333333334e-05, "loss": 0.9807, "step": 7300 }, { "epoch": 0.06, "learning_rate": 4.691666666666667e-05, "loss": 0.9793, "step": 7400 }, { "epoch": 0.06, "learning_rate": 4.6875e-05, "loss": 0.9797, "step": 7500 }, { "epoch": 0.06, "learning_rate": 4.683333333333334e-05, "loss": 0.9801, "step": 7600 }, { "epoch": 0.06, "learning_rate": 4.679166666666667e-05, "loss": 0.9721, "step": 7700 }, { "epoch": 0.07, "learning_rate": 4.6750000000000005e-05, "loss": 0.9746, "step": 7800 }, { "epoch": 0.07, "learning_rate": 4.6708333333333335e-05, "loss": 0.9724, "step": 7900 }, { "epoch": 0.07, "learning_rate": 4.666666666666667e-05, "loss": 0.9722, "step": 8000 }, { "epoch": 0.07, "learning_rate": 4.6625e-05, "loss": 0.9656, "step": 8100 }, { "epoch": 0.07, "learning_rate": 4.658333333333333e-05, "loss": 0.9683, "step": 8200 }, { "epoch": 0.07, "learning_rate": 4.654166666666667e-05, "loss": 0.9671, "step": 8300 }, { "epoch": 0.07, "learning_rate": 4.6500000000000005e-05, "loss": 0.9596, "step": 8400 }, { "epoch": 0.07, "learning_rate": 4.6458333333333335e-05, "loss": 0.9626, "step": 8500 }, { "epoch": 0.07, "learning_rate": 4.641666666666667e-05, "loss": 0.961, "step": 8600 }, { "epoch": 0.07, "learning_rate": 4.6375e-05, "loss": 0.9613, "step": 8700 }, { "epoch": 0.07, "learning_rate": 4.633333333333333e-05, "loss": 0.9601, "step": 8800 }, { "epoch": 0.07, "learning_rate": 4.629166666666667e-05, "loss": 0.9548, "step": 8900 }, { "epoch": 0.07, "learning_rate": 4.6250000000000006e-05, "loss": 0.9577, "step": 9000 }, { "epoch": 0.08, "learning_rate": 4.6208333333333336e-05, "loss": 0.9546, "step": 9100 }, { "epoch": 0.08, "learning_rate": 4.6166666666666666e-05, "loss": 0.9523, "step": 9200 }, { "epoch": 0.08, "learning_rate": 4.6125e-05, "loss": 0.9464, "step": 9300 }, { "epoch": 0.08, "learning_rate": 4.608333333333333e-05, "loss": 0.9501, "step": 9400 }, { "epoch": 0.08, "learning_rate": 4.604166666666666e-05, "loss": 0.9486, "step": 9500 }, { "epoch": 0.08, "learning_rate": 4.600000000000001e-05, "loss": 0.9447, "step": 9600 }, { "epoch": 0.08, "learning_rate": 4.595833333333334e-05, "loss": 0.9425, "step": 9700 }, { "epoch": 0.08, "learning_rate": 4.591666666666667e-05, "loss": 0.9467, "step": 9800 }, { "epoch": 0.08, "learning_rate": 4.5875000000000004e-05, "loss": 0.9454, "step": 9900 }, { "epoch": 0.08, "learning_rate": 4.5833333333333334e-05, "loss": 0.9418, "step": 10000 }, { "epoch": 0.08, "eval_loss": 0.9923413013429235, "eval_runtime": 50521.5588, "eval_samples_per_second": 332.833, "eval_steps_per_second": 41.604, "step": 10000 } ], "max_steps": 120000, "num_train_epochs": 9223372036854775807, "total_flos": 7.3209999261696e+17, "trial_name": null, "trial_params": null }