| { |
| "best_metric": null, |
| "best_model_checkpoint": null, |
| "epoch": 3.0, |
| "eval_steps": 500, |
| "global_step": 11250, |
| "is_hyper_param_search": false, |
| "is_local_process_zero": true, |
| "is_world_process_zero": true, |
| "log_history": [ |
| { |
| "epoch": 0.13333333333333333, |
| "grad_norm": 1.2829608917236328, |
| "learning_rate": 4.7777777777777784e-05, |
| "loss": 3.576, |
| "step": 500 |
| }, |
| { |
| "epoch": 0.26666666666666666, |
| "grad_norm": 1.1731959581375122, |
| "learning_rate": 4.555555555555556e-05, |
| "loss": 3.4407, |
| "step": 1000 |
| }, |
| { |
| "epoch": 0.4, |
| "grad_norm": 0.9869433045387268, |
| "learning_rate": 4.3333333333333334e-05, |
| "loss": 3.3909, |
| "step": 1500 |
| }, |
| { |
| "epoch": 0.5333333333333333, |
| "grad_norm": 0.9278955459594727, |
| "learning_rate": 4.111111111111111e-05, |
| "loss": 3.3545, |
| "step": 2000 |
| }, |
| { |
| "epoch": 0.6666666666666666, |
| "grad_norm": 1.1701050996780396, |
| "learning_rate": 3.888888888888889e-05, |
| "loss": 3.3323, |
| "step": 2500 |
| }, |
| { |
| "epoch": 0.8, |
| "grad_norm": 1.0328292846679688, |
| "learning_rate": 3.6666666666666666e-05, |
| "loss": 3.3239, |
| "step": 3000 |
| }, |
| { |
| "epoch": 0.9333333333333333, |
| "grad_norm": 1.0336453914642334, |
| "learning_rate": 3.444444444444445e-05, |
| "loss": 3.3073, |
| "step": 3500 |
| }, |
| { |
| "epoch": 1.0666666666666667, |
| "grad_norm": 1.105460286140442, |
| "learning_rate": 3.222222222222223e-05, |
| "loss": 3.2873, |
| "step": 4000 |
| }, |
| { |
| "epoch": 1.2, |
| "grad_norm": 1.2816375494003296, |
| "learning_rate": 3e-05, |
| "loss": 3.2632, |
| "step": 4500 |
| }, |
| { |
| "epoch": 1.3333333333333333, |
| "grad_norm": 1.0792264938354492, |
| "learning_rate": 2.777777777777778e-05, |
| "loss": 3.2547, |
| "step": 5000 |
| }, |
| { |
| "epoch": 1.4666666666666668, |
| "grad_norm": 1.3074992895126343, |
| "learning_rate": 2.5555555555555554e-05, |
| "loss": 3.2545, |
| "step": 5500 |
| }, |
| { |
| "epoch": 1.6, |
| "grad_norm": 1.2068947553634644, |
| "learning_rate": 2.3333333333333336e-05, |
| "loss": 3.2323, |
| "step": 6000 |
| }, |
| { |
| "epoch": 1.7333333333333334, |
| "grad_norm": 1.0903289318084717, |
| "learning_rate": 2.111111111111111e-05, |
| "loss": 3.2482, |
| "step": 6500 |
| }, |
| { |
| "epoch": 1.8666666666666667, |
| "grad_norm": 1.3743029832839966, |
| "learning_rate": 1.888888888888889e-05, |
| "loss": 3.2512, |
| "step": 7000 |
| }, |
| { |
| "epoch": 2.0, |
| "grad_norm": 1.086386799812317, |
| "learning_rate": 1.6666666666666667e-05, |
| "loss": 3.2346, |
| "step": 7500 |
| }, |
| { |
| "epoch": 2.1333333333333333, |
| "grad_norm": 1.0126687288284302, |
| "learning_rate": 1.4444444444444444e-05, |
| "loss": 3.2083, |
| "step": 8000 |
| }, |
| { |
| "epoch": 2.2666666666666666, |
| "grad_norm": 1.061700463294983, |
| "learning_rate": 1.2222222222222222e-05, |
| "loss": 3.2061, |
| "step": 8500 |
| }, |
| { |
| "epoch": 2.4, |
| "grad_norm": 1.0460035800933838, |
| "learning_rate": 1e-05, |
| "loss": 3.1987, |
| "step": 9000 |
| }, |
| { |
| "epoch": 2.533333333333333, |
| "grad_norm": 1.1724637746810913, |
| "learning_rate": 7.777777777777777e-06, |
| "loss": 3.2105, |
| "step": 9500 |
| }, |
| { |
| "epoch": 2.6666666666666665, |
| "grad_norm": 1.3652186393737793, |
| "learning_rate": 5.555555555555556e-06, |
| "loss": 3.1972, |
| "step": 10000 |
| }, |
| { |
| "epoch": 2.8, |
| "grad_norm": 1.2784453630447388, |
| "learning_rate": 3.3333333333333333e-06, |
| "loss": 3.2033, |
| "step": 10500 |
| }, |
| { |
| "epoch": 2.9333333333333336, |
| "grad_norm": 1.0876682996749878, |
| "learning_rate": 1.1111111111111112e-06, |
| "loss": 3.192, |
| "step": 11000 |
| } |
| ], |
| "logging_steps": 500, |
| "max_steps": 11250, |
| "num_input_tokens_seen": 0, |
| "num_train_epochs": 3, |
| "save_steps": 500, |
| "stateful_callbacks": { |
| "TrainerControl": { |
| "args": { |
| "should_epoch_stop": false, |
| "should_evaluate": false, |
| "should_log": false, |
| "should_save": true, |
| "should_training_stop": true |
| }, |
| "attributes": {} |
| } |
| }, |
| "total_flos": 2.05523288064e+16, |
| "train_batch_size": 12, |
| "trial_name": null, |
| "trial_params": null |
| } |
|
|
