{
  "best_metric": null,
  "best_model_checkpoint": null,
  "epoch": 3.0,
  "eval_steps": 500,
  "global_step": 11250,
  "is_hyper_param_search": false,
  "is_local_process_zero": true,
  "is_world_process_zero": true,
  "log_history": [
    {
      "epoch": 0.13333333333333333,
      "grad_norm": 1.2829608917236328,
      "learning_rate": 4.7777777777777784e-05,
      "loss": 3.576,
      "step": 500
    },
    {
      "epoch": 0.26666666666666666,
      "grad_norm": 1.1731959581375122,
      "learning_rate": 4.555555555555556e-05,
      "loss": 3.4407,
      "step": 1000
    },
    {
      "epoch": 0.4,
      "grad_norm": 0.9869433045387268,
      "learning_rate": 4.3333333333333334e-05,
      "loss": 3.3909,
      "step": 1500
    },
    {
      "epoch": 0.5333333333333333,
      "grad_norm": 0.9278955459594727,
      "learning_rate": 4.111111111111111e-05,
      "loss": 3.3545,
      "step": 2000
    },
    {
      "epoch": 0.6666666666666666,
      "grad_norm": 1.1701050996780396,
      "learning_rate": 3.888888888888889e-05,
      "loss": 3.3323,
      "step": 2500
    },
    {
      "epoch": 0.8,
      "grad_norm": 1.0328292846679688,
      "learning_rate": 3.6666666666666666e-05,
      "loss": 3.3239,
      "step": 3000
    },
    {
      "epoch": 0.9333333333333333,
      "grad_norm": 1.0336453914642334,
      "learning_rate": 3.444444444444445e-05,
      "loss": 3.3073,
      "step": 3500
    },
    {
      "epoch": 1.0666666666666667,
      "grad_norm": 1.105460286140442,
      "learning_rate": 3.222222222222223e-05,
      "loss": 3.2873,
      "step": 4000
    },
    {
      "epoch": 1.2,
      "grad_norm": 1.2816375494003296,
      "learning_rate": 3e-05,
      "loss": 3.2632,
      "step": 4500
    },
    {
      "epoch": 1.3333333333333333,
      "grad_norm": 1.0792264938354492,
      "learning_rate": 2.777777777777778e-05,
      "loss": 3.2547,
      "step": 5000
    },
    {
      "epoch": 1.4666666666666668,
      "grad_norm": 1.3074992895126343,
      "learning_rate": 2.5555555555555554e-05,
      "loss": 3.2545,
      "step": 5500
    },
    {
      "epoch": 1.6,
      "grad_norm": 1.2068947553634644,
      "learning_rate": 2.3333333333333336e-05,
      "loss": 3.2323,
      "step": 6000
    },
    {
      "epoch": 1.7333333333333334,
      "grad_norm": 1.0903289318084717,
      "learning_rate": 2.111111111111111e-05,
      "loss": 3.2482,
      "step": 6500
    },
    {
      "epoch": 1.8666666666666667,
      "grad_norm": 1.3743029832839966,
      "learning_rate": 1.888888888888889e-05,
      "loss": 3.2512,
      "step": 7000
    },
    {
      "epoch": 2.0,
      "grad_norm": 1.086386799812317,
      "learning_rate": 1.6666666666666667e-05,
      "loss": 3.2346,
      "step": 7500
    },
    {
      "epoch": 2.1333333333333333,
      "grad_norm": 1.0126687288284302,
      "learning_rate": 1.4444444444444444e-05,
      "loss": 3.2083,
      "step": 8000
    },
    {
      "epoch": 2.2666666666666666,
      "grad_norm": 1.061700463294983,
      "learning_rate": 1.2222222222222222e-05,
      "loss": 3.2061,
      "step": 8500
    },
    {
      "epoch": 2.4,
      "grad_norm": 1.0460035800933838,
      "learning_rate": 1e-05,
      "loss": 3.1987,
      "step": 9000
    },
    {
      "epoch": 2.533333333333333,
      "grad_norm": 1.1724637746810913,
      "learning_rate": 7.777777777777777e-06,
      "loss": 3.2105,
      "step": 9500
    },
    {
      "epoch": 2.6666666666666665,
      "grad_norm": 1.3652186393737793,
      "learning_rate": 5.555555555555556e-06,
      "loss": 3.1972,
      "step": 10000
    },
    {
      "epoch": 2.8,
      "grad_norm": 1.2784453630447388,
      "learning_rate": 3.3333333333333333e-06,
      "loss": 3.2033,
      "step": 10500
    },
    {
      "epoch": 2.9333333333333336,
      "grad_norm": 1.0876682996749878,
      "learning_rate": 1.1111111111111112e-06,
      "loss": 3.192,
      "step": 11000
    }
  ],
  "logging_steps": 500,
  "max_steps": 11250,
  "num_input_tokens_seen": 0,
  "num_train_epochs": 3,
  "save_steps": 500,
  "stateful_callbacks": {
    "TrainerControl": {
      "args": {
        "should_epoch_stop": false,
        "should_evaluate": false,
        "should_log": false,
        "should_save": true,
        "should_training_stop": true
      },
      "attributes": {}
    }
  },
  "total_flos": 2.05523288064e+16,
  "train_batch_size": 12,
  "trial_name": null,
  "trial_params": null
}