{
  "flags": {
    "fallback_recommended": false,
    "min_macro_f1_for_push": 0.3
  },
  "per_label": [
    {
      "f1": 1.0,
      "fn": 0,
      "fp": 0,
      "label": "P05",
      "precision": 1.0,
      "recall": 1.0,
      "support": 2,
      "tp": 2
    },
    {
      "f1": 1.0,
      "fn": 0,
      "fp": 0,
      "label": "P07",
      "precision": 1.0,
      "recall": 1.0,
      "support": 2,
      "tp": 2
    },
    {
      "f1": 0.6666666666666666,
      "fn": 0,
      "fp": 1,
      "label": "P12",
      "precision": 0.5,
      "recall": 1.0,
      "support": 1,
      "tp": 1
    },
    {
      "f1": 1.0,
      "fn": 0,
      "fp": 0,
      "label": "P21",
      "precision": 1.0,
      "recall": 1.0,
      "support": 1,
      "tp": 1
    },
    {
      "f1": 1.0,
      "fn": 0,
      "fp": 0,
      "label": "P22",
      "precision": 1.0,
      "recall": 1.0,
      "support": 2,
      "tp": 2
    },
    {
      "f1": 1.0,
      "fn": 0,
      "fp": 0,
      "label": "P23",
      "precision": 1.0,
      "recall": 1.0,
      "support": 1,
      "tp": 1
    },
    {
      "f1": 1.0,
      "fn": 0,
      "fp": 0,
      "label": "P27",
      "precision": 1.0,
      "recall": 1.0,
      "support": 1,
      "tp": 1
    },
    {
      "f1": 0.4,
      "fn": 0,
      "fp": 3,
      "label": "P28",
      "precision": 0.25,
      "recall": 1.0,
      "support": 1,
      "tp": 1
    },
    {
      "f1": 0.5714285714285714,
      "fn": 0,
      "fp": 6,
      "label": "P29",
      "precision": 0.4,
      "recall": 1.0,
      "support": 4,
      "tp": 4
    },
    {
      "f1": 1.0,
      "fn": 0,
      "fp": 0,
      "label": "P35",
      "precision": 1.0,
      "recall": 1.0,
      "support": 1,
      "tp": 1
    },
    {
      "f1": 0.6666666666666666,
      "fn": 0,
      "fp": 1,
      "label": "P36",
      "precision": 0.5,
      "recall": 1.0,
      "support": 1,
      "tp": 1
    },
    {
      "f1": 0.8,
      "fn": 0,
      "fp": 1,
      "label": "P37",
      "precision": 0.6666666666666666,
      "recall": 1.0,
      "support": 2,
      "tp": 2
    },
    {
      "f1": 0.9333333333333333,
      "fn": 0,
      "fp": 1,
      "label": "P39",
      "precision": 0.875,
      "recall": 1.0,
      "support": 7,
      "tp": 7
    },
    {
      "f1": 0.6666666666666666,
      "fn": 0,
      "fp": 1,
      "label": "P52",
      "precision": 0.5,
      "recall": 1.0,
      "support": 1,
      "tp": 1
    },
    {
      "f1": 1.0,
      "fn": 0,
      "fp": 0,
      "label": "P53",
      "precision": 1.0,
      "recall": 1.0,
      "support": 1,
      "tp": 1
    },
    {
      "f1": 1.0,
      "fn": 0,
      "fp": 0,
      "label": "P55",
      "precision": 1.0,
      "recall": 1.0,
      "support": 2,
      "tp": 2
    },
    {
      "f1": 0.6666666666666666,
      "fn": 0,
      "fp": 2,
      "label": "P56",
      "precision": 0.5,
      "recall": 1.0,
      "support": 2,
      "tp": 2
    },
    {
      "f1": 0.4,
      "fn": 1,
      "fp": 2,
      "label": "P58",
      "precision": 0.3333333333333333,
      "recall": 0.5,
      "support": 2,
      "tp": 1
    },
    {
      "f1": 0.6666666666666666,
      "fn": 1,
      "fp": 1,
      "label": "P59",
      "precision": 0.6666666666666666,
      "recall": 0.6666666666666666,
      "support": 3,
      "tp": 2
    },
    {
      "f1": 0.5454545454545454,
      "fn": 0,
      "fp": 5,
      "label": "P61",
      "precision": 0.375,
      "recall": 1.0,
      "support": 3,
      "tp": 3
    },
    {
      "f1": 0.6666666666666666,
      "fn": 0,
      "fp": 1,
      "label": "P70",
      "precision": 0.5,
      "recall": 1.0,
      "support": 1,
      "tp": 1
    },
    {
      "f1": 0.0,
      "fn": 1,
      "fp": 0,
      "label": "P78",
      "precision": 0.0,
      "recall": 0.0,
      "support": 1,
      "tp": 0
    },
    {
      "f1": 1.0,
      "fn": 0,
      "fp": 0,
      "label": "P83",
      "precision": 1.0,
      "recall": 1.0,
      "support": 2,
      "tp": 2
    },
    {
      "f1": 1.0,
      "fn": 0,
      "fp": 0,
      "label": "P91",
      "precision": 1.0,
      "recall": 1.0,
      "support": 1,
      "tp": 1
    },
    {
      "f1": 0.5,
      "fn": 0,
      "fp": 2,
      "label": "P92",
      "precision": 0.3333333333333333,
      "recall": 1.0,
      "support": 1,
      "tp": 1
    }
  ],
  "test": {
    "test_hit@1": 0.9210526315789473,
    "test_hit@3": 0.9473684210526315,
    "test_loss": 0.46615371108055115,
    "test_macro_f1": 0.766008658008658,
    "test_micro_f1": 0.7413793103448276,
    "test_mrr": 0.9429824561403509,
    "test_recall@3": 0.9473684210526315,
    "test_runtime": 0.2768,
    "test_samples_per_second": 137.268,
    "test_steps_per_second": 18.062,
    "test_subset_accuracy": 0.6052631578947368,
    "test_weighted_f1": 0.7772915490306794
  },
  "threshold": 0.5,
  "val_best": {
    "epoch": 16.0,
    "val_hit@1": 0.9487179487179487,
    "val_hit@3": 1.0,
    "val_loss": 0.4400142729282379,
    "val_macro_f1": 0.8019047619047618,
    "val_micro_f1": 0.8148148148148148,
    "val_mrr": 0.9700854700854702,
    "val_recall@3": 1.0,
    "val_runtime": 0.2745,
    "val_samples_per_second": 142.061,
    "val_steps_per_second": 18.213,
    "val_subset_accuracy": 0.6666666666666666,
    "val_weighted_f1": 0.8435817805383022
  }
}