eval_reports/epoch_0002_step_00013500.json

{
  "epoch": 2,
  "global_step": 13500,
  "model_source": "raw",
  "metrics": {
    "loss": 0.500176721297265,
    "main_ctc_loss": 0.500176721297265,
    "aed_loss": 0.0,
    "liberta_distill_loss": 0.0,
    "audio_teacher_loss": 0.0,
    "cer": 0.06265826194709337,
    "wer": 0.2956510290955369,
    "avg_blank_probability": 0.7699706852679861,
    "argmax_blank_fraction": 0.7785664103477148,
    "avg_top_nonblank_probability": 0.21292015788222599,
    "avg_output_frames": 129.72159800249688,
    "avg_target_tokens": 24.885455680399502,
    "target_tokens_per_frame": 0.1918374123013849,
    "impossible_sample_fraction": 0.0,
    "tight_sample_fraction": 0.0,
    "samples_short": 1183.0,
    "wer_short": 0.3579112505602869,
    "cer_short": 0.07711828563372339,
    "samples_medium": 2021.0,
    "wer_medium": 0.2804911323328786,
    "cer_medium": 0.05924273202570848,
    "samples_long": 0.0,
    "decoded_empty_fraction": 0.0006242197253433209,
    "decoded_avg_char_length": 45.87578027465668,
    "decoded_avg_word_length": 7.009051186017478,
    "speaker_count": 0.0,
    "speaker_macro_wer": 0.0,
    "speaker_id_available": 0.0,
    "missing_speaker_id_samples": 3204.0
  },
  "hardest_examples": [
    {
      "utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/1668.wav",
      "speaker_id": "",
      "reference": "Її?",
      "hypothesis": "їїї"
    },
    {
      "utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/1317.wav",
      "speaker_id": "",
      "reference": "Чому я так кажу?",
      "hypothesis": "Чому я так кажу."
    },
    {
      "utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/3763.wav",
      "speaker_id": "",
      "reference": "Грек?",
      "hypothesis": "Грек."
    },
    {
      "utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/1358.wav",
      "speaker_id": "",
      "reference": "Поставила тарілку з хлібом.",
      "hypothesis": "Поставила довілку з хлібом."
    },
    {
      "utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/3273.wav",
      "speaker_id": "",
      "reference": "І за мене часто б'ються.",
      "hypothesis": "І за мене часто бдються."
    }
  ],
  "random_examples": [
    {
      "utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/473.wav",
      "speaker_id": "",
      "reference": "Ганді завжди розділяв людину і функції, які вона виконує.",
      "hypothesis": "Ганді завжди розділяв людину і функції, які вона виконує."
    },
    {
      "utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/2167.wav",
      "speaker_id": "",
      "reference": "Зло нічого не дає, крім зла.",
      "hypothesis": "Зло нічого не дає, крім зла."
    },
    {
      "utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/741.wav",
      "speaker_id": "",
      "reference": "Це рішення було повністю виконано.",
      "hypothesis": "Цее рішення було повністю виконано."
    },
    {
      "utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/1399.wav",
      "speaker_id": "",
      "reference": "Говорили старшини у таборі, що весною повстанці большевиків розіб'ють.",
      "hypothesis": "Гоговоррили старшини у таборі, що весною повстанці большевиків розіб'ють."
    },
    {
      "utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/2152.wav",
      "speaker_id": "",
      "reference": "Нещодавно вибух міномета під Рівним забрав життя трьох бійців.",
      "hypothesis": "Нещдавно вибух міномета під рівним забрав життя трьох бійців."
    }
  ],
  "speaker_metrics": {
    "speaker_count": 0,
    "speaker_macro_wer": 0.0,
    "speaker_id_available": false,
    "missing_speaker_id_samples": 3204,
    "per_speaker": {}
  },
  "split_audit": {
    "counts": {
      "train": {
        "samples": 648240,
        "speakers": 0,
        "records_with_speaker_id": 0,
        "hours": 1264.353836267957
      },
      "validation": {
        "samples": 3204,
        "speakers": 0,
        "records_with_speaker_id": 0,
        "hours": 4.629311440972232
      }
    },
    "hours": {
      "train": 1264.353836267957,
      "validation": 4.629311440972232
    },
    "total_hours": 1268.9831477089292,
    "speaker_overlaps": {
      "train_vs_validation": 0
    },
    "speaker_balance_ratio": 1.0,
    "speaker_id_available": false
  }
}