w2v-bert-test2-full / eval_reports /epoch_0001_step_00000500.json
Yehor's picture
Upload checkpoints epoch_0001_step_00000500
74ce6ae
Raw
History Blame Contribute Delete
6.48 kB
{
"epoch": 1,
"global_step": 500,
"model_source": "raw",
"metrics": {
"loss": 31.33398697379228,
"main_ctc_loss": 31.33398697379228,
"aed_loss": 0.0,
"liberta_distill_loss": 0.0,
"audio_teacher_loss": 0.0,
"cer": 1.784352944345671,
"wer": 2.8232325448720763,
"avg_blank_probability": 0.0013035426319346172,
"argmax_blank_fraction": 0.0,
"avg_top_nonblank_probability": 0.032854381083561035,
"avg_output_frames": 129.72159800249688,
"avg_target_tokens": 24.885455680399502,
"target_tokens_per_frame": 0.1918374123013849,
"impossible_sample_fraction": 0.0,
"tight_sample_fraction": 0.0,
"samples_short": 1183.0,
"wer_short": 3.456073509636934,
"cer_short": 2.4984844212603976,
"samples_medium": 2021.0,
"wer_medium": 2.6691405184174624,
"cer_medium": 1.6156715175330514,
"samples_long": 0.0,
"decoded_empty_fraction": 0.0,
"decoded_avg_char_length": 98.55680399500625,
"decoded_avg_word_length": 20.166978776529337,
"speaker_count": 0.0,
"speaker_macro_wer": 0.0,
"speaker_id_available": 0.0,
"missing_speaker_id_samples": 3204.0
},
"hardest_examples": [
{
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/2139.wav",
"speaker_id": "",
"reference": "А три чверті ніколи Україною й не були.",
"hypothesis": "– ісгу іс ічаξ і двачас іс іс ігу іча і"
},
{
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/3232.wav",
"speaker_id": "",
"reference": "На редактора це вам буде дорого коштувати, коли я буду у вас редактором.",
"hypothesis": "– і тесгу ісгучатрача іс і о іс і перетра іс іча іча іча іс іча те іча і"
},
{
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/865.wav",
"speaker_id": "",
"reference": "І погнав у сутінках до далекого гаю, куди зникле римські легіони, переслідуючи русів.",
"hypothesis": "– ісговорчастраці: і щобс ісівξ о іча ічаці іча іча ісча іча іс іча іча іс іс іс іс і"
},
{
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/2921.wav",
"speaker_id": "",
"reference": "Тому я підтримую тих колег, які кажуть Нам треба змінити виборчу систему.",
"hypothesis": "– і всіча ісοча те ітрас оο ітрас іξчам ісча іча іча о іс іча іс іча іс і"
},
{
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/576.wav",
"speaker_id": "",
"reference": "Рішення комісії оформлюється протоколом, який підписується головуючим на засіданні комісії.",
"hypothesis": "– іс іοčгус іс іξчам людей іξс простос іс ісча іча іча іс іс іс іча іс перем іс іс ічаξча і"
}
],
"random_examples": [
{
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/375.wav",
"speaker_id": "",
"reference": "Читачі, гадаю, не забули про Сарайську єпархію, підлеглу митрополитові.",
"hypothesis": "іξтрасξч іξк іс Україним людейці і щобсгу і щобсмча ітра іс і щобс Українис просто України пере іс і дваξ– іс Українис іці ісοча іξгуча і– істра будесчаξс ітра і– іс і"
},
{
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/1367.wav",
"speaker_id": "",
"reference": "Стьогнув ще турна через лоб.",
"hypothesis": "сти іс ісається іча іс– ісгу іча–с ісχ ісгусгус іξ іча– і"
},
{
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/849.wav",
"speaker_id": "",
"reference": "Князь у всьому був залежний від хана.",
"hypothesis": "і течаівсча- і! і безс іаєтьсяАча і двам іс Україниξгуξо своїтра і безοча іс Доссь і"
},
{
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/1003.wav",
"speaker_id": "",
"reference": "Дивуватися не варто бували вигадки і гидотніші, і брехливіші.",
"hypothesis": "ічатра іча і два безгу ітрас ісгу і два пере вели і те іча і пере іс іс і теча іс ічаξ і тес іча свої ігу іча і"
},
{
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/3232.wav",
"speaker_id": "",
"reference": "На редактора це вам буде дорого коштувати, коли я буду у вас редактором.",
"hypothesis": "– і тесгу ісгучатрача іс і о іс і перетра іс іча іча іча іс іча те іча і"
}
],
"speaker_metrics": {
"speaker_count": 0,
"speaker_macro_wer": 0.0,
"speaker_id_available": false,
"missing_speaker_id_samples": 3204,
"per_speaker": {}
},
"split_audit": {
"counts": {
"train": {
"samples": 648240,
"speakers": 0,
"records_with_speaker_id": 0,
"hours": 1264.353836267957
},
"validation": {
"samples": 3204,
"speakers": 0,
"records_with_speaker_id": 0,
"hours": 4.629311440972232
}
},
"hours": {
"train": 1264.353836267957,
"validation": 4.629311440972232
},
"total_hours": 1268.9831477089292,
"speaker_overlaps": {
"train_vs_validation": 0
},
"speaker_balance_ratio": 1.0,
"speaker_id_available": false
}
}