Upload checkpoints epoch_0002_step_00016000
Browse filesAutomatic checkpoint upload from train.py.
Report stem: epoch_0002_step_00016000
Epoch: 2
Global step: 16000
- .hf_upload_sync/validation_epoch_0002_step_00015500.done +1 -0
- .hf_upload_sync/validation_epoch_0002_step_00016000.started +1 -0
- checkpoint_step_last.json +64 -64
- checkpoint_topk_avg.json +6 -6
- checkpoint_topk_avg.safetensors +3 -0
- checkpoints_topk/metadata.json +6 -6
- eval_reports/epoch_0002_step_00016000.json +133 -0
- training_20260415_004452.log +106 -0
.hf_upload_sync/validation_epoch_0002_step_00015500.done
ADDED
|
@@ -0,0 +1 @@
|
|
|
|
|
|
|
| 1 |
+
1776235349.5229483
|
.hf_upload_sync/validation_epoch_0002_step_00016000.started
ADDED
|
@@ -0,0 +1 @@
|
|
|
|
|
|
|
| 1 |
+
1776237064.6249974
|
checkpoint_step_last.json
CHANGED
|
@@ -117,46 +117,46 @@
|
|
| 117 |
"padding_value": 1.0
|
| 118 |
},
|
| 119 |
"epoch": 2,
|
| 120 |
-
"global_step":
|
| 121 |
"best_val_wer": 0.255847632421995,
|
| 122 |
"metrics": {
|
| 123 |
"epoch": 2,
|
| 124 |
-
"global_step":
|
| 125 |
-
"train_loss": 0.
|
| 126 |
-
"train_main_ctc_loss": 0.
|
| 127 |
"train_aed_loss": 0.0,
|
| 128 |
"train_liberta_distill_loss": 0.0,
|
| 129 |
"train_audio_teacher_loss": 0.0,
|
| 130 |
-
"val_loss": 0.
|
| 131 |
-
"val_cer": 0.
|
| 132 |
-
"val_wer": 0.
|
| 133 |
-
"val_forward_seconds": 296.
|
| 134 |
"val_teacher_seconds": 0.0,
|
| 135 |
-
"val_decode_seconds": 0.
|
| 136 |
-
"val_gather_seconds":
|
| 137 |
"val_model_source": "raw",
|
| 138 |
-
"val_main_ctc_loss": 0.
|
| 139 |
"val_aed_loss": 0.0,
|
| 140 |
"val_liberta_distill_loss": 0.0,
|
| 141 |
"val_audio_teacher_loss": 0.0,
|
| 142 |
-
"val_avg_blank_probability": 0.
|
| 143 |
-
"val_argmax_blank_fraction": 0.
|
| 144 |
-
"val_avg_top_nonblank_probability": 0.
|
| 145 |
"val_avg_output_frames": 129.72159800249688,
|
| 146 |
"val_avg_target_tokens": 24.885455680399502,
|
| 147 |
"val_target_tokens_per_frame": 0.1918374123013849,
|
| 148 |
"val_impossible_sample_fraction": 0.0,
|
| 149 |
"val_tight_sample_fraction": 0.0,
|
| 150 |
"val_samples_short": 1183.0,
|
| 151 |
-
"val_wer_short": 0.
|
| 152 |
-
"val_cer_short": 0.
|
| 153 |
"val_samples_medium": 2021.0,
|
| 154 |
-
"val_wer_medium": 0.
|
| 155 |
-
"val_cer_medium": 0.
|
| 156 |
"val_samples_long": 0.0,
|
| 157 |
"val_decoded_empty_fraction": 0.00031210986267166043,
|
| 158 |
-
"val_decoded_avg_char_length":
|
| 159 |
-
"val_decoded_avg_word_length":
|
| 160 |
"val_speaker_count": 0.0,
|
| 161 |
"val_speaker_macro_wer": 0.0,
|
| 162 |
"val_speaker_id_available": 0.0,
|
|
@@ -164,78 +164,78 @@
|
|
| 164 |
"val_hardest_example_0_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/1668.wav",
|
| 165 |
"val_hardest_example_0_speaker": "",
|
| 166 |
"val_hardest_example_0_ref": "Її?",
|
| 167 |
-
"val_hardest_example_0_hyp": "
|
| 168 |
"val_hardest_example_1_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/1600.wav",
|
| 169 |
"val_hardest_example_1_speaker": "",
|
| 170 |
"val_hardest_example_1_ref": "Пали?",
|
| 171 |
-
"val_hardest_example_1_hyp": "Пали
|
| 172 |
-
"val_hardest_example_2_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/
|
| 173 |
"val_hardest_example_2_speaker": "",
|
| 174 |
-
"val_hardest_example_2_ref": "
|
| 175 |
-
"val_hardest_example_2_hyp": "
|
| 176 |
-
"val_hardest_example_3_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/
|
| 177 |
"val_hardest_example_3_speaker": "",
|
| 178 |
-
"val_hardest_example_3_ref": "
|
| 179 |
-
"val_hardest_example_3_hyp": "
|
| 180 |
-
"val_hardest_example_4_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/
|
| 181 |
"val_hardest_example_4_speaker": "",
|
| 182 |
-
"val_hardest_example_4_ref": "
|
| 183 |
-
"val_hardest_example_4_hyp": "
|
| 184 |
-
"val_random_example_0_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/
|
| 185 |
"val_random_example_0_speaker": "",
|
| 186 |
-
"val_random_example_0_ref": "
|
| 187 |
-
"val_random_example_0_hyp": "
|
| 188 |
-
"val_random_example_1_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/
|
| 189 |
"val_random_example_1_speaker": "",
|
| 190 |
-
"val_random_example_1_ref": "
|
| 191 |
-
"val_random_example_1_hyp": "
|
| 192 |
-
"val_random_example_2_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/
|
| 193 |
"val_random_example_2_speaker": "",
|
| 194 |
-
"val_random_example_2_ref": "
|
| 195 |
-
"val_random_example_2_hyp": "
|
| 196 |
-
"val_random_example_3_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/
|
| 197 |
"val_random_example_3_speaker": "",
|
| 198 |
-
"val_random_example_3_ref": "
|
| 199 |
-
"val_random_example_3_hyp": "
|
| 200 |
-
"val_random_example_4_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/
|
| 201 |
"val_random_example_4_speaker": "",
|
| 202 |
-
"val_random_example_4_ref": "
|
| 203 |
-
"val_random_example_4_hyp": "
|
| 204 |
-
"val/loss": 0.
|
| 205 |
-
"val/cer": 0.
|
| 206 |
-
"val/wer": 0.
|
| 207 |
-
"val/main_ctc_loss": 0.
|
| 208 |
"val/aed_loss": 0.0,
|
| 209 |
"val/liberta_distill_loss": 0.0,
|
| 210 |
"val/audio_teacher_loss": 0.0,
|
| 211 |
-
"val/avg_blank_probability": 0.
|
| 212 |
-
"val/argmax_blank_fraction": 0.
|
| 213 |
-
"val/avg_top_nonblank_probability": 0.
|
| 214 |
"val/avg_output_frames": 129.72159800249688,
|
| 215 |
"val/avg_target_tokens": 24.885455680399502,
|
| 216 |
"val/target_tokens_per_frame": 0.1918374123013849,
|
| 217 |
"val/impossible_sample_fraction": 0.0,
|
| 218 |
"val/tight_sample_fraction": 0.0,
|
| 219 |
"val/samples_short": 1183.0,
|
| 220 |
-
"val/wer_short": 0.
|
| 221 |
-
"val/cer_short": 0.
|
| 222 |
"val/samples_medium": 2021.0,
|
| 223 |
-
"val/wer_medium": 0.
|
| 224 |
-
"val/cer_medium": 0.
|
| 225 |
"val/samples_long": 0.0,
|
| 226 |
"val/decoded_empty_fraction": 0.00031210986267166043,
|
| 227 |
-
"val/decoded_avg_char_length":
|
| 228 |
-
"val/decoded_avg_word_length":
|
| 229 |
"val/speaker_count": 0.0,
|
| 230 |
"val/speaker_macro_wer": 0.0,
|
| 231 |
"val/speaker_id_available": 0.0,
|
| 232 |
"val/missing_speaker_id_samples": 3204.0,
|
| 233 |
-
"val/forward_seconds": 296.
|
| 234 |
"val/teacher_seconds": 0.0,
|
| 235 |
-
"val/decode_seconds": 0.
|
| 236 |
-
"val/gather_seconds":
|
| 237 |
-
"train/loss": 0.
|
| 238 |
-
"train/main_ctc_loss": 0.
|
| 239 |
"train/aed_loss": 0.0,
|
| 240 |
"train/liberta_distill_loss": 0.0,
|
| 241 |
"train/audio_teacher_loss": 0.0
|
|
|
|
| 117 |
"padding_value": 1.0
|
| 118 |
},
|
| 119 |
"epoch": 2,
|
| 120 |
+
"global_step": 16000,
|
| 121 |
"best_val_wer": 0.255847632421995,
|
| 122 |
"metrics": {
|
| 123 |
"epoch": 2,
|
| 124 |
+
"global_step": 16000,
|
| 125 |
+
"train_loss": 0.7841304609707284,
|
| 126 |
+
"train_main_ctc_loss": 0.7841304609707284,
|
| 127 |
"train_aed_loss": 0.0,
|
| 128 |
"train_liberta_distill_loss": 0.0,
|
| 129 |
"train_audio_teacher_loss": 0.0,
|
| 130 |
+
"val_loss": 0.4318154684149343,
|
| 131 |
+
"val_cer": 0.05443537524917839,
|
| 132 |
+
"val_wer": 0.271031728617194,
|
| 133 |
+
"val_forward_seconds": 296.5700858703349,
|
| 134 |
"val_teacher_seconds": 0.0,
|
| 135 |
+
"val_decode_seconds": 0.9709366122842766,
|
| 136 |
+
"val_gather_seconds": 1.7917029620148242,
|
| 137 |
"val_model_source": "raw",
|
| 138 |
+
"val_main_ctc_loss": 0.4318154684149343,
|
| 139 |
"val_aed_loss": 0.0,
|
| 140 |
"val_liberta_distill_loss": 0.0,
|
| 141 |
"val_audio_teacher_loss": 0.0,
|
| 142 |
+
"val_avg_blank_probability": 0.7810262759187744,
|
| 143 |
+
"val_argmax_blank_fraction": 0.7882794229455186,
|
| 144 |
+
"val_avg_top_nonblank_probability": 0.20623716320922633,
|
| 145 |
"val_avg_output_frames": 129.72159800249688,
|
| 146 |
"val_avg_target_tokens": 24.885455680399502,
|
| 147 |
"val_target_tokens_per_frame": 0.1918374123013849,
|
| 148 |
"val_impossible_sample_fraction": 0.0,
|
| 149 |
"val_tight_sample_fraction": 0.0,
|
| 150 |
"val_samples_short": 1183.0,
|
| 151 |
+
"val_wer_short": 0.3346033168982519,
|
| 152 |
+
"val_cer_short": 0.06770759904130834,
|
| 153 |
"val_samples_medium": 2021.0,
|
| 154 |
+
"val_wer_medium": 0.2555525238744884,
|
| 155 |
+
"val_cer_medium": 0.05130040960404942,
|
| 156 |
"val_samples_long": 0.0,
|
| 157 |
"val_decoded_empty_fraction": 0.00031210986267166043,
|
| 158 |
+
"val_decoded_avg_char_length": 45.9812734082397,
|
| 159 |
+
"val_decoded_avg_word_length": 6.99812734082397,
|
| 160 |
"val_speaker_count": 0.0,
|
| 161 |
"val_speaker_macro_wer": 0.0,
|
| 162 |
"val_speaker_id_available": 0.0,
|
|
|
|
| 164 |
"val_hardest_example_0_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/1668.wav",
|
| 165 |
"val_hardest_example_0_speaker": "",
|
| 166 |
"val_hardest_example_0_ref": "Її?",
|
| 167 |
+
"val_hardest_example_0_hyp": "їхї",
|
| 168 |
"val_hardest_example_1_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/1600.wav",
|
| 169 |
"val_hardest_example_1_speaker": "",
|
| 170 |
"val_hardest_example_1_ref": "Пали?",
|
| 171 |
+
"val_hardest_example_1_hyp": "Ппали",
|
| 172 |
+
"val_hardest_example_2_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/1358.wav",
|
| 173 |
"val_hardest_example_2_speaker": "",
|
| 174 |
+
"val_hardest_example_2_ref": "Поставила тарілку з хлібом.",
|
| 175 |
+
"val_hardest_example_2_hyp": "Поставила навілку з хлібом.",
|
| 176 |
+
"val_hardest_example_3_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/2993.wav",
|
| 177 |
"val_hardest_example_3_speaker": "",
|
| 178 |
+
"val_hardest_example_3_ref": "Який є сенс поспішати?",
|
| 179 |
+
"val_hardest_example_3_hyp": "Який є сенс поспішати.",
|
| 180 |
+
"val_hardest_example_4_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/3763.wav",
|
| 181 |
"val_hardest_example_4_speaker": "",
|
| 182 |
+
"val_hardest_example_4_ref": "Грек?",
|
| 183 |
+
"val_hardest_example_4_hyp": "Грек.",
|
| 184 |
+
"val_random_example_0_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/833.wav",
|
| 185 |
"val_random_example_0_speaker": "",
|
| 186 |
+
"val_random_example_0_ref": "Напад має відбутись сьогодні після заходу місяця.",
|
| 187 |
+
"val_random_example_0_hyp": "Напад має відбутись сьогодні після заходиу місяця.",
|
| 188 |
+
"val_random_example_1_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/2950.wav",
|
| 189 |
"val_random_example_1_speaker": "",
|
| 190 |
+
"val_random_example_1_ref": "Що видиш там, отрочице?",
|
| 191 |
+
"val_random_example_1_hyp": "Що видеш там отрочи це",
|
| 192 |
+
"val_random_example_2_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/849.wav",
|
| 193 |
"val_random_example_2_speaker": "",
|
| 194 |
+
"val_random_example_2_ref": "Князь у всьому був залежний від хана.",
|
| 195 |
+
"val_random_example_2_hyp": "Князь усьому був залежний від хана.",
|
| 196 |
+
"val_random_example_3_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/981.wav",
|
| 197 |
"val_random_example_3_speaker": "",
|
| 198 |
+
"val_random_example_3_ref": "Вони не знали, що підставляють ті крила під рушниці та кулемети нашої піхоти.",
|
| 199 |
+
"val_random_example_3_hyp": "Вони не знали, що підставляють ті крила під рушниці та кулемети нашої піхоти.",
|
| 200 |
+
"val_random_example_4_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/3590.wav",
|
| 201 |
"val_random_example_4_speaker": "",
|
| 202 |
+
"val_random_example_4_ref": "Кажуть, що трейдери вивозять великі гроші, не вкладаючи їх в економіку.",
|
| 203 |
+
"val_random_example_4_hyp": "Кажуть, що трейдери вивозять великі гроші, не вкладаючи їх в економіку.",
|
| 204 |
+
"val/loss": 0.4318154684149343,
|
| 205 |
+
"val/cer": 0.05443537524917839,
|
| 206 |
+
"val/wer": 0.271031728617194,
|
| 207 |
+
"val/main_ctc_loss": 0.4318154684149343,
|
| 208 |
"val/aed_loss": 0.0,
|
| 209 |
"val/liberta_distill_loss": 0.0,
|
| 210 |
"val/audio_teacher_loss": 0.0,
|
| 211 |
+
"val/avg_blank_probability": 0.7810262759187744,
|
| 212 |
+
"val/argmax_blank_fraction": 0.7882794229455186,
|
| 213 |
+
"val/avg_top_nonblank_probability": 0.20623716320922633,
|
| 214 |
"val/avg_output_frames": 129.72159800249688,
|
| 215 |
"val/avg_target_tokens": 24.885455680399502,
|
| 216 |
"val/target_tokens_per_frame": 0.1918374123013849,
|
| 217 |
"val/impossible_sample_fraction": 0.0,
|
| 218 |
"val/tight_sample_fraction": 0.0,
|
| 219 |
"val/samples_short": 1183.0,
|
| 220 |
+
"val/wer_short": 0.3346033168982519,
|
| 221 |
+
"val/cer_short": 0.06770759904130834,
|
| 222 |
"val/samples_medium": 2021.0,
|
| 223 |
+
"val/wer_medium": 0.2555525238744884,
|
| 224 |
+
"val/cer_medium": 0.05130040960404942,
|
| 225 |
"val/samples_long": 0.0,
|
| 226 |
"val/decoded_empty_fraction": 0.00031210986267166043,
|
| 227 |
+
"val/decoded_avg_char_length": 45.9812734082397,
|
| 228 |
+
"val/decoded_avg_word_length": 6.99812734082397,
|
| 229 |
"val/speaker_count": 0.0,
|
| 230 |
"val/speaker_macro_wer": 0.0,
|
| 231 |
"val/speaker_id_available": 0.0,
|
| 232 |
"val/missing_speaker_id_samples": 3204.0,
|
| 233 |
+
"val/forward_seconds": 296.5700858703349,
|
| 234 |
"val/teacher_seconds": 0.0,
|
| 235 |
+
"val/decode_seconds": 0.9709366122842766,
|
| 236 |
+
"val/gather_seconds": 1.7917029620148242,
|
| 237 |
+
"train/loss": 0.7841304609707284,
|
| 238 |
+
"train/main_ctc_loss": 0.7841304609707284,
|
| 239 |
"train/aed_loss": 0.0,
|
| 240 |
"train/liberta_distill_loss": 0.0,
|
| 241 |
"train/audio_teacher_loss": 0.0
|
checkpoint_topk_avg.json
CHANGED
|
@@ -426,6 +426,12 @@
|
|
| 426 |
"val_wer": 0.255847632421995,
|
| 427 |
"path": "checkpoint_epoch=0002_step=00015500_valwer=0.255848.pt"
|
| 428 |
},
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 429 |
{
|
| 430 |
"epoch": 2,
|
| 431 |
"global_step": 14500,
|
|
@@ -443,12 +449,6 @@
|
|
| 443 |
"global_step": 14000,
|
| 444 |
"val_wer": 0.28555755474612715,
|
| 445 |
"path": "checkpoint_epoch=0002_step=00014000_valwer=0.285558.pt"
|
| 446 |
-
},
|
| 447 |
-
{
|
| 448 |
-
"epoch": 2,
|
| 449 |
-
"global_step": 13500,
|
| 450 |
-
"val_wer": 0.2956510290955369,
|
| 451 |
-
"path": "checkpoint_epoch=0002_step=00013500_valwer=0.295651.pt"
|
| 452 |
}
|
| 453 |
]
|
| 454 |
}
|
|
|
|
| 426 |
"val_wer": 0.255847632421995,
|
| 427 |
"path": "checkpoint_epoch=0002_step=00015500_valwer=0.255848.pt"
|
| 428 |
},
|
| 429 |
+
{
|
| 430 |
+
"epoch": 2,
|
| 431 |
+
"global_step": 16000,
|
| 432 |
+
"val_wer": 0.271031728617194,
|
| 433 |
+
"path": "checkpoint_epoch=0002_step=00016000_valwer=0.271032.pt"
|
| 434 |
+
},
|
| 435 |
{
|
| 436 |
"epoch": 2,
|
| 437 |
"global_step": 14500,
|
|
|
|
| 449 |
"global_step": 14000,
|
| 450 |
"val_wer": 0.28555755474612715,
|
| 451 |
"path": "checkpoint_epoch=0002_step=00014000_valwer=0.285558.pt"
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 452 |
}
|
| 453 |
]
|
| 454 |
}
|
checkpoint_topk_avg.safetensors
ADDED
|
@@ -0,0 +1,3 @@
|
|
|
|
|
|
|
|
|
|
|
|
|
| 1 |
+
version https://git-lfs.github.com/spec/v1
|
| 2 |
+
oid sha256:3672e91f53d1bdaed4f297dee1efc83bafd5ae0a9c3f6d7897623cb8d90b1b04
|
| 3 |
+
size 2424913224
|
checkpoints_topk/metadata.json
CHANGED
|
@@ -7,6 +7,12 @@
|
|
| 7 |
"val_wer": 0.255847632421995,
|
| 8 |
"path": "checkpoint_epoch=0002_step=00015500_valwer=0.255848.pt"
|
| 9 |
},
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 10 |
{
|
| 11 |
"epoch": 2,
|
| 12 |
"global_step": 14500,
|
|
@@ -24,12 +30,6 @@
|
|
| 24 |
"global_step": 14000,
|
| 25 |
"val_wer": 0.28555755474612715,
|
| 26 |
"path": "checkpoint_epoch=0002_step=00014000_valwer=0.285558.pt"
|
| 27 |
-
},
|
| 28 |
-
{
|
| 29 |
-
"epoch": 2,
|
| 30 |
-
"global_step": 13500,
|
| 31 |
-
"val_wer": 0.2956510290955369,
|
| 32 |
-
"path": "checkpoint_epoch=0002_step=00013500_valwer=0.295651.pt"
|
| 33 |
}
|
| 34 |
]
|
| 35 |
}
|
|
|
|
| 7 |
"val_wer": 0.255847632421995,
|
| 8 |
"path": "checkpoint_epoch=0002_step=00015500_valwer=0.255848.pt"
|
| 9 |
},
|
| 10 |
+
{
|
| 11 |
+
"epoch": 2,
|
| 12 |
+
"global_step": 16000,
|
| 13 |
+
"val_wer": 0.271031728617194,
|
| 14 |
+
"path": "checkpoint_epoch=0002_step=00016000_valwer=0.271032.pt"
|
| 15 |
+
},
|
| 16 |
{
|
| 17 |
"epoch": 2,
|
| 18 |
"global_step": 14500,
|
|
|
|
| 30 |
"global_step": 14000,
|
| 31 |
"val_wer": 0.28555755474612715,
|
| 32 |
"path": "checkpoint_epoch=0002_step=00014000_valwer=0.285558.pt"
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 33 |
}
|
| 34 |
]
|
| 35 |
}
|
eval_reports/epoch_0002_step_00016000.json
ADDED
|
@@ -0,0 +1,133 @@
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 1 |
+
{
|
| 2 |
+
"epoch": 2,
|
| 3 |
+
"global_step": 16000,
|
| 4 |
+
"model_source": "raw",
|
| 5 |
+
"metrics": {
|
| 6 |
+
"loss": 0.4318154684149343,
|
| 7 |
+
"main_ctc_loss": 0.4318154684149343,
|
| 8 |
+
"aed_loss": 0.0,
|
| 9 |
+
"liberta_distill_loss": 0.0,
|
| 10 |
+
"audio_teacher_loss": 0.0,
|
| 11 |
+
"cer": 0.05443537524917839,
|
| 12 |
+
"wer": 0.271031728617194,
|
| 13 |
+
"avg_blank_probability": 0.7810262759187744,
|
| 14 |
+
"argmax_blank_fraction": 0.7882794229455186,
|
| 15 |
+
"avg_top_nonblank_probability": 0.20623716320922633,
|
| 16 |
+
"avg_output_frames": 129.72159800249688,
|
| 17 |
+
"avg_target_tokens": 24.885455680399502,
|
| 18 |
+
"target_tokens_per_frame": 0.1918374123013849,
|
| 19 |
+
"impossible_sample_fraction": 0.0,
|
| 20 |
+
"tight_sample_fraction": 0.0,
|
| 21 |
+
"samples_short": 1183.0,
|
| 22 |
+
"wer_short": 0.3346033168982519,
|
| 23 |
+
"cer_short": 0.06770759904130834,
|
| 24 |
+
"samples_medium": 2021.0,
|
| 25 |
+
"wer_medium": 0.2555525238744884,
|
| 26 |
+
"cer_medium": 0.05130040960404942,
|
| 27 |
+
"samples_long": 0.0,
|
| 28 |
+
"decoded_empty_fraction": 0.00031210986267166043,
|
| 29 |
+
"decoded_avg_char_length": 45.9812734082397,
|
| 30 |
+
"decoded_avg_word_length": 6.99812734082397,
|
| 31 |
+
"speaker_count": 0.0,
|
| 32 |
+
"speaker_macro_wer": 0.0,
|
| 33 |
+
"speaker_id_available": 0.0,
|
| 34 |
+
"missing_speaker_id_samples": 3204.0
|
| 35 |
+
},
|
| 36 |
+
"hardest_examples": [
|
| 37 |
+
{
|
| 38 |
+
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/1668.wav",
|
| 39 |
+
"speaker_id": "",
|
| 40 |
+
"reference": "Її?",
|
| 41 |
+
"hypothesis": "їхї"
|
| 42 |
+
},
|
| 43 |
+
{
|
| 44 |
+
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/1600.wav",
|
| 45 |
+
"speaker_id": "",
|
| 46 |
+
"reference": "Пали?",
|
| 47 |
+
"hypothesis": "Ппали"
|
| 48 |
+
},
|
| 49 |
+
{
|
| 50 |
+
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/1358.wav",
|
| 51 |
+
"speaker_id": "",
|
| 52 |
+
"reference": "Поставила тарілку з хлібом.",
|
| 53 |
+
"hypothesis": "Поставила навілку з хлібом."
|
| 54 |
+
},
|
| 55 |
+
{
|
| 56 |
+
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/2993.wav",
|
| 57 |
+
"speaker_id": "",
|
| 58 |
+
"reference": "Який є сенс поспішати?",
|
| 59 |
+
"hypothesis": "Який є сенс поспішати."
|
| 60 |
+
},
|
| 61 |
+
{
|
| 62 |
+
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/3763.wav",
|
| 63 |
+
"speaker_id": "",
|
| 64 |
+
"reference": "Грек?",
|
| 65 |
+
"hypothesis": "Грек."
|
| 66 |
+
}
|
| 67 |
+
],
|
| 68 |
+
"random_examples": [
|
| 69 |
+
{
|
| 70 |
+
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/833.wav",
|
| 71 |
+
"speaker_id": "",
|
| 72 |
+
"reference": "Напад має відбутись сьогодні після заходу місяця.",
|
| 73 |
+
"hypothesis": "Напад має відбутись сьогодні після заходиу місяця."
|
| 74 |
+
},
|
| 75 |
+
{
|
| 76 |
+
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/2950.wav",
|
| 77 |
+
"speaker_id": "",
|
| 78 |
+
"reference": "Що видиш там, отрочице?",
|
| 79 |
+
"hypothesis": "Що видеш там отрочи це"
|
| 80 |
+
},
|
| 81 |
+
{
|
| 82 |
+
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/849.wav",
|
| 83 |
+
"speaker_id": "",
|
| 84 |
+
"reference": "Князь у всьому був залежний від хана.",
|
| 85 |
+
"hypothesis": "Князь усьому був залежний від хана."
|
| 86 |
+
},
|
| 87 |
+
{
|
| 88 |
+
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/981.wav",
|
| 89 |
+
"speaker_id": "",
|
| 90 |
+
"reference": "Вони не знали, що підставляють ті крила під рушниці та кулемети нашої піхоти.",
|
| 91 |
+
"hypothesis": "Вони не знали, що підставляють ті крила під рушниці та кулемети нашої піхоти."
|
| 92 |
+
},
|
| 93 |
+
{
|
| 94 |
+
"utterance_id": "/home/yehor/squeezeformer/data/cv10-uk-testset-clean-punctuated/3590.wav",
|
| 95 |
+
"speaker_id": "",
|
| 96 |
+
"reference": "Кажуть, що трейдери вивозять великі гроші, не вкладаючи їх в економіку.",
|
| 97 |
+
"hypothesis": "Кажуть, що трейдери вивозять великі гроші, не вкладаючи їх в економіку."
|
| 98 |
+
}
|
| 99 |
+
],
|
| 100 |
+
"speaker_metrics": {
|
| 101 |
+
"speaker_count": 0,
|
| 102 |
+
"speaker_macro_wer": 0.0,
|
| 103 |
+
"speaker_id_available": false,
|
| 104 |
+
"missing_speaker_id_samples": 3204,
|
| 105 |
+
"per_speaker": {}
|
| 106 |
+
},
|
| 107 |
+
"split_audit": {
|
| 108 |
+
"counts": {
|
| 109 |
+
"train": {
|
| 110 |
+
"samples": 648240,
|
| 111 |
+
"speakers": 0,
|
| 112 |
+
"records_with_speaker_id": 0,
|
| 113 |
+
"hours": 1264.353836267957
|
| 114 |
+
},
|
| 115 |
+
"validation": {
|
| 116 |
+
"samples": 3204,
|
| 117 |
+
"speakers": 0,
|
| 118 |
+
"records_with_speaker_id": 0,
|
| 119 |
+
"hours": 4.629311440972232
|
| 120 |
+
}
|
| 121 |
+
},
|
| 122 |
+
"hours": {
|
| 123 |
+
"train": 1264.353836267957,
|
| 124 |
+
"validation": 4.629311440972232
|
| 125 |
+
},
|
| 126 |
+
"total_hours": 1268.9831477089292,
|
| 127 |
+
"speaker_overlaps": {
|
| 128 |
+
"train_vs_validation": 0
|
| 129 |
+
},
|
| 130 |
+
"speaker_balance_ratio": 1.0,
|
| 131 |
+
"speaker_id_available": false
|
| 132 |
+
}
|
| 133 |
+
}
|
training_20260415_004452.log
CHANGED
|
@@ -881,3 +881,109 @@
|
|
| 881 |
2026-04-15 09:20:35,533 | INFO | rank=0 | epoch_0002_step_00015500 timing detail report_write=0.00s checkpoint_build=0.01s latest_export=22.48s best_export=25.35s topk_update=71.47s topk_average=44.26s
|
| 882 |
2026-04-15 09:20:35,534 | INFO | rank=0 | exported inference artifacts latest_safe=artifacts/w2v-bert-test2-full/checkpoint_step_last.safetensors best_safe=artifacts/w2v-bert-test2-full/checkpoint_best.safetensors averaged_safe=artifacts/w2v-bert-test2-full/checkpoint_topk_avg.safetensors
|
| 883 |
2026-04-15 09:20:35,534 | INFO | rank=0 | validation preview hardest_ref='Її?' hardest_hyp='Ії.'
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 881 |
2026-04-15 09:20:35,533 | INFO | rank=0 | epoch_0002_step_00015500 timing detail report_write=0.00s checkpoint_build=0.01s latest_export=22.48s best_export=25.35s topk_update=71.47s topk_average=44.26s
|
| 882 |
2026-04-15 09:20:35,534 | INFO | rank=0 | exported inference artifacts latest_safe=artifacts/w2v-bert-test2-full/checkpoint_step_last.safetensors best_safe=artifacts/w2v-bert-test2-full/checkpoint_best.safetensors averaged_safe=artifacts/w2v-bert-test2-full/checkpoint_topk_avg.safetensors
|
| 883 |
2026-04-15 09:20:35,534 | INFO | rank=0 | validation preview hardest_ref='Її?' hardest_hyp='Ії.'
|
| 884 |
+
2026-04-15 09:42:29,522 | INFO | rank=0 | hugging face checkpoint upload complete repo_id=speech-uk/w2v-bert-test2-full repo_type=model path_in_repo=. checkpoint_format=safetensors commit=https://huggingface.co/speech-uk/w2v-bert-test2-full/commit/f4b87063be0c0a30cdd38cd08ce359463c06671b elapsed=21m 53.9s
|
| 885 |
+
2026-04-15 09:43:01,322 | INFO | rank=0 | epoch=2 step=14040/249868 global_step=15510 train_loss=0.2900 train_main_ctc_loss=0.2900 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.44 grad_norm=10.1209 max_feature_frames=374 train_avg_blank_prob=0.5539 train_argmax_blank_frac=0.5779 train_avg_top_nonblank_prob=0.4158 train_target_tokens_per_frame=0.4091 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=12.9351 train_avg_top_logit=14.8571 train_avg_top2_margin=4.4156 train_avg_blank_nonblank_margin=0.8961 train_avg_entropy=0.2890 train_blank_bias=0.0008 train_blank_weight_norm=0.5819 train_nonblank_weight_norm_mean=0.5914 train_blank_weight_grad_norm=1.4395 train_nonblank_weight_grad_norm_mean=0.0376 train_blank_bias_grad=0.0135 train_nonblank_bias_grad_mean=-0.0000 train_encoder_mean=-0.0556 train_encoder_std=3.1120 train_encoder_token_l2_norm=98.8734 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.2769e-06
|
| 886 |
+
2026-04-15 09:43:01,365 | INFO | rank=0 | train preview ref='Про це заявив французький президент Емануель Макрон у Києві.' hyp_greedy='Про це заявив францзькі президент емануель Макрон у Києві.' hyp_beam='Про це заявив францзькі президент емануель Макрон у Києві.' avg_output_frames=77.0 avg_target_tokens=31.5 top_tokens=<blank>:0.578, ні:0.032, е:0.026, н:0.019, ▁:0.013
|
| 887 |
+
2026-04-15 09:43:28,948 | INFO | rank=0 | epoch=2 step=14080/249868 global_step=15520 train_loss=0.4498 train_main_ctc_loss=0.4498 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.54 grad_norm=7.0609 max_feature_frames=385 train_avg_blank_prob=0.5391 train_argmax_blank_frac=0.5544 train_avg_top_nonblank_prob=0.4187 train_target_tokens_per_frame=0.4093 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=13.1813 train_avg_top_logit=15.3368 train_avg_top2_margin=4.5803 train_avg_blank_nonblank_margin=0.7565 train_avg_entropy=0.2992 train_blank_bias=0.0008 train_blank_weight_norm=0.5819 train_nonblank_weight_norm_mean=0.5914 train_blank_weight_grad_norm=2.3621 train_nonblank_weight_grad_norm_mean=0.0504 train_blank_bias_grad=-0.0492 train_nonblank_bias_grad_mean=0.0001 train_encoder_mean=-0.0719 train_encoder_std=3.2174 train_encoder_token_l2_norm=102.1295 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.28224e-06
|
| 888 |
+
2026-04-15 09:43:29,072 | INFO | rank=0 | train preview ref='Детальніше про розвиток подій навколо санкцій щодо північно-потоку, два поговоримо з моїм колегою Остапом Яришем. Він...' hyp_greedy='Детальніше про розвиток подій навколо санкціїй щодо північного потокува. Поговоримо з моїм колегоюстапом Яришеомві на...' hyp_beam='Детальніше про розвиток подій навколо санкції щодо північного потокува. Поговоримо з моїм колегоюстапом Яришеомвін на...' avg_output_frames=193.0 avg_target_tokens=79.0 top_tokens=<blank>:0.554, з:0.026, ше:0.016, я:0.016, м:0.016
|
| 889 |
+
2026-04-15 09:43:58,126 | INFO | rank=0 | epoch=2 step=14120/249868 global_step=15530 train_loss=0.3609 train_main_ctc_loss=0.3609 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.70 grad_norm=6.1158 max_feature_frames=205 train_avg_blank_prob=0.7658 train_argmax_blank_frac=0.7673 train_avg_top_nonblank_prob=0.2206 train_target_tokens_per_frame=0.1887 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.8931 train_avg_top_logit=16.0000 train_avg_top2_margin=6.1635 train_avg_blank_nonblank_margin=4.2767 train_avg_entropy=0.1525 train_blank_bias=0.0008 train_blank_weight_norm=0.5819 train_nonblank_weight_norm_mean=0.5915 train_blank_weight_grad_norm=1.4135 train_nonblank_weight_grad_norm_mean=0.0408 train_blank_bias_grad=0.0147 train_nonblank_bias_grad_mean=-0.0000 train_encoder_mean=-0.0804 train_encoder_std=3.0456 train_encoder_token_l2_norm=96.3038 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.28758e-06
|
| 890 |
+
2026-04-15 09:43:58,153 | INFO | rank=0 | train preview ref='Але в третьому етапі' hyp_greedy='Але в третьому етапі.' hyp_beam='Але в третьому етапі.' avg_output_frames=53.0 avg_target_tokens=10.0 top_tokens=<blank>:0.767, ▁:0.025, ри:0.013, ш:0.013, .:0.013
|
| 891 |
+
2026-04-15 09:44:26,407 | INFO | rank=0 | epoch=2 step=14160/249868 global_step=15540 train_loss=0.5056 train_main_ctc_loss=0.5056 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.74 grad_norm=5.9116 max_feature_frames=1366 train_avg_blank_prob=0.7252 train_argmax_blank_frac=0.7467 train_avg_top_nonblank_prob=0.2464 train_target_tokens_per_frame=0.2606 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=13.5871 train_avg_top_logit=14.6179 train_avg_top2_margin=5.3177 train_avg_blank_nonblank_margin=3.4436 train_avg_entropy=0.2665 train_blank_bias=0.0008 train_blank_weight_norm=0.5818 train_nonblank_weight_norm_mean=0.5915 train_blank_weight_grad_norm=2.9086 train_nonblank_weight_grad_norm_mean=0.0484 train_blank_bias_grad=-0.0498 train_nonblank_bias_grad_mean=0.0001 train_encoder_mean=-0.0756 train_encoder_std=2.7382 train_encoder_token_l2_norm=86.8851 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.29291e-06
|
| 892 |
+
2026-04-15 09:44:26,964 | INFO | rank=0 | train preview ref='Титул і тіпі і перший у цьому сезоні. За дві години після цього вони з Молчановим зіграли пару, також її виграли. Тоб...' hyp_greedy='Титулпі і перший в цьому сезоні. За дві години після цього вони з молчановиміграли пару.ож її виграли, тобто взагалі,...' hyp_beam='Титул пі і перший в цьому сезоні. За дві години після цього вони з молчановим зіграли пару. Також її виграли, тобто в...' avg_output_frames=683.0 avg_target_tokens=178.0 top_tokens=<blank>:0.747, ▁:0.015, і:0.012, ти:0.010, ,:0.010
|
| 893 |
+
2026-04-15 09:44:55,749 | INFO | rank=0 | epoch=2 step=14200/249868 global_step=15550 train_loss=0.7993 train_main_ctc_loss=0.7993 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.80 grad_norm=5.0699 max_feature_frames=222 train_avg_blank_prob=0.7848 train_argmax_blank_frac=0.7865 train_avg_top_nonblank_prob=0.1932 train_target_tokens_per_frame=0.1562 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.0833 train_avg_top_logit=14.9167 train_avg_top2_margin=5.9583 train_avg_blank_nonblank_margin=4.4167 train_avg_entropy=0.2005 train_blank_bias=0.0008 train_blank_weight_norm=0.5818 train_nonblank_weight_norm_mean=0.5915 train_blank_weight_grad_norm=2.8459 train_nonblank_weight_grad_norm_mean=0.0358 train_blank_bias_grad=-0.0550 train_nonblank_bias_grad_mean=0.0001 train_encoder_mean=-0.0803 train_encoder_std=2.7778 train_encoder_token_l2_norm=87.9635 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.29825e-06
|
| 894 |
+
2026-04-15 09:44:55,782 | INFO | rank=0 | train preview ref='Планую розпочати.' hyp_greedy='Планую розпочати.' hyp_beam='Планую розпочати.' avg_output_frames=64.0 avg_target_tokens=10.0 top_tokens=<blank>:0.786, ні:0.021, ю:0.016, н:0.016, .:0.016
|
| 895 |
+
2026-04-15 09:45:22,594 | INFO | rank=0 | epoch=2 step=14240/249868 global_step=15560 train_loss=0.5496 train_main_ctc_loss=0.5496 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.53 grad_norm=9.1569 max_feature_frames=746 train_avg_blank_prob=0.6065 train_argmax_blank_frac=0.6118 train_avg_top_nonblank_prob=0.3721 train_target_tokens_per_frame=0.3755 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=13.9747 train_avg_top_logit=16.1350 train_avg_top2_margin=5.2996 train_avg_blank_nonblank_margin=1.3924 train_avg_entropy=0.1994 train_blank_bias=0.0008 train_blank_weight_norm=0.5818 train_nonblank_weight_norm_mean=0.5915 train_blank_weight_grad_norm=1.9515 train_nonblank_weight_grad_norm_mean=0.0446 train_blank_bias_grad=0.0322 train_nonblank_bias_grad_mean=-0.0001 train_encoder_mean=-0.0564 train_encoder_std=3.2770 train_encoder_token_l2_norm=104.0058 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.30358e-06
|
| 896 |
+
2026-04-15 09:45:22,756 | INFO | rank=0 | train preview ref='Підприємець, а тепер і волонтер Артур Скріс Ліпс, одним з перших у Латвії, поїхав на польсько-український кордон заби...' hyp_greedy='Підприємець, а тепер і волонтер Артур С Кріс ліпс одним і з перших у Латві поїхав на польську український кордон заби...' hyp_beam='Підприємець, а тепер і волонтер Артур С Кріс ліпс одним і з перших у Латві поїхав на польську український кордон заби...' avg_output_frames=237.0 avg_target_tokens=89.0 top_tokens=<blank>:0.612, р:0.017, по:0.013, д:0.013, в:0.013
|
| 897 |
+
2026-04-15 09:45:51,722 | INFO | rank=0 | epoch=2 step=14280/249868 global_step=15570 train_loss=0.1269 train_main_ctc_loss=0.1269 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.59 grad_norm=6.0615 max_feature_frames=451 train_avg_blank_prob=0.6784 train_argmax_blank_frac=0.6858 train_avg_top_nonblank_prob=0.3079 train_target_tokens_per_frame=0.2743 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.9381 train_avg_top_logit=16.6372 train_avg_top2_margin=6.0177 train_avg_blank_nonblank_margin=3.0088 train_avg_entropy=0.1377 train_blank_bias=0.0008 train_blank_weight_norm=0.5818 train_nonblank_weight_norm_mean=0.5915 train_blank_weight_grad_norm=1.8664 train_nonblank_weight_grad_norm_mean=0.0423 train_blank_bias_grad=0.0288 train_nonblank_bias_grad_mean=-0.0001 train_encoder_mean=-0.0618 train_encoder_std=3.2324 train_encoder_token_l2_norm=102.6158 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.30892e-06
|
| 898 |
+
2026-04-15 09:45:51,860 | INFO | rank=0 | train preview ref='Режим припинення вогню зафіксувати окупацію, принаймні частини території, яку Росія намагається отримати, і вступити ...' hyp_greedy='Режим припинення вогню зафіксувати окупацію принаймні частини території, яку Росія намагається отримати і вступити в ...' hyp_beam='Режим припинення вогню зафіксувати окупацію принаймній частини території, яку Росія намагається отримати і вступити в...' avg_output_frames=226.0 avg_target_tokens=62.0 top_tokens=<blank>:0.686, ти:0.018, н:0.018, и:0.013, м:0.009
|
| 899 |
+
2026-04-15 09:46:19,831 | INFO | rank=0 | epoch=2 step=14320/249868 global_step=15580 train_loss=0.2627 train_main_ctc_loss=0.2627 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.52 grad_norm=8.3128 max_feature_frames=254 train_avg_blank_prob=0.7078 train_argmax_blank_frac=0.7092 train_avg_top_nonblank_prob=0.2754 train_target_tokens_per_frame=0.2347 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.3673 train_avg_top_logit=15.7551 train_avg_top2_margin=5.6327 train_avg_blank_nonblank_margin=3.1224 train_avg_entropy=0.1773 train_blank_bias=0.0008 train_blank_weight_norm=0.5818 train_nonblank_weight_norm_mean=0.5915 train_blank_weight_grad_norm=3.6595 train_nonblank_weight_grad_norm_mean=0.0407 train_blank_bias_grad=-0.0580 train_nonblank_bias_grad_mean=0.0001 train_encoder_mean=-0.0765 train_encoder_std=3.0433 train_encoder_token_l2_norm=96.5615 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.31426e-06
|
| 900 |
+
2026-04-15 09:46:19,918 | INFO | rank=0 | train preview ref='Україні про її важливість, але наразився на критику.' hyp_greedy='Укні про її важливість, але наився на критику.' hyp_beam='Укні про її важливість, але наився на критику.' avg_output_frames=98.0 avg_target_tokens=23.0 top_tokens=<blank>:0.709, и:0.026, ,:0.020, ▁:0.020, .:0.010
|
| 901 |
+
2026-04-15 09:46:48,663 | INFO | rank=0 | epoch=2 step=14360/249868 global_step=15590 train_loss=0.2866 train_main_ctc_loss=0.2866 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.50 grad_norm=5.9153 max_feature_frames=536 train_avg_blank_prob=0.6348 train_argmax_blank_frac=0.6381 train_avg_top_nonblank_prob=0.3498 train_target_tokens_per_frame=0.2985 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.5075 train_avg_top_logit=16.3582 train_avg_top2_margin=5.7015 train_avg_blank_nonblank_margin=2.2687 train_avg_entropy=0.1576 train_blank_bias=0.0008 train_blank_weight_norm=0.5818 train_nonblank_weight_norm_mean=0.5915 train_blank_weight_grad_norm=1.9544 train_nonblank_weight_grad_norm_mean=0.0349 train_blank_bias_grad=0.0265 train_nonblank_bias_grad_mean=-0.0001 train_encoder_mean=-0.0592 train_encoder_std=3.2936 train_encoder_token_l2_norm=104.2076 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.31959e-06
|
| 902 |
+
2026-04-15 09:46:48,838 | INFO | rank=0 | train preview ref='І добре видно, що навіть поряд з театром Зеньковецької, який також є досить немаленьким, ця будівля вона просто гіган...' hyp_greedy='І добре видно, що навіть поряд з театром Зеньковецької, який також є в принципі досить немаленьким, ця будівля вона п...' hyp_beam='І добре видно, що навіть поряд з театром Зеньковецької, який також є в принципі досить немаленьким, ця будівля вона п...' avg_output_frames=268.0 avg_target_tokens=80.0 top_tokens=<blank>:0.638, а:0.015, ▁:0.015, те:0.015, ,:0.015
|
| 903 |
+
2026-04-15 09:47:16,471 | INFO | rank=0 | epoch=2 step=14400/249868 global_step=15600 train_loss=0.6403 train_main_ctc_loss=0.6403 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.46 grad_norm=7.3390 max_feature_frames=156 train_avg_blank_prob=0.5019 train_argmax_blank_frac=0.5321 train_avg_top_nonblank_prob=0.4519 train_target_tokens_per_frame=0.4295 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=12.3590 train_avg_top_logit=14.5641 train_avg_top2_margin=4.0000 train_avg_blank_nonblank_margin=0.0004 train_avg_entropy=0.3862 train_blank_bias=0.0008 train_blank_weight_norm=0.5817 train_nonblank_weight_norm_mean=0.5916 train_blank_weight_grad_norm=1.2854 train_nonblank_weight_grad_norm_mean=0.0401 train_blank_bias_grad=-0.0110 train_nonblank_bias_grad_mean=0.0000 train_encoder_mean=-0.0573 train_encoder_std=3.1059 train_encoder_token_l2_norm=98.1431 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.32493e-06
|
| 904 |
+
2026-04-15 09:47:16,515 | INFO | rank=0 | train preview ref='Демократи та республіканці узгоджену позицію щодо нього.' hyp_greedy='Демократи та республіканці узгоджену позицію щодо нього.' hyp_beam='Демократи та республіканці узгоджену позицію щодо нього.' avg_output_frames=78.0 avg_target_tokens=33.5 top_tokens=<blank>:0.532, ▁:0.026, го:0.019, рі:0.019, ці:0.019
|
| 905 |
+
2026-04-15 09:47:45,531 | INFO | rank=0 | epoch=2 step=14440/249868 global_step=15610 train_loss=0.3270 train_main_ctc_loss=0.3270 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.99 grad_norm=6.6323 max_feature_frames=1345 train_avg_blank_prob=0.8353 train_argmax_blank_frac=0.8403 train_avg_top_nonblank_prob=0.1528 train_target_tokens_per_frame=0.1309 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=15.4136 train_avg_top_logit=16.0838 train_avg_top2_margin=6.6178 train_avg_blank_nonblank_margin=5.4450 train_avg_entropy=0.1322 train_blank_bias=0.0008 train_blank_weight_norm=0.5818 train_nonblank_weight_norm_mean=0.5916 train_blank_weight_grad_norm=1.4787 train_nonblank_weight_grad_norm_mean=0.0410 train_blank_bias_grad=-0.0231 train_nonblank_bias_grad_mean=0.0000 train_encoder_mean=-0.0756 train_encoder_std=2.8996 train_encoder_token_l2_norm=91.8061 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.33027e-06
|
| 906 |
+
2026-04-15 09:47:45,754 | INFO | rank=0 | train preview ref='Я починаю потихеньку прокладати з польської, і теж це речі, які мені відгукуються, мене зачіпають, мені близькі.' hyp_greedy='Я починаю потихеньку перекладати з польськоїко і теж це речі, які мені відгукуються, мені мене зачіпють, мені близькі.' hyp_beam='Я починаю потихеньку перекладати з польськоїко, і теж це речі, які мені відгукуються, мені мене зачіпють, мені близькі.' avg_output_frames=382.0 avg_target_tokens=50.0 top_tokens=<blank>:0.840, ,:0.013, ні:0.010, ме:0.008, по:0.008
|
| 907 |
+
2026-04-15 09:48:13,661 | INFO | rank=0 | epoch=2 step=14480/249868 global_step=15620 train_loss=0.6607 train_main_ctc_loss=0.6607 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.64 grad_norm=16.6901 max_feature_frames=1224 train_avg_blank_prob=0.7903 train_argmax_blank_frac=0.8106 train_avg_top_nonblank_prob=0.1975 train_target_tokens_per_frame=0.1894 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.4848 train_avg_top_logit=15.3333 train_avg_top2_margin=6.0606 train_avg_blank_nonblank_margin=4.5455 train_avg_entropy=0.1581 train_blank_bias=0.0008 train_blank_weight_norm=0.5818 train_nonblank_weight_norm_mean=0.5916 train_blank_weight_grad_norm=5.2612 train_nonblank_weight_grad_norm_mean=0.0730 train_blank_bias_grad=-0.0569 train_nonblank_bias_grad_mean=0.0001 train_encoder_mean=-0.0802 train_encoder_std=2.8068 train_encoder_token_l2_norm=89.2133 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.3356e-06
|
| 908 |
+
2026-04-15 09:48:13,733 | INFO | rank=0 | train preview ref='Тут притульно, як у батька-матері в запічку. Це.' hyp_greedy='Тут притульно, як у батька матері в запічку.' hyp_beam='Тут притульно, як у батька матері в запічку.' avg_output_frames=132.0 avg_target_tokens=25.0 top_tokens=<blank>:0.811, ба:0.015, в:0.015, при:0.015, ,:0.008
|
| 909 |
+
2026-04-15 09:48:41,585 | INFO | rank=0 | epoch=2 step=14520/249868 global_step=15630 train_loss=0.1509 train_main_ctc_loss=0.1509 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.55 grad_norm=5.1923 max_feature_frames=220 train_avg_blank_prob=0.7735 train_argmax_blank_frac=0.7909 train_avg_top_nonblank_prob=0.2134 train_target_tokens_per_frame=0.1818 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.9818 train_avg_top_logit=16.0000 train_avg_top2_margin=6.3636 train_avg_blank_nonblank_margin=4.6000 train_avg_entropy=0.1511 train_blank_bias=0.0008 train_blank_weight_norm=0.5818 train_nonblank_weight_norm_mean=0.5916 train_blank_weight_grad_norm=2.4223 train_nonblank_weight_grad_norm_mean=0.0377 train_blank_bias_grad=0.0371 train_nonblank_bias_grad_mean=-0.0001 train_encoder_mean=-0.0675 train_encoder_std=2.9815 train_encoder_token_l2_norm=94.7521 cpu_rss=31.7GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.34094e-06
|
| 910 |
+
2026-04-15 09:48:41,644 | INFO | rank=0 | train preview ref='Харків є одним з найбільших міст України.' hyp_greedy='Харків є одним з найбільших міст України.' hyp_beam='Харків є одним з найбільших міст України.' avg_output_frames=110.0 avg_target_tokens=20.0 top_tokens=<blank>:0.791, ків:0.018, ▁:0.018, й:0.018, .:0.009
|
| 911 |
+
2026-04-15 09:49:10,718 | INFO | rank=0 | epoch=2 step=14560/249868 global_step=15640 train_loss=0.7617 train_main_ctc_loss=0.7617 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.87 grad_norm=6.7798 max_feature_frames=747 train_avg_blank_prob=0.7285 train_argmax_blank_frac=0.7540 train_avg_top_nonblank_prob=0.2396 train_target_tokens_per_frame=0.2487 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.2888 train_avg_top_logit=15.3155 train_avg_top2_margin=5.3904 train_avg_blank_nonblank_margin=3.5080 train_avg_entropy=0.2807 train_blank_bias=0.0008 train_blank_weight_norm=0.5817 train_nonblank_weight_norm_mean=0.5916 train_blank_weight_grad_norm=0.9750 train_nonblank_weight_grad_norm_mean=0.0325 train_blank_bias_grad=0.0157 train_nonblank_bias_grad_mean=-0.0000 train_encoder_mean=-0.0790 train_encoder_std=2.9222 train_encoder_token_l2_norm=92.2669 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.34627e-06
|
| 912 |
+
2026-04-15 09:49:10,958 | INFO | rank=0 | train preview ref='Помаранчеві міжка, зелена голівка. Насправді в лісі все прекрасно, окрім слідів перебування тут людини. І якби я взял...' hyp_greedy='Абаран зказеленаліка Насправді влісі все прекрасно, окрім слідів перебання тут людини, і якби я взяла якийсьбе пакет ...' hyp_beam='Абаран зказеленаліка. Насправді влісі все прекрасно, окрім слідів перебання тут людини, і якби я взяла якийсьбе пакет...' avg_output_frames=374.0 avg_target_tokens=93.0 top_tokens=<blank>:0.754, ра:0.011, ,:0.011, к:0.011, в:0.008
|
| 913 |
+
2026-04-15 09:49:39,281 | INFO | rank=0 | epoch=2 step=14600/249868 global_step=15650 train_loss=0.3825 train_main_ctc_loss=0.3825 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.76 grad_norm=18.1136 max_feature_frames=222 train_avg_blank_prob=0.7310 train_argmax_blank_frac=0.7500 train_avg_top_nonblank_prob=0.2360 train_target_tokens_per_frame=0.2500 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=13.6000 train_avg_top_logit=14.5778 train_avg_top2_margin=5.0000 train_avg_blank_nonblank_margin=3.3111 train_avg_entropy=0.2861 train_blank_bias=0.0008 train_blank_weight_norm=0.5818 train_nonblank_weight_norm_mean=0.5916 train_blank_weight_grad_norm=1.2080 train_nonblank_weight_grad_norm_mean=0.0337 train_blank_bias_grad=0.0197 train_nonblank_bias_grad_mean=-0.0000 train_encoder_mean=-0.0875 train_encoder_std=2.8195 train_encoder_token_l2_norm=89.6190 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.35161e-06
|
| 914 |
+
2026-04-15 09:49:39,296 | INFO | rank=0 | train preview ref='З кольорами.' hyp_greedy='З кольорами.' hyp_beam='З кольорами.' avg_output_frames=30.0 avg_target_tokens=7.5 top_tokens=<blank>:0.750, .:0.033, ▁:0.022, ль:0.011, і:0.011
|
| 915 |
+
2026-04-15 09:50:07,464 | INFO | rank=0 | epoch=2 step=14640/249868 global_step=15660 train_loss=0.5044 train_main_ctc_loss=0.5044 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.44 grad_norm=5.0815 max_feature_frames=441 train_avg_blank_prob=0.5508 train_argmax_blank_frac=0.5611 train_avg_top_nonblank_prob=0.3902 train_target_tokens_per_frame=0.4072 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=12.1629 train_avg_top_logit=13.9005 train_avg_top2_margin=4.0000 train_avg_blank_nonblank_margin=0.8959 train_avg_entropy=0.4118 train_blank_bias=0.0008 train_blank_weight_norm=0.5817 train_nonblank_weight_norm_mean=0.5916 train_blank_weight_grad_norm=1.3039 train_nonblank_weight_grad_norm_mean=0.0360 train_blank_bias_grad=0.0116 train_nonblank_bias_grad_mean=-0.0000 train_encoder_mean=-0.0827 train_encoder_std=2.9360 train_encoder_token_l2_norm=93.2561 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.35695e-06
|
| 916 |
+
2026-04-15 09:50:07,613 | INFO | rank=0 | train preview ref='Ми знаємо Юлю, що загалом з України наразі вже виїхало понад три з половиною мільйони людей. Більша кількість найбіль...' hyp_greedy='Ми знаємо Юлію, що загалом, зкраїна наразі вже виїшла понадтри зполовиної мільони людей. Біша кількість найбільша кіл...' hyp_beam='Ми знаємо Юлію, що загалом, зукраїна наразі вже виїшла понадтри зполовиної мільони людей. Біша кількість найбільша кі...' avg_output_frames=221.0 avg_target_tokens=90.0 top_tokens=<blank>:0.561, ль:0.027, ▁:0.023, і:0.018, к:0.018
|
| 917 |
+
2026-04-15 09:50:35,833 | INFO | rank=0 | epoch=2 step=14680/249868 global_step=15670 train_loss=0.4106 train_main_ctc_loss=0.4106 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.61 grad_norm=4.4287 max_feature_frames=406 train_avg_blank_prob=0.6425 train_argmax_blank_frac=0.6373 train_avg_top_nonblank_prob=0.3362 train_target_tokens_per_frame=0.2843 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.1961 train_avg_top_logit=15.7647 train_avg_top2_margin=5.4118 train_avg_blank_nonblank_margin=2.5490 train_avg_entropy=0.2120 train_blank_bias=0.0008 train_blank_weight_norm=0.5817 train_nonblank_weight_norm_mean=0.5916 train_blank_weight_grad_norm=1.5228 train_nonblank_weight_grad_norm_mean=0.0356 train_blank_bias_grad=-0.0197 train_nonblank_bias_grad_mean=0.0000 train_encoder_mean=-0.0430 train_encoder_std=3.0306 train_encoder_token_l2_norm=96.0261 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.36228e-06
|
| 918 |
+
2026-04-15 09:50:35,888 | INFO | rank=0 | train preview ref='Китай Бекін мусить застосовувати свій вплив на Росію.' hyp_greedy='Китай Бекін мусить застосовувати свій вплив на Росію.' hyp_beam='Китай Бекін мусить застосовувати свій вплив на Росію.' avg_output_frames=102.0 avg_target_tokens=29.0 top_tokens=<blank>:0.637, й:0.039, ю:0.020, с:0.020, ▁:0.020
|
| 919 |
+
2026-04-15 09:51:03,993 | INFO | rank=0 | epoch=2 step=14720/249868 global_step=15680 train_loss=0.6871 train_main_ctc_loss=0.6871 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.66 grad_norm=4.3319 max_feature_frames=718 train_avg_blank_prob=0.5679 train_argmax_blank_frac=0.5815 train_avg_top_nonblank_prob=0.3971 train_target_tokens_per_frame=0.3478 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=12.6957 train_avg_top_logit=14.7826 train_avg_top2_margin=4.6087 train_avg_blank_nonblank_margin=0.7989 train_avg_entropy=0.3125 train_blank_bias=0.0008 train_blank_weight_norm=0.5816 train_nonblank_weight_norm_mean=0.5916 train_blank_weight_grad_norm=1.6113 train_nonblank_weight_grad_norm_mean=0.0340 train_blank_bias_grad=-0.0187 train_nonblank_bias_grad_mean=0.0000 train_encoder_mean=-0.0746 train_encoder_std=3.0225 train_encoder_token_l2_norm=95.5377 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.36762e-06
|
| 920 |
+
2026-04-15 09:51:04,106 | INFO | rank=0 | train preview ref='Можливо, й придеться міняти тут. Треба досліджувати. Нелюбов Гадомська, Василь Панчук, Суспільне новини, Тернопіль.' hyp_greedy='Можливо придеться міняти, Т тутт треба досліджувати не Любов Гадомська Василь Панчук, Суспільне новини, Тернопіль.' hyp_beam='Можливо придеться міняти, Т тутт треба досліджувати не Любов Гадомська, Василь Панчук, Суспільне новини, Тернопіль.' avg_output_frames=184.0 avg_target_tokens=64.0 top_tokens=<blank>:0.582, а:0.016, ,:0.016, е:0.016, с:0.016
|
| 921 |
+
2026-04-15 09:51:32,750 | INFO | rank=0 | epoch=2 step=14760/249868 global_step=15690 train_loss=1.1355 train_main_ctc_loss=1.1355 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.41 grad_norm=7.1643 max_feature_frames=278 train_avg_blank_prob=0.6834 train_argmax_blank_frac=0.7050 train_avg_top_nonblank_prob=0.2689 train_target_tokens_per_frame=0.2662 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=12.9496 train_avg_top_logit=13.8705 train_avg_top2_margin=4.5180 train_avg_blank_nonblank_margin=2.7914 train_avg_entropy=0.4119 train_blank_bias=0.0008 train_blank_weight_norm=0.5816 train_nonblank_weight_norm_mean=0.5916 train_blank_weight_grad_norm=2.2822 train_nonblank_weight_grad_norm_mean=0.0461 train_blank_bias_grad=0.0510 train_nonblank_bias_grad_mean=-0.0001 train_encoder_mean=-0.0827 train_encoder_std=2.7500 train_encoder_token_l2_norm=86.7587 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.37295e-06
|
| 922 |
+
2026-04-15 09:51:32,827 | INFO | rank=0 | train preview ref='Це буде весь ОІ, напрямлена вгору. Якщо є бажання напрямити її вниз, я.' hyp_greedy='Це будесь огрік напрямно в гору.щ бажання напрямити її в нис' hyp_beam='Це будесь огрік напрямно в гору.щ бажання напрямити її в нис,' avg_output_frames=139.0 avg_target_tokens=37.0 top_tokens=<blank>:0.705, в:0.022, р:0.022, я:0.022, ▁:0.014
|
| 923 |
+
2026-04-15 09:52:01,163 | INFO | rank=0 | epoch=2 step=14800/249868 global_step=15700 train_loss=0.2422 train_main_ctc_loss=0.2422 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.58 grad_norm=5.4246 max_feature_frames=1014 train_avg_blank_prob=0.6343 train_argmax_blank_frac=0.6489 train_avg_top_nonblank_prob=0.3435 train_target_tokens_per_frame=0.3116 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.1381 train_avg_top_logit=15.8422 train_avg_top2_margin=5.3649 train_avg_blank_nonblank_margin=2.2249 train_avg_entropy=0.2229 train_blank_bias=0.0008 train_blank_weight_norm=0.5815 train_nonblank_weight_norm_mean=0.5917 train_blank_weight_grad_norm=1.5680 train_nonblank_weight_grad_norm_mean=0.0349 train_blank_bias_grad=-0.0266 train_nonblank_bias_grad_mean=0.0001 train_encoder_mean=-0.0810 train_encoder_std=3.1155 train_encoder_token_l2_norm=98.6631 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.37829e-06
|
| 924 |
+
2026-04-15 09:52:01,569 | INFO | rank=0 | train preview ref="А це гліб рік по тому за усміхненим обличчям. Одразу не зрозуміє, що у свої двадцять п'ять років хлопець уже кілька р..." hyp_greedy='А це гліб рік по тому. За усміхненим обличчям одразу не зрозуміє, що у свої двадцять пять років хлопець уже кілька ра...' hyp_beam="А це гліб рік по тому. За усміхненим обличчям одразу не зрозуміє, що у свої двадцять п'ять років хлопець уже кілька р..." avg_output_frames=507.0 avg_target_tokens=158.0 top_tokens=<blank>:0.649, ▁:0.034, .:0.012, у:0.012, й:0.010
|
| 925 |
+
2026-04-15 09:52:30,405 | INFO | rank=0 | epoch=2 step=14840/249868 global_step=15710 train_loss=0.3966 train_main_ctc_loss=0.3966 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.53 grad_norm=4.1708 max_feature_frames=570 train_avg_blank_prob=0.7422 train_argmax_blank_frac=0.7509 train_avg_top_nonblank_prob=0.2409 train_target_tokens_per_frame=0.2316 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=15.1579 train_avg_top_logit=16.3930 train_avg_top2_margin=6.3439 train_avg_blank_nonblank_margin=4.1544 train_avg_entropy=0.1614 train_blank_bias=0.0008 train_blank_weight_norm=0.5816 train_nonblank_weight_norm_mean=0.5917 train_blank_weight_grad_norm=1.3718 train_nonblank_weight_grad_norm_mean=0.0296 train_blank_bias_grad=0.0202 train_nonblank_bias_grad_mean=-0.0000 train_encoder_mean=-0.0810 train_encoder_std=3.0686 train_encoder_token_l2_norm=97.3893 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.38363e-06
|
| 926 |
+
2026-04-15 09:52:30,577 | INFO | rank=0 | train preview ref='І відокремлених по порожніх будинків немає, тому складно було знайти власне окрему окрему будівлю, котра є порожня, п...' hyp_greedy='І від окремних порожніх будинків немає Тому складно було знайти власне окрему окрему будівлю,катра є порожня, при цьо...' hyp_beam='І від окремних порожніх будинків немає. Тому складно було знайти власне окрему окрему будівлю,катра є порожня, при ць...' avg_output_frames=285.0 avg_target_tokens=66.0 top_tokens=<blank>:0.751, о:0.014, м:0.011, к:0.011, .:0.011
|
| 927 |
+
2026-04-15 09:53:00,193 | INFO | rank=0 | epoch=2 step=14880/249868 global_step=15720 train_loss=0.1670 train_main_ctc_loss=0.1670 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.59 grad_norm=4.3558 max_feature_frames=482 train_avg_blank_prob=0.6222 train_argmax_blank_frac=0.6266 train_avg_top_nonblank_prob=0.3624 train_target_tokens_per_frame=0.3485 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.2739 train_avg_top_logit=16.3320 train_avg_top2_margin=5.6432 train_avg_blank_nonblank_margin=1.9170 train_avg_entropy=0.1598 train_blank_bias=0.0008 train_blank_weight_norm=0.5816 train_nonblank_weight_norm_mean=0.5917 train_blank_weight_grad_norm=1.3049 train_nonblank_weight_grad_norm_mean=0.0343 train_blank_bias_grad=-0.0136 train_nonblank_bias_grad_mean=0.0000 train_encoder_mean=-0.0737 train_encoder_std=3.2577 train_encoder_token_l2_norm=103.1424 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.38896e-06
|
| 928 |
+
2026-04-15 09:53:00,352 | INFO | rank=0 | train preview ref='Щодо ситуації наразі на Донецькому напрямку, ми бачимо, що потроху, потроху, але позитивна динаміка для наших сил вон...' hyp_greedy='Щодо ситуації наразі на Донецькому напрямку, ми бачимо, що потроху потроху, але позитивна динаміка для наших сил, вон...' hyp_beam='Щодо ситуації наразі на Донецькому напрямку, ми бачимо, що потроху потроху, але позитивна динаміка для наших сил, вон...' avg_output_frames=241.0 avg_target_tokens=84.0 top_tokens=<blank>:0.627, ▁:0.029, ,:0.025, по:0.017, на:0.017
|
| 929 |
+
2026-04-15 09:53:28,139 | INFO | rank=0 | epoch=2 step=14920/249868 global_step=15730 train_loss=0.5427 train_main_ctc_loss=0.5427 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.55 grad_norm=5.4238 max_feature_frames=527 train_avg_blank_prob=0.6231 train_argmax_blank_frac=0.6212 train_avg_top_nonblank_prob=0.3536 train_target_tokens_per_frame=0.3371 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.3636 train_avg_top_logit=16.2424 train_avg_top2_margin=5.5758 train_avg_blank_nonblank_margin=2.1970 train_avg_entropy=0.1998 train_blank_bias=0.0008 train_blank_weight_norm=0.5816 train_nonblank_weight_norm_mean=0.5917 train_blank_weight_grad_norm=1.4860 train_nonblank_weight_grad_norm_mean=0.0394 train_blank_bias_grad=0.0246 train_nonblank_bias_grad_mean=-0.0000 train_encoder_mean=-0.0805 train_encoder_std=3.1863 train_encoder_token_l2_norm=101.2536 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.3943e-06
|
| 930 |
+
2026-04-15 09:53:28,314 | INFO | rank=0 | train preview ref='На придбання авто для військових зібрали майже шістдесят тисяч гривень, розповіла Христина Феціца, Любов Гадомська, О...' hyp_greedy='Наридбання авто для військових зібрали майже шістдесят тисяч гривень. розповіла Христина Феціц. Любов Гадомська, Окса...' hyp_beam='На придбання авто для військових зібрали майже шістдесят тисяч гривень. розповіла Христина Феціц. Любов Гадомська, Ок...' avg_output_frames=264.0 avg_target_tokens=89.0 top_tokens=<blank>:0.621, ▁:0.030, а:0.015, с:0.011, .:0.011
|
| 931 |
+
2026-04-15 09:53:58,446 | INFO | rank=0 | epoch=2 step=14960/249868 global_step=15740 train_loss=0.8851 train_main_ctc_loss=0.8851 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.65 grad_norm=6.4028 max_feature_frames=1023 train_avg_blank_prob=0.6207 train_argmax_blank_frac=0.6270 train_avg_top_nonblank_prob=0.3555 train_target_tokens_per_frame=0.3555 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.2500 train_avg_top_logit=16.1250 train_avg_top2_margin=5.4375 train_avg_blank_nonblank_margin=2.1250 train_avg_entropy=0.2129 train_blank_bias=0.0008 train_blank_weight_norm=0.5816 train_nonblank_weight_norm_mean=0.5917 train_blank_weight_grad_norm=2.5540 train_nonblank_weight_grad_norm_mean=0.0501 train_blank_bias_grad=-0.0455 train_nonblank_bias_grad_mean=0.0001 train_encoder_mean=-0.0757 train_encoder_std=3.2351 train_encoder_token_l2_norm=102.5213 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.39964e-06
|
| 932 |
+
2026-04-15 09:53:58,979 | INFO | rank=0 | train preview ref="Ну, обов'язково мусимо згадати і про податки ФОПа на другій групі, тому що там є певна специфіка. ФОПа на другій груп..." hyp_greedy="Ну, обов'язково мусимо згадати і про податки фопа на другій групі, тому що там є певна специфіка. Фопа на другій груп..." hyp_beam="Ну, обов'язково мусимо згадати і про податки фопа на другій групі, тому що там є певна специфіка. Фопа на другій груп..." avg_output_frames=512.0 avg_target_tokens=182.0 top_tokens=<blank>:0.627, ▁:0.029, ,:0.020, по:0.016, .:0.012
|
| 933 |
+
2026-04-15 09:54:26,690 | INFO | rank=0 | epoch=2 step=15000/249868 global_step=15750 train_loss=0.1650 train_main_ctc_loss=0.1650 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.70 grad_norm=3.5384 max_feature_frames=289 train_avg_blank_prob=0.6792 train_argmax_blank_frac=0.6759 train_avg_top_nonblank_prob=0.3018 train_target_tokens_per_frame=0.2690 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.3448 train_avg_top_logit=15.7793 train_avg_top2_margin=5.3241 train_avg_blank_nonblank_margin=2.6621 train_avg_entropy=0.2103 train_blank_bias=0.0008 train_blank_weight_norm=0.5816 train_nonblank_weight_norm_mean=0.5917 train_blank_weight_grad_norm=0.8033 train_nonblank_weight_grad_norm_mean=0.0280 train_blank_bias_grad=0.0014 train_nonblank_bias_grad_mean=-0.0000 train_encoder_mean=-0.0741 train_encoder_std=3.0672 train_encoder_token_l2_norm=96.9330 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.40497e-06
|
| 934 |
+
2026-04-15 09:54:26,773 | INFO | rank=0 | train preview ref='Двіться, це насправді дійсна проблема, і повірте, мені здається, що сьогодні до кінця.' hyp_greedy='Двіся, це насправді дійсна проблема, і повірте. меені здається, що сьогодні до кінця.' hyp_beam='Двіся, це насправді дійсна проблема, і повірте. меені здається, що сьогодні до кінця.' avg_output_frames=145.0 avg_target_tokens=39.0 top_tokens=<blank>:0.676, ,:0.021, ▁:0.021, й:0.014, .:0.014
|
| 935 |
+
2026-04-15 09:54:55,817 | INFO | rank=0 | epoch=2 step=15040/249868 global_step=15760 train_loss=0.5876 train_main_ctc_loss=0.5876 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.49 grad_norm=6.4548 max_feature_frames=602 train_avg_blank_prob=0.7013 train_argmax_blank_frac=0.7143 train_avg_top_nonblank_prob=0.2673 train_target_tokens_per_frame=0.2691 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=13.8206 train_avg_top_logit=14.8837 train_avg_top2_margin=5.2093 train_avg_blank_nonblank_margin=3.2292 train_avg_entropy=0.2658 train_blank_bias=0.0008 train_blank_weight_norm=0.5816 train_nonblank_weight_norm_mean=0.5917 train_blank_weight_grad_norm=2.5494 train_nonblank_weight_grad_norm_mean=0.0482 train_blank_bias_grad=0.0401 train_nonblank_bias_grad_mean=-0.0001 train_encoder_mean=-0.0816 train_encoder_std=2.8286 train_encoder_token_l2_norm=89.7376 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.41031e-06
|
| 936 |
+
2026-04-15 09:54:56,013 | INFO | rank=0 | train preview ref='Такий варіант теж може бути, вона до обіду пристає. У деяких виробників вони на це акцентують увагу, що їх клійпіна п...' hyp_greedy='Такий варіантж може бути, вона до біму пристає. У деяких виробників вони на це акцентують увагу, що їх клійпіна прист...' hyp_beam='Такий варіантж може бути, вона до біму пристає. У деяких виробників вони на це акцентують увагу, що їх клій піна прис...' avg_output_frames=301.0 avg_target_tokens=81.0 top_tokens=<blank>:0.714, ▁:0.017, .:0.013, гу:0.010, ва:0.010
|
| 937 |
+
2026-04-15 09:55:23,955 | INFO | rank=0 | epoch=2 step=15080/249868 global_step=15770 train_loss=0.3156 train_main_ctc_loss=0.3156 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.76 grad_norm=4.9985 max_feature_frames=529 train_avg_blank_prob=0.7475 train_argmax_blank_frac=0.7547 train_avg_top_nonblank_prob=0.2350 train_target_tokens_per_frame=0.2151 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.9132 train_avg_top_logit=16.1811 train_avg_top2_margin=6.2792 train_avg_blank_nonblank_margin=4.0755 train_avg_entropy=0.1547 train_blank_bias=0.0008 train_blank_weight_norm=0.5816 train_nonblank_weight_norm_mean=0.5917 train_blank_weight_grad_norm=1.3913 train_nonblank_weight_grad_norm_mean=0.0400 train_blank_bias_grad=0.0091 train_nonblank_bias_grad_mean=-0.0000 train_encoder_mean=-0.0876 train_encoder_std=3.0141 train_encoder_token_l2_norm=95.4558 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.41564e-06
|
| 938 |
+
2026-04-15 09:55:24,113 | INFO | rank=0 | train preview ref='Нікому це все не було цікаво. Сьогодні ми маємо товаришів і товаришок по всьому світі, що вже очевидно робить нас сил...' hyp_greedy='Нікму це все не було цікаво. Сьогодні ми маємо товариші товаришок посьому світі, що вже очевидно робить наш сильнішими.' hyp_beam='Нікму це все не було цікаво. Сьогодні ми маємо товариші товаришок по всьому світі, що вже очевидно робить наш сильніш...' avg_output_frames=265.0 avg_target_tokens=57.0 top_tokens=<blank>:0.755, і:0.015, ▁:0.015, ш:0.011, д:0.011
|
| 939 |
+
2026-04-15 09:55:53,529 | INFO | rank=0 | epoch=2 step=15120/249868 global_step=15780 train_loss=2.0748 train_main_ctc_loss=2.0748 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.83 grad_norm=5.5937 max_feature_frames=1412 train_avg_blank_prob=0.7199 train_argmax_blank_frac=0.7479 train_avg_top_nonblank_prob=0.2186 train_target_tokens_per_frame=0.1884 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=12.6006 train_avg_top_logit=13.1445 train_avg_top2_margin=4.1926 train_avg_blank_nonblank_margin=3.2181 train_avg_entropy=0.5042 train_blank_bias=0.0008 train_blank_weight_norm=0.5817 train_nonblank_weight_norm_mean=0.5917 train_blank_weight_grad_norm=1.6458 train_nonblank_weight_grad_norm_mean=0.0457 train_blank_bias_grad=0.0184 train_nonblank_bias_grad_mean=-0.0000 train_encoder_mean=-0.0931 train_encoder_std=2.5863 train_encoder_token_l2_norm=82.3180 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.42098e-06
|
| 940 |
+
2026-04-15 09:55:54,119 | INFO | rank=0 | train preview ref='Ну там вот ще було можна попасти через проходить через сторону, либо там через портал. Мойки не було сюди. Там вообще...' hyp_greedy='Номер телеф оренда Нмер телефна подзвонив. Ну заводще було мож попасти токо либо через прохну через сторежа, либо та...' hyp_beam='Номер телеф оренда Нмер телефна подзвонив. Ну там заводще було можнаж попасти, токо либо через прохну через сторежа,...' avg_output_frames=706.0 avg_target_tokens=133.0 top_tokens=<blank>:0.748, ▁:0.021, по:0.010, е:0.010, .:0.010
|
| 941 |
+
2026-04-15 09:56:21,825 | INFO | rank=0 | epoch=2 step=15160/249868 global_step=15790 train_loss=1.3078 train_main_ctc_loss=1.3078 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.69 grad_norm=5.7715 max_feature_frames=342 train_avg_blank_prob=0.6927 train_argmax_blank_frac=0.7251 train_avg_top_nonblank_prob=0.2329 train_target_tokens_per_frame=0.2515 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=11.9766 train_avg_top_logit=12.6316 train_avg_top2_margin=3.6725 train_avg_blank_nonblank_margin=2.5263 train_avg_entropy=0.5351 train_blank_bias=0.0008 train_blank_weight_norm=0.5815 train_nonblank_weight_norm_mean=0.5917 train_blank_weight_grad_norm=1.1613 train_nonblank_weight_grad_norm_mean=0.0488 train_blank_bias_grad=0.0098 train_nonblank_bias_grad_mean=-0.0000 train_encoder_mean=-0.1062 train_encoder_std=2.5734 train_encoder_token_l2_norm=82.0200 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.42632e-06
|
| 942 |
+
2026-04-15 09:56:21,927 | INFO | rank=0 | train preview ref='Ну то тоже хорошо. Короче, ладно, ну оценивай не люки. Люки- это не главное.' hyp_greedy='Т то тоже хорошо. корошее ладно, Ну о цениваы не люккие. Ллюке это неглавное.' hyp_beam='Т то тоже хорошо. корошее ладно, Ну о цениваы не люккие. Ллюке о это неглавное.' avg_output_frames=171.0 avg_target_tokens=43.0 top_tokens=<blank>:0.725, е:0.035, ▁:0.023, .:0.018, к:0.012
|
| 943 |
+
2026-04-15 09:56:50,630 | INFO | rank=0 | epoch=2 step=15200/249868 global_step=15800 train_loss=0.7668 train_main_ctc_loss=0.7668 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.67 grad_norm=4.1027 max_feature_frames=589 train_avg_blank_prob=0.6994 train_argmax_blank_frac=0.7017 train_avg_top_nonblank_prob=0.2772 train_target_tokens_per_frame=0.2576 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.5356 train_avg_top_logit=15.8373 train_avg_top2_margin=5.8034 train_avg_blank_nonblank_margin=3.4983 train_avg_entropy=0.2119 train_blank_bias=0.0008 train_blank_weight_norm=0.5816 train_nonblank_weight_norm_mean=0.5918 train_blank_weight_grad_norm=1.1251 train_nonblank_weight_grad_norm_mean=0.0408 train_blank_bias_grad=0.0052 train_nonblank_bias_grad_mean=-0.0000 train_encoder_mean=-0.0795 train_encoder_std=2.9685 train_encoder_token_l2_norm=94.1546 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.43165e-06
|
| 944 |
+
2026-04-15 09:56:50,819 | INFO | rank=0 | train preview ref='Богородиця Діво, радуйся, благодатна Я Маріє, Господь з тобою, благословенна ти між жінками і благословений плід лона...' hyp_greedy='Богородиця діво, Ррадуйся благодатна я марії Госпоь з тобою, Благословенна ти між жінками, і благословенний плідлона...' hyp_beam='Богородиця діво, Ррадуйся благодатна я марії, Госпоь з тобою, Благословенна ти між жінками, і благословенний плідлон...' avg_output_frames=295.0 avg_target_tokens=76.0 top_tokens=<blank>:0.702, ▁:0.034, с:0.017, го:0.014, на:0.014
|
| 945 |
+
2026-04-15 09:57:18,651 | INFO | rank=0 | epoch=2 step=15240/249868 global_step=15810 train_loss=0.2579 train_main_ctc_loss=0.2579 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.52 grad_norm=4.6683 max_feature_frames=501 train_avg_blank_prob=0.7283 train_argmax_blank_frac=0.7331 train_avg_top_nonblank_prob=0.2589 train_target_tokens_per_frame=0.2390 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=15.7450 train_avg_top_logit=17.0837 train_avg_top2_margin=6.7888 train_avg_blank_nonblank_margin=4.2709 train_avg_entropy=0.1315 train_blank_bias=0.0008 train_blank_weight_norm=0.5816 train_nonblank_weight_norm_mean=0.5918 train_blank_weight_grad_norm=1.1866 train_nonblank_weight_grad_norm_mean=0.0346 train_blank_bias_grad=0.0116 train_nonblank_bias_grad_mean=-0.0000 train_encoder_mean=-0.0829 train_encoder_std=3.1639 train_encoder_token_l2_norm=100.0617 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.43699e-06
|
| 946 |
+
2026-04-15 09:57:18,802 | INFO | rank=0 | train preview ref='Діти пішли на фронт внутрішньопереміщеним особам. Всі, хто до нас звертається, ми зразу ж надаємо цю допомогу.' hyp_greedy='Діяти пішли на фронт внутрішньо переміщеним особам. всі, хто до нас звертається. Ми зразу ж надаємо цю допомогу.' hyp_beam='Діяти пішли на фронт внутрішньо переміщеним особам. всі, хто до нас звертається. Ми зразу ж надаємо цю допомогу.' avg_output_frames=251.0 avg_target_tokens=60.0 top_tokens=<blank>:0.733, ▁:0.032, ш:0.012, т:0.012, .:0.012
|
| 947 |
+
2026-04-15 09:57:47,490 | INFO | rank=0 | epoch=2 step=15280/249868 global_step=15820 train_loss=0.4475 train_main_ctc_loss=0.4475 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.52 grad_norm=3.5607 max_feature_frames=1136 train_avg_blank_prob=0.9386 train_argmax_blank_frac=0.9401 train_avg_top_nonblank_prob=0.0542 train_target_tokens_per_frame=0.0546 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=17.2394 train_avg_top_logit=17.4648 train_avg_top2_margin=9.6338 train_avg_blank_nonblank_margin=9.2394 train_avg_entropy=0.0599 train_blank_bias=0.0008 train_blank_weight_norm=0.5815 train_nonblank_weight_norm_mean=0.5918 train_blank_weight_grad_norm=1.1050 train_nonblank_weight_grad_norm_mean=0.0351 train_blank_bias_grad=-0.0161 train_nonblank_bias_grad_mean=0.0000 train_encoder_mean=-0.0928 train_encoder_std=2.7630 train_encoder_token_l2_norm=88.2210 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.44232e-06
|
| 948 |
+
2026-04-15 09:57:47,806 | INFO | rank=0 | train preview ref='Відмінок одне. Наступний скільки? Хто з нас скільки? Відмінок.' hyp_greedy='Відмінок. Однина. Наступний. скільки. Хто з наскільки. Відмінок.' hyp_beam='Відмінок. Однина. Наступний. скільки. Хто з нас скільки. Відмінок.' avg_output_frames=568.0 avg_target_tokens=31.0 top_tokens=<blank>:0.940, .:0.011, ль:0.004, но:0.004, к:0.004
|
| 949 |
+
2026-04-15 09:58:15,934 | INFO | rank=0 | epoch=2 step=15320/249868 global_step=15830 train_loss=2.4373 train_main_ctc_loss=2.4373 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.68 grad_norm=20.3857 max_feature_frames=1397 train_avg_blank_prob=0.8249 train_argmax_blank_frac=0.9442 train_avg_top_nonblank_prob=0.0881 train_target_tokens_per_frame=0.2704 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=10.7124 train_avg_top_logit=10.7582 train_avg_top2_margin=3.9599 train_avg_blank_nonblank_margin=3.8684 train_avg_entropy=0.7439 train_blank_bias=0.0008 train_blank_weight_norm=0.5816 train_nonblank_weight_norm_mean=0.5918 train_blank_weight_grad_norm=6.1673 train_nonblank_weight_grad_norm_mean=0.0552 train_blank_bias_grad=0.1494 train_nonblank_bias_grad_mean=-0.0003 train_encoder_mean=-0.0803 train_encoder_std=2.0409 train_encoder_token_l2_norm=64.9435 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.44766e-06
|
| 950 |
+
2026-04-15 09:58:16,355 | INFO | rank=0 | train preview ref='И я пользуюсь даже БАДами, у меня БАДы стоят гораздо дольше, до лет. У них срок года годности. Я пользуюсь этими БАДа...' hyp_greedy='пою,разль. уроно. поюми помагал ба бака бале. осноляеся с бмсмичках.' hyp_beam='позю, уразль. уродности. пою бамие помагал бас ба дляка бале. орасноляеся с бмсканими почках.' avg_output_frames=699.0 avg_target_tokens=189.0 top_tokens=<blank>:0.944, .:0.006, по:0.004, ба:0.004, с:0.003
|
| 951 |
+
2026-04-15 09:58:45,342 | INFO | rank=0 | epoch=2 step=15360/249868 global_step=15840 train_loss=0.5374 train_main_ctc_loss=0.5374 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.68 grad_norm=4.1763 max_feature_frames=777 train_avg_blank_prob=0.6232 train_argmax_blank_frac=0.6298 train_avg_top_nonblank_prob=0.3578 train_target_tokens_per_frame=0.2622 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=13.5733 train_avg_top_logit=15.1362 train_avg_top2_margin=4.6067 train_avg_blank_nonblank_margin=1.7069 train_avg_entropy=0.2699 train_blank_bias=0.0008 train_blank_weight_norm=0.5812 train_nonblank_weight_norm_mean=0.5918 train_blank_weight_grad_norm=2.4768 train_nonblank_weight_grad_norm_mean=0.0301 train_blank_bias_grad=-0.0393 train_nonblank_bias_grad_mean=0.0001 train_encoder_mean=-0.0746 train_encoder_std=3.0273 train_encoder_token_l2_norm=95.7781 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.453e-06
|
| 952 |
+
2026-04-15 09:58:45,636 | INFO | rank=0 | train preview ref='Автомобільної техніки та автоцистерн ⁇ одиниць, спеціальної техніки ⁇ одиниць. За днів повномасштабного вторгнення Ро...' hyp_greedy="Автомобільноїї техніки та автоцистерн три тисячітриять одинць. Спеціальної техніки дев'ять одинць. за стов'ясто п'ят..." hyp_beam="Автомобільноїї техніки та автоцистерн три тисячі триять одиниць. Спеціальної техніки сто дев'ять одиниць. за стов'яст..." avg_output_frames=389.0 avg_target_tokens=102.0 top_tokens=<blank>:0.630, в:0.023, ▁:0.023, то:0.013, ти:0.010
|
| 953 |
+
2026-04-15 09:59:13,872 | INFO | rank=0 | epoch=2 step=15400/249868 global_step=15850 train_loss=0.5443 train_main_ctc_loss=0.5443 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.53 grad_norm=4.1102 max_feature_frames=308 train_avg_blank_prob=0.5978 train_argmax_blank_frac=0.6104 train_avg_top_nonblank_prob=0.3848 train_target_tokens_per_frame=0.3701 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.1299 train_avg_top_logit=16.3117 train_avg_top2_margin=5.3247 train_avg_blank_nonblank_margin=1.3636 train_avg_entropy=0.1745 train_blank_bias=0.0008 train_blank_weight_norm=0.5813 train_nonblank_weight_norm_mean=0.5918 train_blank_weight_grad_norm=1.3835 train_nonblank_weight_grad_norm_mean=0.0330 train_blank_bias_grad=0.0155 train_nonblank_bias_grad_mean=-0.0000 train_encoder_mean=-0.0577 train_encoder_std=3.3254 train_encoder_token_l2_norm=105.2283 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.45833e-06
|
| 954 |
+
2026-04-15 09:59:13,965 | INFO | rank=0 | train preview ref='Рухається лише вперед, але держсекретар чергове озвучив деякі критичні зауваження на адресу української влади.' hyp_greedy='ухається лише вперед, але дерсекретар черговий озвучив деякі критичні зауваження на адресу української влади.' hyp_beam='ухається лише вперед, але дерсекретар черговий озвучив деякі критичні зауваження на адресу української влади.' avg_output_frames=154.0 avg_target_tokens=57.0 top_tokens=<blank>:0.610, ▁:0.026, у:0.019, р:0.019, в:0.019
|
| 955 |
+
2026-04-15 09:59:42,613 | INFO | rank=0 | epoch=2 step=15440/249868 global_step=15860 train_loss=0.9125 train_main_ctc_loss=0.9125 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.51 grad_norm=3.5779 max_feature_frames=691 train_avg_blank_prob=0.6283 train_argmax_blank_frac=0.6398 train_avg_top_nonblank_prob=0.3599 train_target_tokens_per_frame=0.3387 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.5376 train_avg_top_logit=16.6882 train_avg_top2_margin=5.7634 train_avg_blank_nonblank_margin=1.8495 train_avg_entropy=0.1418 train_blank_bias=0.0008 train_blank_weight_norm=0.5812 train_nonblank_weight_norm_mean=0.5918 train_blank_weight_grad_norm=1.4345 train_nonblank_weight_grad_norm_mean=0.0365 train_blank_bias_grad=-0.0217 train_nonblank_bias_grad_mean=0.0000 train_encoder_mean=-0.0600 train_encoder_std=3.3141 train_encoder_token_l2_norm=105.0900 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.46367e-06
|
| 956 |
+
2026-04-15 09:59:42,726 | INFO | rank=0 | train preview ref='Під приводом пандемії, під час візиту, голова Європейської ради також заявив про необхідність продовження антиросійсь...' hyp_greedy='Пі приводом пандемії під час візиту голова європейської ради також заявив про необхідність продовження антиросійськи...' hyp_beam='Пі приводом пандемії під час візиту голова Європейської ради також заявив про необхідність продовження антиросійських...' avg_output_frames=186.0 avg_target_tokens=63.0 top_tokens=<blank>:0.640, ▁:0.027, н:0.022, й:0.022, в:0.016
|
| 957 |
+
2026-04-15 10:00:11,490 | INFO | rank=0 | epoch=2 step=15480/249868 global_step=15870 train_loss=0.8325 train_main_ctc_loss=0.8325 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.47 grad_norm=5.4402 max_feature_frames=249 train_avg_blank_prob=0.5492 train_argmax_blank_frac=0.5347 train_avg_top_nonblank_prob=0.4017 train_target_tokens_per_frame=0.3960 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=13.1485 train_avg_top_logit=14.5743 train_avg_top2_margin=3.9208 train_avg_blank_nonblank_margin=1.1980 train_avg_entropy=0.3911 train_blank_bias=0.0008 train_blank_weight_norm=0.5813 train_nonblank_weight_norm_mean=0.5918 train_blank_weight_grad_norm=1.5167 train_nonblank_weight_grad_norm_mean=0.0383 train_blank_bias_grad=0.0287 train_nonblank_bias_grad_mean=-0.0001 train_encoder_mean=-0.0726 train_encoder_std=2.9511 train_encoder_token_l2_norm=93.9166 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.469e-06
|
| 958 |
+
2026-04-15 10:00:11,548 | INFO | rank=0 | train preview ref='Це Крістін Хейджик і йода, одне з сотень коней, яких вона врятувала.' hyp_greedy='Це Крістін Хейджик і ода одинз сотень коней, яких вона врятувала.' hyp_beam='Це Крістін Хейджик і йода одинз сотень коней, яких вона врятувала.' avg_output_frames=101.0 avg_target_tokens=40.0 top_tokens=<blank>:0.535, ▁:0.030, е:0.020, .:0.020, ,:0.020
|
| 959 |
+
2026-04-15 10:00:40,447 | INFO | rank=0 | epoch=2 step=15520/249868 global_step=15880 train_loss=1.2276 train_main_ctc_loss=1.2276 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.44 grad_norm=8.0979 max_feature_frames=259 train_avg_blank_prob=0.5701 train_argmax_blank_frac=0.5846 train_avg_top_nonblank_prob=0.4030 train_target_tokens_per_frame=0.3769 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.2154 train_avg_top_logit=16.3692 train_avg_top2_margin=5.0769 train_avg_blank_nonblank_margin=1.1231 train_avg_entropy=0.2317 train_blank_bias=0.0008 train_blank_weight_norm=0.5812 train_nonblank_weight_norm_mean=0.5918 train_blank_weight_grad_norm=4.5112 train_nonblank_weight_grad_norm_mean=0.0460 train_blank_bias_grad=-0.0583 train_nonblank_bias_grad_mean=0.0001 train_encoder_mean=-0.0623 train_encoder_std=3.3137 train_encoder_token_l2_norm=104.8934 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.47434e-06
|
| 960 |
+
2026-04-15 10:00:40,522 | INFO | rank=0 | train preview ref='Прагнуть до єста НАТО, і про це переконливо свідчить динаміка громадської думки ⁇ хибне.' hyp_greedy='Прагнуть доЄса НАТО і про це переконливо свідчить динаміка громадської думки хидне.' hyp_beam='Прагнуть доЄса НАТО і про це переконливо свідчить динаміка громадської думки хидне.' avg_output_frames=130.0 avg_target_tokens=49.0 top_tokens=<blank>:0.585, ▁:0.062, д:0.023, с:0.015, .:0.015
|
| 961 |
+
2026-04-15 10:01:08,300 | INFO | rank=0 | epoch=2 step=15560/249868 global_step=15890 train_loss=0.1714 train_main_ctc_loss=0.1714 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.49 grad_norm=5.0648 max_feature_frames=330 train_avg_blank_prob=0.7217 train_argmax_blank_frac=0.7417 train_avg_top_nonblank_prob=0.2733 train_target_tokens_per_frame=0.2583 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=15.6821 train_avg_top_logit=16.9536 train_avg_top2_margin=6.4106 train_avg_blank_nonblank_margin=4.0000 train_avg_entropy=0.1109 train_blank_bias=0.0008 train_blank_weight_norm=0.5814 train_nonblank_weight_norm_mean=0.5918 train_blank_weight_grad_norm=3.0314 train_nonblank_weight_grad_norm_mean=0.0345 train_blank_bias_grad=0.0582 train_nonblank_bias_grad_mean=-0.0001 train_encoder_mean=-0.0619 train_encoder_std=3.0665 train_encoder_token_l2_norm=97.1453 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.47968e-06
|
| 962 |
+
2026-04-15 10:01:08,387 | INFO | rank=0 | train preview ref="Ви пов'я��уєте появу цієї справи проти вас саме у квітні двадцятого року." hyp_greedy="Ви пов'язуєте появу цієї справи проти вас саме у квітні два року." hyp_beam="Ви пов'язуєте появу цієї справи проти вас саме у квітні дваого року." avg_output_frames=151.0 avg_target_tokens=39.0 top_tokens=<blank>:0.742, ▁:0.026, в:0.020, и:0.013, по:0.013
|
| 963 |
+
2026-04-15 10:01:36,946 | INFO | rank=0 | epoch=2 step=15600/249868 global_step=15900 train_loss=0.2158 train_main_ctc_loss=0.2158 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.83 grad_norm=2.9659 max_feature_frames=234 train_avg_blank_prob=0.5521 train_argmax_blank_frac=0.5556 train_avg_top_nonblank_prob=0.4286 train_target_tokens_per_frame=0.3846 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=13.4701 train_avg_top_logit=16.0684 train_avg_top2_margin=5.4017 train_avg_blank_nonblank_margin=0.8205 train_avg_entropy=0.1774 train_blank_bias=0.0008 train_blank_weight_norm=0.5812 train_nonblank_weight_norm_mean=0.5919 train_blank_weight_grad_norm=0.9281 train_nonblank_weight_grad_norm_mean=0.0243 train_blank_bias_grad=0.0098 train_nonblank_bias_grad_mean=-0.0000 train_encoder_mean=-0.0594 train_encoder_std=3.2621 train_encoder_token_l2_norm=103.4804 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.48501e-06
|
| 964 |
+
2026-04-15 10:01:37,015 | INFO | rank=0 | train preview ref='За словами командування США у Європі, їхнім завданням буде розгорнути штаб для підтримки військ.' hyp_greedy='За словами командування США у Європі їхнім завданням буде розгорнути штаб для підтримки військ.' hyp_beam='За словами командування США у Європі, їхнім завданням буде розгорнути штаб для підтримки військ.' avg_output_frames=117.0 avg_target_tokens=45.0 top_tokens=<blank>:0.556, д:0.026, ▁:0.026, м:0.026, в:0.017
|
| 965 |
+
2026-04-15 10:02:05,703 | INFO | rank=0 | epoch=2 step=15640/249868 global_step=15910 train_loss=0.2570 train_main_ctc_loss=0.2570 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.45 grad_norm=6.6248 max_feature_frames=346 train_avg_blank_prob=0.5941 train_argmax_blank_frac=0.6033 train_avg_top_nonblank_prob=0.3876 train_target_tokens_per_frame=0.3884 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.4793 train_avg_top_logit=16.7934 train_avg_top2_margin=5.7190 train_avg_blank_nonblank_margin=1.7273 train_avg_entropy=0.1715 train_blank_bias=0.0008 train_blank_weight_norm=0.5813 train_nonblank_weight_norm_mean=0.5919 train_blank_weight_grad_norm=2.3499 train_nonblank_weight_grad_norm_mean=0.0434 train_blank_bias_grad=0.0380 train_nonblank_bias_grad_mean=-0.0001 train_encoder_mean=-0.0590 train_encoder_std=3.3676 train_encoder_token_l2_norm=106.6210 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.49035e-06
|
| 966 |
+
2026-04-15 10:02:05,775 | INFO | rank=0 | train preview ref='Державні школи цього штату проводять класи лише у віртуальному режимі ⁇ однак, чимало.' hyp_greedy='Дер державвні школи цього штаду проводять класи лише у віртуаальноому режимі. однак чимало.' hyp_beam='Дер державвні школи цього штаду проводять класи лише у віртуаальноому режимі. однак чимало.' avg_output_frames=121.0 avg_target_tokens=47.0 top_tokens=<blank>:0.603, ▁:0.050, р:0.017, к:0.017, .:0.017
|
| 967 |
+
2026-04-15 10:02:34,699 | INFO | rank=0 | epoch=2 step=15680/249868 global_step=15920 train_loss=0.4279 train_main_ctc_loss=0.4279 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.62 grad_norm=5.1756 max_feature_frames=229 train_avg_blank_prob=0.7279 train_argmax_blank_frac=0.7333 train_avg_top_nonblank_prob=0.2585 train_target_tokens_per_frame=0.2190 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.3238 train_avg_top_logit=15.6190 train_avg_top2_margin=5.6000 train_avg_blank_nonblank_margin=3.2381 train_avg_entropy=0.1571 train_blank_bias=0.0008 train_blank_weight_norm=0.5811 train_nonblank_weight_norm_mean=0.5919 train_blank_weight_grad_norm=1.6555 train_nonblank_weight_grad_norm_mean=0.0353 train_blank_bias_grad=-0.0284 train_nonblank_bias_grad_mean=0.0001 train_encoder_mean=-0.0902 train_encoder_std=3.0622 train_encoder_token_l2_norm=96.8953 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.49569e-06
|
| 968 |
+
2026-04-15 10:02:34,760 | INFO | rank=0 | train preview ref='Своїм просто прикладом, що ми так само патріотичні люди.' hyp_greedy='Своїм просто прикладом, що ми так само патріотичні люди.' hyp_beam='Своїм просто прикладом, що ми так само патріотичні люди.' avg_output_frames=105.0 avg_target_tokens=23.0 top_tokens=<blank>:0.733, о:0.029, сам:0.019, т:0.019, ,:0.019
|
| 969 |
+
2026-04-15 10:03:03,513 | INFO | rank=0 | epoch=2 step=15720/249868 global_step=15930 train_loss=0.6287 train_main_ctc_loss=0.6287 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.63 grad_norm=3.8816 max_feature_frames=541 train_avg_blank_prob=0.6287 train_argmax_blank_frac=0.6421 train_avg_top_nonblank_prob=0.3418 train_target_tokens_per_frame=0.3247 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=12.8708 train_avg_top_logit=14.4649 train_avg_top2_margin=4.7823 train_avg_blank_nonblank_margin=1.8524 train_avg_entropy=0.2786 train_blank_bias=0.0008 train_blank_weight_norm=0.5812 train_nonblank_weight_norm_mean=0.5919 train_blank_weight_grad_norm=0.5526 train_nonblank_weight_grad_norm_mean=0.0274 train_blank_bias_grad=-0.0013 train_nonblank_bias_grad_mean=0.0000 train_encoder_mean=-0.0774 train_encoder_std=2.8616 train_encoder_token_l2_norm=90.7946 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.50102e-06
|
| 970 |
+
2026-04-15 10:03:03,701 | INFO | rank=0 | train preview ref='Прийшов до магазину зброї, аби придбати пневматичну рушницю для онуки, каже відвідувач магазину зброї Олег. Я купую т...' hyp_greedy='Прийшов до магазину зброї аби придбати пнимбатичну рушницю для онуги, каже відувач магазину зброї Олег. Я купуючи наш...' hyp_beam='Прийшов до магазину зброї аби придбати пнимбатичну рушницю для онуги, каже відувач магазину зброї Олег. Я купуючи наш...' avg_output_frames=271.0 avg_target_tokens=88.0 top_tokens=<blank>:0.642, ч:0.018, ▁:0.018, ну:0.018, ш:0.018
|
| 971 |
+
2026-04-15 10:03:32,131 | INFO | rank=0 | epoch=2 step=15760/249868 global_step=15940 train_loss=0.7381 train_main_ctc_loss=0.7381 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.60 grad_norm=7.1005 max_feature_frames=401 train_avg_blank_prob=0.6745 train_argmax_blank_frac=0.6766 train_avg_top_nonblank_prob=0.3148 train_target_tokens_per_frame=0.2935 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=15.2040 train_avg_top_logit=17.1144 train_avg_top2_margin=6.4478 train_avg_blank_nonblank_margin=2.9851 train_avg_entropy=0.1275 train_blank_bias=0.0008 train_blank_weight_norm=0.5812 train_nonblank_weight_norm_mean=0.5919 train_blank_weight_grad_norm=1.3146 train_nonblank_weight_grad_norm_mean=0.0462 train_blank_bias_grad=-0.0002 train_nonblank_bias_grad_mean=0.0000 train_encoder_mean=-0.0658 train_encoder_std=3.3393 train_encoder_token_l2_norm=105.5598 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.50636e-06
|
| 972 |
+
2026-04-15 10:03:32,259 | INFO | rank=0 | train preview ref='знайти на сайті Верховної Ради України у розділі ⁇ Народні депутати ⁇. Детальніше в законі України про звернення гром...' hyp_greedy='Знайти на сайті Верховної Рради України у розділі народні депутати детальніше в законі України про звернення громадян.' hyp_beam='Знайти на сайті Верховної Рради України у розділі народні депутати детальніше в законі України про звернення громадян.' avg_output_frames=201.0 avg_target_tokens=59.0 top_tokens=<blank>:0.677, України:0.020, ні:0.015, н:0.015, ▁:0.015
|
| 973 |
+
2026-04-15 10:04:02,089 | INFO | rank=0 | epoch=2 step=15800/249868 global_step=15950 train_loss=0.4944 train_main_ctc_loss=0.4944 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.84 grad_norm=4.9107 max_feature_frames=1099 train_avg_blank_prob=0.5521 train_argmax_blank_frac=0.5683 train_avg_top_nonblank_prob=0.4176 train_target_tokens_per_frame=0.3813 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=13.1223 train_avg_top_logit=15.1942 train_avg_top2_margin=4.6619 train_avg_blank_nonblank_margin=0.9137 train_avg_entropy=0.2662 train_blank_bias=0.0008 train_blank_weight_norm=0.5812 train_nonblank_weight_norm_mean=0.5919 train_blank_weight_grad_norm=2.0154 train_nonblank_weight_grad_norm_mean=0.0306 train_blank_bias_grad=-0.0272 train_nonblank_bias_grad_mean=0.0001 train_encoder_mean=-0.0795 train_encoder_std=3.1262 train_encoder_token_l2_norm=98.9142 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.51169e-06
|
| 974 |
+
2026-04-15 10:04:02,171 | INFO | rank=0 | train preview ref="Останнє, що запитаю вас, знаю, що вас треба відпускати, бо вас там далі, як мені кажуть, інтерв'ю." hyp_greedy="Останнє що запитаю вас. знаю, що вас треба відпускати, бо вас там далі, як мені кажуть інтерв'ю." hyp_beam="Останнє, що запитаю вас. знаю, що вас треба відпускати, бо вас там далі, як мені кажуть інтерв'ю." avg_output_frames=139.0 avg_target_tokens=53.0 top_tokens=<blank>:0.568, ▁:0.058, ю:0.036, ,:0.029, с:0.022
|
| 975 |
+
2026-04-15 10:04:30,778 | INFO | rank=0 | epoch=2 step=15840/249868 global_step=15960 train_loss=1.3731 train_main_ctc_loss=1.3731 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.51 grad_norm=4.5399 max_feature_frames=480 train_avg_blank_prob=0.8248 train_argmax_blank_frac=0.8667 train_avg_top_nonblank_prob=0.1341 train_target_tokens_per_frame=0.1583 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=13.4667 train_avg_top_logit=13.8667 train_avg_top2_margin=5.3333 train_avg_blank_nonblank_margin=4.5333 train_avg_entropy=0.3542 train_blank_bias=0.0008 train_blank_weight_norm=0.5812 train_nonblank_weight_norm_mean=0.5919 train_blank_weight_grad_norm=0.8966 train_nonblank_weight_grad_norm_mean=0.0413 train_blank_bias_grad=-0.0005 train_nonblank_bias_grad_mean=0.0000 train_encoder_mean=-0.0871 train_encoder_std=2.5258 train_encoder_token_l2_norm=79.9621 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.51703e-06
|
| 976 |
+
2026-04-15 10:04:30,910 | INFO | rank=0 | train preview ref='Оце вікно розбили, віть, його нема. Раз, два. То не я, то все Юрчик.' hyp_greedy='От оце вікно розбили нема. раз два. Т не я. то все рчик..' hyp_beam='От оце вікно розбили нема. раз два. Т не я. то все юрчик..' avg_output_frames=240.0 avg_target_tokens=38.0 top_tokens=<blank>:0.867, .:0.021, ▁:0.021, не:0.008, к:0.008
|
| 977 |
+
2026-04-15 10:04:58,938 | INFO | rank=0 | epoch=2 step=15880/249868 global_step=15970 train_loss=1.2216 train_main_ctc_loss=1.2216 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.63 grad_norm=7.4424 max_feature_frames=1102 train_avg_blank_prob=0.6633 train_argmax_blank_frac=0.6697 train_avg_top_nonblank_prob=0.3197 train_target_tokens_per_frame=0.3194 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.8094 train_avg_top_logit=16.3775 train_avg_top2_margin=5.8076 train_avg_blank_nonblank_margin=2.8312 train_avg_entropy=0.1688 train_blank_bias=0.0008 train_blank_weight_norm=0.5812 train_nonblank_weight_norm_mean=0.5919 train_blank_weight_grad_norm=1.8568 train_nonblank_weight_grad_norm_mean=0.0484 train_blank_bias_grad=0.0008 train_nonblank_bias_grad_mean=-0.0000 train_encoder_mean=-0.0874 train_encoder_std=3.1121 train_encoder_token_l2_norm=98.8844 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.52237e-06
|
| 978 |
+
2026-04-15 10:04:59,402 | INFO | rank=0 | train preview ref='Соціальна працівниця фонду Вікторія Буднарчук розповідає, продуктові набори для своїх підопічних до Великодня збирают...' hyp_greedy='Соціальна працівниця Фонду Вікторія Буднерчук розповідає продуктові набори для своїх підопічнихк до великодня збирают...' hyp_beam='Соціальна працівниця Фонду Вікторія Буднерчук розповідає продуктові набори для своїх підопічнихк до великодня збирают...' avg_output_frames=551.0 avg_target_tokens=176.0 top_tokens=<blank>:0.670, к:0.015, о:0.009, в:0.009, ▁:0.009
|
| 979 |
+
2026-04-15 10:05:28,120 | INFO | rank=0 | epoch=2 step=15920/249868 global_step=15980 train_loss=0.2044 train_main_ctc_loss=0.2044 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.49 grad_norm=4.0958 max_feature_frames=291 train_avg_blank_prob=0.5625 train_argmax_blank_frac=0.5728 train_avg_top_nonblank_prob=0.4003 train_target_tokens_per_frame=0.3786 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=12.7379 train_avg_top_logit=14.9126 train_avg_top2_margin=4.5631 train_avg_blank_nonblank_margin=0.7427 train_avg_entropy=0.2949 train_blank_bias=0.0008 train_blank_weight_norm=0.5811 train_nonblank_weight_norm_mean=0.5919 train_blank_weight_grad_norm=2.0727 train_nonblank_weight_grad_norm_mean=0.0298 train_blank_bias_grad=-0.0352 train_nonblank_bias_grad_mean=0.0001 train_encoder_mean=-0.0623 train_encoder_std=3.0928 train_encoder_token_l2_norm=98.0944 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.5277e-06
|
| 980 |
+
2026-04-15 10:05:28,181 | INFO | rank=0 | train preview ref='ФБР через своїх агентів популяризувало месенджер у злочинному світі.' hyp_greedy='ФБР через своїх агентів популяризувало месенджер у злочинному світі.' hyp_beam='ФБР через своїх агентів популяризувало месенджер у злочинному світі.' avg_output_frames=103.0 avg_target_tokens=39.0 top_tokens=<blank>:0.573, н:0.039, е:0.029, ло:0.029, у:0.019
|
| 981 |
+
2026-04-15 10:05:57,909 | INFO | rank=0 | epoch=2 step=15960/249868 global_step=15990 train_loss=0.3634 train_main_ctc_loss=0.3634 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.38 grad_norm=6.7770 max_feature_frames=268 train_avg_blank_prob=0.5840 train_argmax_blank_frac=0.5821 train_avg_top_nonblank_prob=0.3887 train_target_tokens_per_frame=0.3731 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=14.7463 train_avg_top_logit=16.8358 train_avg_top2_margin=5.5522 train_avg_blank_nonblank_margin=1.7537 train_avg_entropy=0.1940 train_blank_bias=0.0008 train_blank_weight_norm=0.5812 train_nonblank_weight_norm_mean=0.5920 train_blank_weight_grad_norm=2.4700 train_nonblank_weight_grad_norm_mean=0.0536 train_blank_bias_grad=0.0346 train_nonblank_bias_grad_mean=-0.0001 train_encoder_mean=-0.0744 train_encoder_std=3.4031 train_encoder_token_l2_norm=107.5678 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.53304e-06
|
| 982 |
+
2026-04-15 10:05:58,005 | INFO | rank=0 | train preview ref='Відкриття цього центру вакцинації на Таймс Сквер має стати початком повернення Бродвея до життя.' hyp_greedy='Відкриття цього центру вакцинації на тайм сквер має стати початком повернення Бродвея до життя.' hyp_beam='Відкриття цього центру вакцинації на тайм сквер має стати початком повернення Бродвея до життя.' avg_output_frames=134.0 avg_target_tokens=50.0 top_tokens=<blank>:0.582, т:0.052, ▁:0.030, к:0.022, н:0.022
|
| 983 |
+
2026-04-15 10:06:26,635 | INFO | rank=0 | epoch=2 step=16000/249868 global_step=16000 train_loss=1.8129 train_main_ctc_loss=1.8129 train_aed_loss=0.0000 train_liberta_distill_loss=0.0000 train_audio_teacher_loss=0.0000 batch_audio_minutes=0.37 grad_norm=8.7020 max_feature_frames=239 train_avg_blank_prob=0.7203 train_argmax_blank_frac=0.7333 train_avg_top_nonblank_prob=0.2675 train_target_tokens_per_frame=0.3000 train_ctc_impossible_frac=0.0000 train_ctc_tight_frac=0.0000 train_avg_blank_logit=15.2000 train_avg_top_logit=16.6667 train_avg_top2_margin=6.0000 train_avg_blank_nonblank_margin=3.2333 train_avg_entropy=0.1469 train_blank_bias=0.0008 train_blank_weight_norm=0.5812 train_nonblank_weight_norm_mean=0.5920 train_blank_weight_grad_norm=2.3552 train_nonblank_weight_grad_norm_mean=0.0544 train_blank_bias_grad=0.0366 train_nonblank_bias_grad_mean=-0.0001 train_encoder_mean=-0.0807 train_encoder_std=3.2330 train_encoder_token_l2_norm=102.2378 cpu_rss=31.6GiB cpu_peak_rss=37.2GiB cuda_allocated=9.1GiB cuda_reserved=18.1GiB cuda_peak_allocated=13.6GiB cuda_peak_reserved=22.7GiB learning_rate_adamw=8.53837e-06
|
| 984 |
+
2026-04-15 10:06:26,702 | INFO | rank=0 | train preview ref='Та світу до проблеми на кордонах України до тих пір, поки Росія не відведе війська.' hyp_greedy='Та світу до проблеми на кордонах України, допоки Росія не відведе війська.' hyp_beam='Та світу до проблеми на кордонах України, допоки Росія не відведе війс��ка.' avg_output_frames=120.0 avg_target_tokens=36.0 top_tokens=<blank>:0.733, до:0.017, а:0.017, України:0.017, у:0.017
|
| 985 |
+
2026-04-15 10:06:26,705 | INFO | rank=0 | epoch 2 step=16000/249868 global_step=16000 reached validation interval; starting validation
|
| 986 |
+
2026-04-15 10:11:04,497 | INFO | rank=0 | epoch_0002_step_00016000 complete train_loss=0.7841 val_loss=0.4318 val_main_ctc_loss=0.4318 val_aed_loss=0.0000 val_liberta_distill_loss=0.0000 val_audio_teacher_loss=0.0000 val_cer=0.0544 val_wer=0.2710 val_avg_blank_prob=0.7810 val_argmax_blank_frac=0.7883 val_avg_top_nonblank_prob=0.2062 val_target_tokens_per_frame=0.1918 val_ctc_impossible_frac=0.0000 val_ctc_tight_frac=0.0000 val_empty_hyp_frac=0.0003 val_avg_hyp_chars=45.98 val_avg_hyp_words=7.00 val_model_source=raw best_val_wer=0.2558 timing_forward=296.57s timing_teacher=0.00s timing_decode=0.97s timing_gather=1.79s timing_checkpoint_export=124.15s report=artifacts/w2v-bert-test2-full/eval_reports/epoch_0002_step_00016000.json latest=artifacts/w2v-bert-test2-full/checkpoint_step_last.pt best=artifacts/w2v-bert-test2-full/checkpoint_best.pt averaged=artifacts/w2v-bert-test2-full/checkpoint_topk_avg.pt
|
| 987 |
+
2026-04-15 10:11:04,500 | INFO | rank=0 | epoch_0002_step_00016000 timing detail report_write=0.00s checkpoint_build=0.01s latest_export=22.40s best_export=0.00s topk_update=60.58s topk_average=41.16s
|
| 988 |
+
2026-04-15 10:11:04,501 | INFO | rank=0 | exported inference artifacts latest_safe=artifacts/w2v-bert-test2-full/checkpoint_step_last.safetensors best_safe=artifacts/w2v-bert-test2-full/checkpoint_best.safetensors averaged_safe=artifacts/w2v-bert-test2-full/checkpoint_topk_avg.safetensors
|
| 989 |
+
2026-04-15 10:11:04,501 | INFO | rank=0 | validation preview hardest_ref='Її?' hardest_hyp='їхї'
|