Skip to content

DeepSpeech v0.9.3 trained on 1230 hours of Ukrainian
Compare
Choose a tag to compare
@robinhad robinhad released this 15 Mar 16:50
v0.4
1252a9e

This model is trained on Ukrainian Dataset at Academic torrents and Common Voice Ukrainian 6.1.
Total hours in dataset 1230 hours.

Parameters

  • train_cudnn
  • train_batch_size 128
  • dev_batch_size 128
  • test_batch_size 128
  • n_hidden 2048
  • learning_rate 0.0001
  • dropout_rate 0.40
  • alphabet_config_path
  • epochs 20
  • augment pitch[pitch=1~0.1]
  • augment tempo[factor=1~0.1]
  • augment reverb[p=0.2,decay=0.70.15,delay=108]
  • augment volume[p=0.2,dbfs=-10~10]
  • cache_for_epochs 4

Scorer parameters

  • lm_alpha: 0.7200873732640549
  • lm_beta: 1.3010463457623596

Dataset details

dev.csv and test.csv are taken from Common Voice 6.1 dataset.

Test on /home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/test.csv - WER: 0.572430, CER: 0.162626, loss: 25.419409

Best WER:

WER: 0.000000, CER: 0.041667, loss: 8.075609

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_21565025_prep.wav
  • src: "що то значить химерувати"
  • res: "що то значить химерувати "

WER: 0.000000, CER: 0.000000, loss: 6.279419

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_23559978_prep.wav
  • src: "але ж відтоді минуло понад сто років"
  • res: "але ж відтоді минуло понад сто років"

WER: 0.000000, CER: 0.000000, loss: 5.061992

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_23641397_prep.wav
  • src: "звичайні васали орди"
  • res: "звичайні васали орди"

WER: 0.000000, CER: 0.034483, loss: 4.464420

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_21591082_prep.wav
  • src: "він має право на свою позицію"
  • res: "він має право на свою позицію "

WER: 0.000000, CER: 0.000000, loss: 4.318314

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_21251132_prep.wav
  • src: "у лікарні карлос зустрічає миколу"
  • res: "у лікарні карлос зустрічає миколу"

Median WER:

WER: 0.583333, CER: 0.064516, loss: 12.683764

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_20894283_prep.wav
  • src: "якщо інвестує велика корпорація на сторожі її інтересів стоїть посольство відповідної держави"
  • res: "якщо інвестує велика корпорація насторожі вінтересів стоїть по сольство відповідно держави"

WER: 0.583333, CER: 0.054945, loss: 9.324151

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_23668638_prep.wav
  • src: "в результаті кримського удару московія втратила близько мільйона людей убитими й полоненими"
  • res: "вразультаті кримського удару москові я втратила близько мільйона людей у битими і полоненими"

WER: 0.600000, CER: 0.303571, loss: 65.429413

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_21564046_prep.wav
  • src: "це стосується колег з інших фракцій і це стосується всіх"
  • res: "смиться колиг успінчих фракцій і це сисоються всіх"

WER: 0.600000, CER: 0.184211, loss: 63.418709

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_21358836_prep.wav
  • src: "немає теж масового обов’язкового закриття навчальних закладів по всій країні"
  • res: "демаєтеж насовот обиди зково закриття навчальних закодів по всіх країні"

WER: 0.600000, CER: 0.269231, loss: 62.872345

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_22119244_prep.wav
  • src: "тому якщо ви не проти я готовий принести цю програму"
  • res: "тому якщо ви не погодит яготовит манескицю погаваму"

Worst WER:

WER: 1.500000, CER: 0.352941, loss: 16.784153

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_23552766_prep.wav
  • src: "брехня безкінечна"
  • res: "бресня без тінецька"

WER: 1.500000, CER: 0.411765, loss: 15.531440

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_23552768_prep.wav
  • src: "валишевський пише"
  • res: "волишав ської писа"

WER: 1.500000, CER: 0.210526, loss: 13.687809

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_21760605_prep.wav
  • src: "дозвольте розпочати"
  • res: "дозвоть де розупочати"

WER: 1.500000, CER: 0.176471, loss: 6.415349

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_21567113_prep.wav
  • src: "обвал звинувачень"
  • res: "обвало с винувачень"

WER: 1.500000, CER: 0.125000, loss: 5.079028

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_24035660_prep.wav
  • src: "князь усміхнувся"
  • res: "княць у сміхнувся"

With scorer:

Test on /home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/test.csv - WER: 0.306595, CER: 0.122171, loss: 25.419409

Best WER:

WER: 0.000000, CER: 0.000000, loss: 48.744312

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_23549776_prep.wav
  • src: "права і свободи людини є невідчужуваними та непорушними"
  • res: "права і свободи людини є невідчужуваними та непорушними"

WER: 0.000000, CER: 0.000000, loss: 48.257416

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_21567658_prep.wav
  • src: "особисті немайнові права автора не можуть бути передані іншим особам"
  • res: "особисті немайнові права автора не можуть бути передані іншим особам"

WER: 0.000000, CER: 0.000000, loss: 48.053349

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_23573273_prep.wav
  • src: "порядок роботи верховної ради україни встановлюється конституцією україни та регламентом верховної ради україни"
  • res: "порядок роботи верховної ради україни встановлюється конституцією україни та регламентом верховної ради україни"

WER: 0.000000, CER: 0.000000, loss: 45.656788

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_21350839_prep.wav
  • src: "мінометну міну можна вирахувати з вельми високою вірогідністю"
  • res: "мінометну міну можна вирахувати з вельми високою вірогідністю"

WER: 0.000000, CER: 0.000000, loss: 41.763634

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_21808132_prep.wav
  • src: "афіна богиня війни покровителька наук мистецтв ремесел"
  • res: "афіна богиня війни покровителька наук мистецтв ремесел"

Median WER:

WER: 0.250000, CER: 0.025000, loss: 9.598674

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_23558664_prep.wav
  • src: "жоден із татаро монгольських ханів не наближав до себе чужих неперевірених людей"
  • res: "жоден із татар монгольських ханів не наближав до себе чужих не перевірених людей"

WER: 0.250000, CER: 0.083333, loss: 9.149654

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_22815552_prep.wav
  • src: "в боротьбі виростає сила"
  • res: "боротьбі виростає сила"

WER: 0.250000, CER: 0.034483, loss: 8.970282

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_21585719_prep.wav
  • src: "аполлон ідеал чоловічої краси"
  • res: "аполон ідеал чоловічої краси"

WER: 0.250000, CER: 0.166667, loss: 8.075609

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_21565025_prep.wav
  • src: "що то значить химерувати"
  • res: "що то значить генерувати "

WER: 0.250000, CER: 0.072727, loss: 7.971672

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_21566047_prep.wav
  • src: "так це передбачено і договором і законодавством взагалі"
  • res: "то це передбачено договором і законодавством взагалі"

Worst WER:

WER: 1.250000, CER: 0.314286, loss: 29.539497

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_23552112_prep.wav
  • src: "тут виникають закономірні запитання"
  • res: "що ти мене кат закономірне запитання"

WER: 1.333333, CER: 0.380952, loss: 34.263496

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_22343052_prep.wav
  • src: "накрити мокрим рядном"
  • res: "на критому креми рядно"

WER: 1.333333, CER: 0.250000, loss: 19.446005

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_23694642_prep.wav
  • src: "єутихій ніяково стенувся"
  • res: "тихі ніякого стану вся"

WER: 1.500000, CER: 0.264706, loss: 15.649901

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_22071816_prep.wav
  • src: "вечероньки недоїла нічки недоспала"
  • res: "черевки надоїла нічка не до спала"

WER: 2.500000, CER: 0.600000, loss: 31.310688

  • wav: file:///home/ubuntu/Data/cv-corpus-6.1-2020-12-11/uk/clips/common_voice_uk_20982337_prep.wav
  • src: "пане володимире"
  • res: "а не було у мера"
Assets 7
Loading