File size: 33,835 Bytes
41ad5b4 |
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 166 167 168 169 170 171 172 173 174 175 176 177 178 179 180 181 182 183 184 185 186 187 188 189 190 191 192 193 194 195 196 197 198 199 200 201 202 203 204 205 206 207 208 209 210 211 212 |
# Models
* [openai/whisper-large-v2](https://huggingface.co/openai/whisper-large-v2)
* [openai/whisper-large-v3](https://huggingface.co/openai/whisper-large-v3)
* [openai/whisper-large-v3-turbo](https://huggingface.co/openai/whisper-large-v3-turbo)
* [kotoba-tech/kotoba-whisper-v1.0](https://huggingface.co/kotoba-tech/kotoba-whisper-v1.0)
* [kotoba-tech/kotoba-whisper-bilingual-v1.0](https://huggingface.co/kotoba-tech/kotoba-whisper-bilingual-v1.0)
* [kotoba-tech/kotoba-whisper-v2.0](https://huggingface.co/kotoba-tech/kotoba-whisper-v2.0)
* [litagin/anime-whisper](https://huggingface.co/litagin/anime-whisper)
* [efwkjn/whisper-ja-anime-v0.1](https://huggingface.co/efwkjn/whisper-ja-anime-v0.1)
* [rinna/nue-asr](https://huggingface.co/rinna/nue-asr)
* [reazon-research/reazonspeech-k2-v2](https://huggingface.co/reazon-research/reazonspeech-k2-v2)
* [reazon-research/reazonspeech-espnet-v2](https://huggingface.co/reazon-research/reazonspeech-espnet-v2)
* [reazon-research/reazonspeech-nemo-v2](https://huggingface.co/reazon-research/reazonspeech-nemo-v2)
* [nvidia/parakeet-tdt-0.6b-v2](https://huggingface.co/nvidia/parakeet-tdt-0.6b-v2)
b1: beam_size=1, b5: beam_size=5, n5: no_repeat_ngram_size=5, nt: <|notimestamps|>
| |air | | | | |clannad| | | | |himanatsu| | | | |kanon | | | | |sakuuta| | | |
|--------------|------:|------:|------:|------:|---|------:|------:|------:|------:|---|------:|------:|------:|------:|---|------:|------:|------:|------:|---|------:|------:|------:|------:|
| | cer| sr| ir| dr| | cer| sr| ir| dr| | cer| sr| ir| dr| | cer| sr| ir| dr| | cer| sr| ir| dr|
|turbo_b1 | 25.9| 10.1| 11.1| 4.8| | 21.1| 7.0| 9.7| 4.5| | 60.7| 13.5| 41.3| 5.9| | 22.3| 7.3| 11.2| 3.8| | 21.2| 7.7| 11.3| 2.2|
|turbo_b5 | 21.0| 10.1| 6.3| 4.6| | 17.8| 6.9| 6.6| 4.3| | 48.3| 14.4| 28.6| 5.4| | 19.2| 7.4| 8.2| 3.6| | 18.7| 7.7| 8.9| 2.1|
|turbo_b1_n5 | 17.1| 10.0| 2.2| 4.9| | 12.7| 6.8| 1.3| 4.5| | 22.3| 11.7| 3.9| 6.7| | 13.2| 7.2| 2.2| 3.8| | 12.0| 7.3| 2.4| 2.3|
|turbo_b5_n5 | 17.5| 10.1| 2.7| 4.7| | 12.6| 6.8| 1.4| 4.4| | 23.7| 12.2| 5.1| 6.4| | 13.6| 7.4| 2.6| 3.6| | 12.2| 7.3| 2.5| 2.3|
|turbo_b1_nt | 25.8| 10.1| 10.9| 4.9| | 22.0| 6.9| 10.6| 4.5| | 61.7| 13.1| 42.0| 6.5| | 23.1| 7.3| 11.9| 3.8| | 20.4| 7.5| 10.4| 2.4|
|turbo_b5_nt | 17.1| 9.9| 2.2| 5.0| | 12.9| 6.7| 1.6| 4.6| | 25.9| 11.7| 6.4| 7.9| | 13.5| 7.4| 2.0| 4.1| | 12.5| 7.2| 2.7| 2.6|
|turbo_b1_n5_nt| 17.4| 10.0| 2.4| 5.0| | 12.8| 6.8| 1.3| 4.6| | 22.3| 10.9| 3.5| 7.9| | 13.3| 7.2| 2.2| 3.9| | 12.0| 7.2| 2.3| 2.5|
|turbo_b5_n5_nt| 17.0| 9.9| 2.0| 5.0| | 12.5| 6.6| 1.2| 4.7| | 22.0| 10.7| 3.0| 8.2| | 13.5| 7.4| 2.0| 4.1| | 11.9| 7.0| 2.1| 2.7|
||
|anime_b1 | 16.0| 8.4| 2.3| 5.3| | 11.9| 5.8| 1.6| 4.4| | 20.3| 10.5| 5.2| 4.6| | 12.8| 7.1| 1.8| 3.8| | 10.9| 6.0| 2.9| 2.0|
|anime_b5 | 14.6| 8.2| 1.4| 5.0| | 11.2| 5.8| 1.1| 4.3| | 18.3| 10.4| 3.4| 4.5| | 12.6| 7.3| 1.7| 3.5| | 10.0| 5.9| 2.1| 2.0|
|anime_b1_n5 | 15.1| 8.4| 1.3| 5.4| | 11.2| 5.8| 1.0| 4.5| | 18.4| 10.4| 3.3| 4.7| | 12.7| 7.1| 1.7| 3.9| | 10.1| 6.0| 2.0| 2.1|
|anime_b5_n5 | 14.5| 8.2| 1.3| 5.0| | 11.1| 5.8| 1.0| 4.3| | 18.1| 10.3| 3.2| 4.7| | 12.5| 7.3| 1.7| 3.5| | 10.0| 5.9| 2.0| 2.1|
|anime_b1_nt | 14.6| 7.7| 2.0| 4.9| | 10.9| 5.4| 1.5| 4.1| | 18.7| 10.2| 4.4| 4.1| | 11.4| 6.4| 1.8| 3.3| | 10.1| 5.7| 2.5| 1.9|
|anime_b5_nt | 13.6| 7.6| 1.2| 4.7| | 10.3| 5.4| 0.9| 4.0| | 17.5| 10.1| 3.2| 4.2| | 11.4| 6.6| 1.6| 3.2| | 9.6| 5.7| 2.0| 1.9|
|anime_b1_n5_nt| 13.9| 7.7| 1.3| 4.9| | 10.4| 5.4| 0.9| 4.1| | 17.7| 10.2| 3.3| 4.2| | 11.3| 6.4| 1.7| 3.3| | 9.7| 5.8| 2.0| 1.9|
|anime_b5_n5_nt| 13.7| 7.7| 1.2| 4.8| | 10.3| 5.4| 0.9| 4.0| | 17.4| 10.1| 3.1| 4.3| | 11.4| 6.6| 1.6| 3.2| | 9.6| 5.7| 1.9| 1.9|
||
|v0.1_b1 | 15.7| 9.3| 1.6| 4.9| | 11.6| 6.3| 1.0| 4.2| | 20.1| 11.6| 4.5| 3.9| | 11.8| 6.6| 1.8| 3.4| | 10.5| 6.3| 2.1| 2.0|
|v0.1_b5 | 15.4| 9.1| 1.6| 4.7| | 11.5| 6.3| 1.1| 4.1| | 19.8| 11.6| 4.3| 3.9| | 11.6| 6.5| 1.8| 3.3| | 10.7| 6.4| 2.2| 2.0|
|v0.1_b1_n5 | 15.7| 9.3| 1.6| 4.9| | 11.6| 6.3| 1.0| 4.2| | 19.7| 11.6| 4.0| 4.1| | 11.8| 6.6| 1.8| 3.4| | 10.5| 6.4| 2.1| 2.1|
|v0.1_b5_n5 | 15.4| 9.1| 1.6| 4.7| | 11.5| 6.3| 1.1| 4.1| | 19.6| 11.6| 4.0| 4.0| | 11.6| 6.5| 1.8| 3.3| | 10.7| 6.4| 2.2| 2.0|
|v0.1_b1_nt | 15.7| 9.2| 1.5| 5.0| | 11.5| 6.3| 1.0| 4.2| | 20.0| 11.6| 4.3| 4.0| | 11.9| 6.6| 1.8| 3.5| | 10.5| 6.3| 2.1| 2.1|
|v0.1_b5_nt | 15.4| 9.1| 1.6| 4.8| | 11.4| 6.2| 1.0| 4.2| | 19.4| 11.5| 3.8| 4.1| | 11.8| 6.6| 1.8| 3.4| | 10.5| 6.3| 2.0| 2.1|
|v0.1_b1_n5_nt | 15.7| 9.2| 1.5| 5.0| | 11.5| 6.3| 1.0| 4.2| | 19.6| 11.6| 3.8| 4.2| | 11.9| 6.6| 1.8| 3.5| | 10.5| 6.3| 2.1| 2.1|
|v0.1_b5_n5_nt | 15.4| 9.1| 1.6| 4.8| | 11.4| 6.2| 1.0| 4.2| | 19.3| 11.5| 3.6| 4.2| | 11.8| 6.6| 1.8| 3.4| | 10.5| 6.3| 2.0| 2.1|
||
|v0.2_b1 | 14.1| 8.1| 1.3| 4.6| | 10.9| 5.9| 1.0| 4.0| | 18.0| 10.6| 3.2| 4.2| | 12.3| 6.7| 1.6| 4.0| | 9.6| 5.7| 2.0| 1.9|
|v0.2_b5 | 14.1| 8.2| 1.4| 4.6| | 10.9| 5.9| 1.1| 4.0| | 18.1| 10.6| 3.4| 4.1| | 12.4| 6.9| 1.7| 3.9| | 9.6| 5.7| 2.0| 1.9|
|v0.2_b1_n5 | 14.1| 8.1| 1.3| 4.6| | 10.9| 5.9| 1.0| 4.0| | 18.0| 10.5| 3.2| 4.2| | 12.3| 6.7| 1.6| 4.0| | 9.6| 5.7| 2.0| 1.9|
|v0.2_b5_n5 | 14.1| 8.2| 1.4| 4.6| | 10.9| 5.9| 1.1| 4.0| | 18.0| 10.5| 3.3| 4.1| | 12.4| 6.9| 1.7| 3.9| | 9.6| 5.7| 2.0| 1.9|
|v0.2_b1_nt | 14.1| 8.1| 1.3| 4.7| | 10.9| 5.9| 1.0| 4.0| | 18.0| 10.5| 3.2| 4.2| | 12.3| 6.7| 1.6| 4.0| | 9.6| 5.7| 2.0| 1.9|
|v0.2_b5_nt | 14.2| 8.1| 1.4| 4.7| | 11.0| 5.9| 1.0| 4.0| | 18.0| 10.6| 3.3| 4.1| | 12.3| 6.8| 1.6| 3.9| | 9.5| 5.7| 2.0| 1.9|
|v0.2_b1_n5_nt | 14.1| 8.1| 1.3| 4.7| | 10.9| 5.9| 1.0| 4.0| | 17.9| 10.5| 3.2| 4.2| | 12.3| 6.7| 1.6| 4.0| | 9.6| 5.7| 2.0| 1.9|
|v0.2_b5_n5_nt | 14.2| 8.1| 1.4| 4.7| | 11.0| 5.9| 1.0| 4.0| | 18.0| 10.5| 3.3| 4.1| | 12.3| 6.8| 1.6| 3.9| | 9.5| 5.7| 2.0| 1.9|
tedx273/jsut-book language=ja, beam_size=1, temperature=0, condition_on_previous_text=False/True(book-prompt)
| |tedx-batch| | | | | |tedx-seq| | | | | |book-batch| | | | |book-seq| | | | |book-prompt| | | |
|--------------|------:|------:|------:|------:|------:|---|------:|------:|------:|------:|------:|---|------:|------:|------:|------:|---|------:|------:|------:|------:|---|------:|------:|------:|------:|
| | cer| sr| ir| dr| time| | cer| sr| ir| dr| time| | cer| sr| ir| dr| | cer| sr| ir| dr| | cer| sr| ir| dr|
|large-v2 | 9.9| 4.2| 2.8| 2.8| 2.25| | 12.9| 4.7| 5.7| 2.5| 4.29| | 17.9| 11.1| 1.1| 5.7| | 18.6| 11.3| 1.7| 5.6| | 18.3| 10.8| 2.8| 4.7|
|large-v3 | 9.3| 3.9| 2.7| 2.6| 2.24| | 9.9| 4.1| 3.3| 2.4| 4.16| | 18.8| 11.7| 1.3| 5.8| | 19.4| 12.0| 1.0| 6.4| | 57.7| 26.3| 20.9| 10.5|
|turbo | 9.4| 4.2| 2.7| 2.5| 1.10| | 10.7| 4.6| 3.5| 2.6| 1.33| | 19.5| 12.0| 0.7| 6.8| | 19.4| 12.0| 0.8| 6.6| | 19.6| 11.9| 0.9| 6.7|
|kotoba-v1 | 43.3| 13.5| 13.6| 16.2| 1.05| | 42.0| 16.3| 6.0| 19.7| 1.21| | 55.7| 21.7| 4.6| 29.5| | 56.1| 25.1| 4.6| 26.4| | 95.3| 3.8| 0.0| 91.5|
|kotoba-bi | 33.7| 12.7| 5.5| 15.5| 1.02| | 46.6| 13.8| 27.4| 5.4| 1.73| | 45.1| 20.5| 4.6| 20.0| | 53.5| 22.7| 19.1| 11.7| | 97.3| 1.3| 0.0| 96.0|
|kotoba-v2 | 30.8| 11.8| 4.6| 14.4| 1.01| | 38.3| 13.5| 3.9| 21.0| 1.08| | 43.1| 20.1| 4.9| 18.0| | 49.9| 20.2| 2.8| 26.9| | 97.4| 0.3| 0.0| 97.1|
|anime | 41.0| 12.5| 7.7| 20.8| 1.04| | 59.5| 23.1| 16.9| 19.5| 1.06| | 49.0| 16.7| 4.3| 27.9| | 62.8| 33.2| 6.3| 23.3| | 95.4| 26.0| 0.5| 68.9|
|v0.1 | 10.1| 3.9| 2.5| 3.6| 1.03| | 11.7| 4.3| 4.0| 3.4| 1.06| | 21.3| 12.7| 0.9| 7.7| | 21.9| 12.8| 1.5| 7.6| | 21.8| 12.8| 1.3| 7.7|
|v0.2 | 11.5| 4.8| 3.4| 3.3| 1.00| | 23.8| 5.2| 6.0| 12.6| 1.00| | 21.3| 12.4| 0.7| 8.2| | 26.9| 11.6| 1.1| 14.2| | 25.8| 11.8| 1.2| 12.8|
|cv20 dev/test | cer| sr| ir| dr| | cer| sr| ir| dr| time|
|------------------|------:|------:|-------|-------|---|------:|------:|------:|------:|------:|
|large_v2_b1 | 24.7| 11.2| 3.7| 9.8| | 29.5| 11.7| 4.3| 13.6| 2.33|
|large_v2_b5 | 23.8| 10.9| 3.4| 9.4| | 28.4| 11.5| 3.8| 13.1| |
|large_v2_b1_n5 | 23.2| 11.2| 2.2| 9.8| | 27.7| 11.4| 2.4| 13.9| |
|large_v2_b5_n5 | 22.6| 10.9| 2.3| 9.5| | 27.3| 11.3| 2.7| 13.4| |
||
|large_v3_b1 | 21.4| 9.6| 2.0| 9.7| | 27.2| 10.1| 3.4| 13.6| 2.27|
|large_v3_b5 | 20.8| 9.4| 1.8| 9.6| | 25.4| 10.0| 2.0| 13.4| |
|large_v3_b1_n5 | 21.2| 9.7| 1.7| 9.8| | 25.7| 10.0| 1.8| 13.8| |
|large_v3_b5_n5 | 20.8| 9.4| 1.7| 9.6| | 25.4| 9.9| 1.9| 13.5| |
||
|turbo_b1 | 24.1| 10.9| 3.6| 9.6| | 29.3| 11.4| 4.2| 13.6| 1.15|
|turbo_b5 | 23.1| 10.9| 2.6| 9.6| | 27.8| 11.3| 3.0| 13.4| |
|turbo_b1_n5 | 23.0| 10.9| 2.3| 9.7| | 27.6| 11.3| 2.5| 13.9| |
|turbo_b5_n5 | 22.9| 10.9| 2.4| 9.6| | 27.4| 11.2| 2.6| 13.6| |
||
|kotoba-v1_b1 | 23.0| 10.6| 1.7| 10.7| | 26.9| 10.0| 1.5| 15.4| 1.07|
|kotoba-v1_b5 | 22.7| 10.5| 1.7| 10.5| | 26.7| 9.9| 1.5| 15.2| |
|kotoba-v1_b1_n5 | 23.1| 10.7| 1.7| 10.7| | 27.0| 10.0| 1.5| 15.4| |
|kotoba-v1_b5_n5 | 22.8| 10.5| 1.7| 10.6| | 26.7| 9.9| 1.5| 15.3| |
||
|kotoba-bi_b1 | 23.6| 11.2| 1.9| 10.4| | 27.5| 10.8| 1.8| 15.0| 1.07|
|kotoba-bi_b5 | 23.1| 11.0| 1.8| 10.3| | 27.2| 10.7| 1.8| 14.8| |
|kotoba-bi_b1_n5 | 23.6| 11.3| 1.9| 10.5| | 27.5| 10.8| 1.8| 15.0| |
|kotoba-bi_b5_n5 | 23.2| 11.1| 1.9| 10.3| | 27.3| 10.7| 1.8| 14.8| |
||
|kotoba-v2_b1 | 23.0| 10.5| 1.7| 10.8| | 26.9| 9.9| 1.5| 15.5| 1.08|
|kotoba-v2_b5 | 22.6| 10.3| 1.6| 10.6| | 26.6| 9.8| 1.5| 15.3| |
|kotoba-v2_b1_n5 | 23.1| 10.6| 1.7| 10.8| | 27.0| 9.9| 1.5| 15.5| |
|kotoba-v2_b5_n5 | 22.7| 10.4| 1.6| 10.7| | 26.7| 9.9| 1.5| 15.3| |
||
|anime_b1 | 25.4| 12.5| 2.5| 10.5| | 29.0| 11.2| 2.1| 15.7| 1.03|
|anime_b5 | 24.9| 12.4| 2.3| 10.3| | 28.6| 11.1| 2.1| 15.4| |
|anime_b1_n5 | 25.4| 12.5| 2.3| 10.6| | 28.9| 11.2| 2.0| 15.7| |
|anime_b5_n5 | 25.0| 12.4| 2.3| 10.3| | 28.6| 11.2| 2.1| 15.4| |
||
|v0.1_b1 | 23.5*| 11.1*| 2.4*| 10.0*| | 27.6*| 10.7*| 2.2*| 14.7*| 1.08|
|v0.1_b5 | 23.2*| 11.0*| 2.3*| 9.9*| | 27.5*| 10.6*| 2.2*| 14.6*| |
|v0.1_b1_n5 | 23.5*| 11.2*| 2.3*| 10.0*| | 27.7*| 10.7*| 2.2*| 14.8*| |
|v0.1_b5_n5 | 23.2*| 11.0*| 2.3*| 9.9*| | 27.5*| 10.6*| 2.2*| 14.7*| |
||
|v0.2_b1 | 19.4| 8.0| 2.1| 9.3| | 26.4| 8.7| 4.3| 13.4| 1.00|
|v0.2_b5 | 19.2| 7.8| 2.1| 9.2| | 26.6| 8.6| 4.7| 13.3| |
|v0.2_b1_n5 | 18.9| 8.0| 1.6| 9.3| | 23.8| 8.3| 1.7| 13.8| |
|v0.2_b5_n5 | 18.6| 7.8| 1.5| 9.2| | 24.4| 8.4| 2.5| 13.5| |
cv splits regenerated every version. cv8-filtered fixes leakage wrt cv20 2178/4483
reazon folder fff, possible contamination in some models
| |cv8 | | | | |cv8-filtered| | | | |jsut-basic| | | | |reazon | | | | |bluearchive| | | | |nekopara| | | |
|------------------|------:|------:|------:|------:|---|------:|------:|------:|------:|---|------:|------:|------:|------:|---|------:|------:|------:|------:|---|------:|------:|------:|------:|---|------:|------:|------:|------:|
| | cer| sr| ir| dr| | cer| sr| ir| dr| | cer| sr| ir| dr| | cer| sr| ir| dr| | cer| sr| ir| dr| | cer| sr| ir| dr|
|nue-asr_b1 | 9.6| 6.3| 1.5| 1.8| | 10.8| 7.2| 1.7| 1.9| | 8.9| 6.0| 1.9| 1.0| | 8.5| 2.7| 2.6| 3.2| | 24.7| 5.3| 1.4| 18.1| | 36.0| 13.8| 1.9| 20.3|
|nue-asr_b5 | 9.2| 6.1| 1.4| 1.7| | 10.3| 6.8| 1.7| 1.8| | 8.7| 5.8| 1.9| 1.0| | 8.3| 2.5| 2.6| 3.2| | 23.9| 5.3| 1.6| 17.1| | 35.3| 13.9| 2.0| 19.4|
|reazon-k2-v2_b1 | 7.6| 4.8| 1.0| 1.9| | 8.3| 5.1| 1.1| 2.1| | 6.9| 4.7| 1.3| 0.8| | 10.9| 3.3| 5.5| 2.1| | 10.7| 4.1| 1.2| 5.4| | 26.3| 10.8| 1.2| 14.3|
|reazon-k2-v2_b5 | 7.4| 4.7| 1.1| 1.6| | 8.1| 5.1| 1.2| 1.9| | 6.9| 4.8| 1.4| 0.8| | 10.1| 3.2| 5.2| 1.8| | 10.9| 4.1| 1.3| 5.5| | 26.2| 10.9| 1.3| 13.9|
|reazon-espnet-v2 | 8.6| 5.8| 1.3| 1.4| | 9.3| 6.3| 1.5| 1.5| | 7.0| 5.0| 1.3| 0.7| | 10.6| 2.0| 7.0| 1.6| | 9.1| 4.5| 1.4| 3.1| | 26.3| 12.5| 1.5| 12.4|
|reazon-nemo-v2 | 9.2| 6.1| 1.5| 1.6| | 10.4| 6.9| 1.7| 1.8| | 8.5| 5.3| 1.8| 1.4| | 4.6| 1.4| 1.8| 1.4| | 17.8| 5.8| 2.2| 9.8| | 34.2| 12.5| 2.6| 19.1|
|parakeet-ctc | 7.6| 4.8| 1.3| 1.4| | 8.1| 5.2| 1.4| 1.5| | 6.7| 4.4| 1.4| 1.0| | 9.7| 1.6| 7.0| 1.1| | 9.7| 5.3| 2.2| 2.3| | 26.3| 12.4| 2.5| 11.3|
|parakeet-tdt | 7.5| 4.9| 1.3| 1.4| | 8.0| 5.2| 1.4| 1.4| | 6.6| 4.4| 1.4| 0.8| | 10.2| 1.6| 7.6| 1.0| | 9.6| 5.4| 2.2| 2.1| | 26.0| 13.0| 2.6| 10.5|
||
|large-v2_b1 | 9.8| 6.7| 1.3| 1.7| | 10.6| 7.3| 1.5| 1.9| | 8.2| 6.1| 1.1| 1.0| | 31.0| 7.7| 18.7| 4.6| | 17.1| 4.6| 11.0| 1.5| | 102.6| 16.7| 78.7| 7.1|
|large-v2_b5 | 9.5| 6.5| 1.4| 1.6| | 10.2| 6.9| 1.5| 1.7| | 8.0| 5.8| 1.2| 0.9| | 27.8| 7.6| 16.7| 3.5| | 16.9| 4.9| 10.4| 1.5| | 99.3| 17.5| 75.4| 6.4|
|large-v2_b1_n5 | 9.8| 6.8| 1.3| 1.8| | 10.7| 7.3| 1.5| 1.9| | 8.3| 6.1| 1.1| 1.0| | 26.0| 7.7| 13.7| 4.6| | 7.7| 4.2| 1.9| 1.5| | 26.2| 14.8| 3.2| 8.1|
|large-v2_b5_n5 | 9.6| 6.6| 1.4| 1.6| | 10.2| 7.0| 1.5| 1.8| | 8.0| 5.9| 1.2| 0.9| | 24.6| 7.3| 13.8| 3.6| | 8.1| 4.5| 2.1| 1.6| | 27.9| 15.6| 5.1| 7.2|
|large-v2_b1_nt | 9.7| 6.7| 1.2| 1.7| | 10.5| 7.2| 1.4| 1.9| | 8.2| 6.1| 1.1| 1.0| | 26.0| 7.7| 12.6| 5.7| | 17.0| 4.6| 10.8| 1.7| | 102.1| 16.2| 78.2| 7.7|
|large-v2_b5_nt | 9.4| 6.5| 1.2| 1.7| | 10.0| 6.9| 1.4| 1.8| | 8.0| 5.8| 1.2| 1.0| | 21.3| 7.1| 9.9| 4.3| | 9.0| 4.4| 2.6| 2.0| | 36.6| 14.8| 12.7| 9.0|
|large-v2_b1_n5_nt | 9.7| 6.7| 1.2| 1.7| | 10.5| 7.3| 1.4| 1.9| | 8.2| 6.1| 1.1| 1.0| | 23.6| 7.7| 10.2| 5.7| | 7.6| 4.2| 1.7| 1.7| | 26.0| 14.3| 2.8| 8.8|
|large-v2_b5_n5_nt | 9.4| 6.5| 1.2| 1.7| | 10.1| 6.9| 1.4| 1.8| | 8.0| 5.9| 1.2| 1.0| | 21.2| 7.1| 9.8| 4.3| | 7.8| 4.2| 1.5| 2.0| | 25.9| 14.0| 2.4| 9.5|
||
|large-v3_b1 | 8.6| 5.9| 1.1| 1.6| | 9.3| 6.4| 1.2| 1.7| | 7.2| 5.2| 1.0| 0.9| | 15.8| 4.8| 8.3| 2.7| | 12.2| 4.2| 6.5| 1.5| | 68.9| 14.8| 45.8| 8.4|
|large-v3_b5 | 8.3| 5.7| 1.0| 1.6| | 9.0| 6.2| 1.1| 1.7| | 7.2| 5.2| 1.1| 0.9| | 14.1| 4.5| 6.8| 2.8| | 10.8| 4.2| 5.1| 1.5| | 62.3| 15.4| 38.8| 8.2|
|large-v3_b1_n5 | 8.7| 5.9| 1.1| 1.7| | 9.4| 6.4| 1.2| 1.8| | 7.3| 5.3| 1.0| 0.9| | 14.6| 4.8| 7.0| 2.8| | 7.0| 3.9| 1.6| 1.6| | 25.1| 13.7| 2.3| 9.2|
|large-v3_b5_n5 | 8.4| 5.8| 1.0| 1.6| | 9.0| 6.2| 1.1| 1.7| | 7.2| 5.3| 1.1| 0.9| | 13.8| 4.6| 6.4| 2.9| | 7.2| 4.1| 1.7| 1.5| | 25.7| 14.1| 2.5| 9.1|
|large-v3_b1_nt | 8.5| 5.9| 1.0| 1.6| | 9.2| 6.4| 1.1| 1.7| | 7.2| 5.3| 1.0| 0.9| | 15.0| 4.7| 7.5| 2.8| | 11.6| 4.0| 5.9| 1.7| | 71.0| 14.4| 47.7| 8.9|
|large-v3_b5_nt | 8.3| 5.7| 1.0| 1.6| | 8.9| 6.1| 1.0| 1.7| | 7.1| 5.2| 1.0| 0.9| | 13.9| 4.6| 6.3| 3.0| | 7.0| 3.8| 1.3| 1.9| | 28.8| 13.5| 5.1| 10.1|
|large-v3_b1_n5_nt | 8.6| 5.9| 1.1| 1.7| | 9.3| 6.4| 1.1| 1.8| | 7.3| 5.3| 1.1| 0.9| | 14.6| 4.8| 6.9| 2.9| | 6.9| 3.8| 1.5| 1.7| | 25.1| 13.3| 2.1| 9.8|
|large-v3_b5_n5_nt | 8.3| 5.7| 1.0| 1.6| | 8.9| 6.1| 1.1| 1.7| | 7.1| 5.2| 1.0| 0.9| | 13.9| 4.7| 6.2| 3.0| | 6.9| 3.8| 1.2| 2.0| | 25.3| 13.1| 1.7| 10.5|
||
|turbo_b1 | 9.5| 6.3| 1.6| 1.6| | 11.0| 7.0| 2.3| 1.7| | 7.3| 5.4| 1.0| 0.9| | 11.5| 4.1| 4.8| 2.6| | 12.4| 4.1| 6.8| 1.5| | 70.7| 15.8| 46.6| 8.3|
|turbo_b5 | 9.2| 6.3| 1.3| 1.6| | 10.3| 7.0| 1.7| 1.7| | 7.3| 5.4| 1.0| 0.9| | 10.3| 3.9| 3.9| 2.6| | 10.5| 4.1| 4.7| 1.6| | 62.2| 16.4| 38.1| 7.7|
|turbo_b1_n5 | 9.2| 6.4| 1.3| 1.6| | 10.3| 7.0| 1.5| 1.7| | 7.4| 5.5| 1.0| 0.9| | 11.1| 4.2| 4.3| 2.6| | 7.1| 3.9| 1.6| 1.6| | 25.9| 14.3| 2.4| 9.1|
|turbo_b5_n5 | 9.3| 6.3| 1.3| 1.6| | 10.4| 7.0| 1.6| 1.7| | 7.4| 5.4| 1.0| 0.9| | 10.4| 3.9| 3.9| 2.6| | 7.4| 4.0| 1.7| 1.7| | 26.4| 14.9| 2.9| 8.6|
|turbo_b1_nt | 9.4| 6.4| 1.5| 1.6| | 10.8| 7.1| 2.0| 1.7| | 7.3| 5.4| 1.0| 0.9| | 11.5| 4.0| 4.9| 2.6| | 13.1| 4.0| 7.4| 1.7| | 68.4| 15.2| 44.2| 9.0|
|turbo_b5_nt | 9.1| 6.2| 1.2| 1.6| | 10.1| 6.9| 1.5| 1.7| | 7.3| 5.4| 1.0| 0.9| | 10.2| 3.8| 3.7| 2.7| | 7.6| 3.8| 1.8| 2.0| | 29.0| 13.8| 4.8| 10.4|
|turbo_b1_n5_nt | 9.3| 6.4| 1.3| 1.6| | 10.4| 7.1| 1.6| 1.7| | 7.4| 5.4| 1.0| 0.9| | 10.7| 4.1| 4.0| 2.6| | 7.1| 3.8| 1.5| 1.8| | 25.9| 13.8| 2.2| 9.9|
|turbo_b5_n5_nt | 9.1| 6.2| 1.3| 1.6| | 10.2| 6.9| 1.6| 1.7| | 7.3| 5.4| 1.0| 1.0| | 10.2| 3.8| 3.6| 2.7| | 7.2| 3.8| 1.3| 2.0| | 25.9| 13.4| 1.8| 10.7|
||
|kotoba-v1_b1 | 9.5| 6.6| 1.1| 1.8| | 10.4| 7.2| 1.3| 1.9| | 8.5| 6.3| 1.2| 1.1| | 12.7| 4.9| 4.0| 3.8| | 8.5| 4.3| 1.2| 3.0| | 27.6| 12.6| 1.4| 13.6|
|kotoba-v1_b5 | 9.4| 6.5| 1.1| 1.8| | 10.2| 7.1| 1.2| 1.9| | 8.4| 6.2| 1.2| 1.0| | 12.3| 4.7| 3.9| 3.8| | 8.4| 4.2| 1.2| 3.1| | 27.7| 12.8| 1.4| 13.5|
|kotoba-v1_b1_n5 | 9.6| 6.6| 1.1| 1.8| | 10.4| 7.2| 1.3| 2.0| | 8.6| 6.3| 1.2| 1.1| | 12.7| 4.9| 4.0| 3.9| | 8.6| 4.3| 1.2| 3.0| | 27.7| 12.6| 1.4| 13.7|
|kotoba-v1_b5_n5 | 9.5| 6.6| 1.1| 1.8| | 10.3| 7.1| 1.2| 1.9| | 8.5| 6.3| 1.2| 1.0| | 12.4| 4.7| 3.9| 3.8| | 8.5| 4.2| 1.2| 3.1| | 27.7| 12.8| 1.4| 13.6|
|kotoba-v1_b1_nt | 9.4| 6.6| 1.1| 1.8| | 10.3| 7.2| 1.3| 1.9| | 8.5| 6.2| 1.2| 1.1| | 12.5| 4.9| 3.8| 3.8| | 8.9| 4.2| 1.3| 3.4| | 27.8| 12.1| 1.3| 14.4|
|kotoba-v1_b5_nt | 9.3| 6.5| 1.0| 1.8| | 10.0| 7.0| 1.2| 1.9| | 8.4| 6.2| 1.2| 1.0| | 12.1| 4.8| 3.6| 3.6| | 8.7| 4.2| 1.2| 3.3| | 27.8| 12.3| 1.3| 14.2|
|kotoba-v1_b1_n5_nt| 9.5| 6.6| 1.1| 1.8| | 10.3| 7.2| 1.3| 1.9| | 8.6| 6.3| 1.2| 1.1| | 12.4| 5.0| 3.6| 3.8| | 9.0| 4.3| 1.2| 3.5| | 27.9| 12.1| 1.3| 14.5|
|kotoba-v1_b5_n5_nt| 9.4| 6.5| 1.0| 1.8| | 10.1| 7.0| 1.2| 1.9| | 8.5| 6.3| 1.2| 1.1| | 12.1| 4.8| 3.6| 3.7| | 8.8| 4.2| 1.2| 3.4| | 27.8| 12.2| 1.3| 14.3|
||
|kotoba-bi_b1 | 9.9| 6.9| 1.1| 1.8| | 10.8| 7.6| 1.3| 1.9| | 9.3| 6.9| 1.3| 1.1| | 17.5| 5.6| 9.0| 2.9| | 8.9| 4.8| 1.7| 2.5| | 27.9| 14.7| 1.8| 11.5|
|kotoba-bi_b5 | 9.7| 6.8| 1.1| 1.8| | 10.5| 7.4| 1.3| 1.9| | 9.2| 6.9| 1.3| 1.0| | 17.1| 5.4| 8.8| 2.9| | 8.9| 4.7| 1.7| 2.5| | 27.9| 14.8| 1.7| 11.4|
|kotoba-bi_b1_n5 | 10.0| 6.9| 1.2| 1.8| | 10.9| 7.6| 1.3| 2.0| | 9.4| 7.0| 1.3| 1.1| | 17.6| 5.7| 9.0| 3.0| | 9.0| 4.8| 1.7| 2.5| | 28.0| 14.6| 1.8| 11.6|
|kotoba-bi_b5_n5 | 9.8| 6.8| 1.2| 1.8| | 10.6| 7.4| 1.3| 1.9| | 9.3| 6.9| 1.3| 1.1| | 17.2| 5.5| 8.8| 2.9| | 8.8| 4.7| 1.6| 2.5| | 27.9| 14.7| 1.7| 11.4|
|kotoba-bi_b1_nt | 9.9| 6.9| 1.2| 1.8| | 10.8| 7.5| 1.3| 1.9| | 9.2| 6.9| 1.3| 1.1| | 17.0| 5.6| 8.5| 2.9| | 9.1| 4.6| 1.6| 2.9| | 28.0| 13.9| 1.7| 12.4|
|kotoba-bi_b5_nt | 9.7| 6.7| 1.1| 1.8| | 10.4| 7.3| 1.2| 1.9| | 9.2| 6.9| 1.3| 1.0| | 16.6| 5.5| 8.3| 2.8| | 9.0| 4.6| 1.5| 2.9| | 27.9| 13.9| 1.6| 12.3|
|kotoba-bi_b1_n5_nt| 9.9| 6.9| 1.2| 1.8| | 10.8| 7.6| 1.3| 2.0| | 9.3| 7.0| 1.3| 1.1| | 17.1| 5.7| 8.5| 3.0| | 9.1| 4.6| 1.6| 2.9| | 28.0| 13.9| 1.7| 12.5|
|kotoba-bi_b5_n5_nt| 9.7| 6.8| 1.1| 1.8| | 10.5| 7.3| 1.2| 1.9| | 9.2| 6.9| 1.3| 1.1| | 16.6| 5.5| 8.2| 2.9| | 9.0| 4.6| 1.5| 2.9| | 27.9| 13.9| 1.6| 12.4|
||
|kotoba-v2_b1 | 9.3| 6.5| 1.0| 1.8| | 10.1| 7.0| 1.2| 1.9| | 8.4| 6.2| 1.2| 1.0| | 11.6| 4.7| 3.3| 3.6| | 8.6| 4.2| 1.2| 3.2| | 27.6| 12.6| 1.4| 13.6|
|kotoba-v2_b5 | 9.1| 6.4| 1.0| 1.7| | 9.9| 6.9| 1.2| 1.8| | 8.4| 6.2| 1.2| 1.0| | 11.4| 4.6| 3.2| 3.6| | 8.6| 4.2| 1.2| 3.2| | 27.6| 12.7| 1.4| 13.5|
|kotoba-v2_b1_n5 | 9.3| 6.5| 1.1| 1.8| | 10.1| 7.0| 1.2| 1.9| | 8.5| 6.3| 1.2| 1.0| | 11.7| 4.8| 3.3| 3.6| | 8.6| 4.2| 1.2| 3.2| | 27.6| 12.6| 1.4| 13.6|
|kotoba-v2_b5_n5 | 9.2| 6.4| 1.0| 1.8| | 10.0| 6.9| 1.2| 1.8| | 8.5| 6.3| 1.2| 1.0| | 11.4| 4.6| 3.2| 3.6| | 8.7| 4.2| 1.2| 3.2| | 27.6| 12.7| 1.4| 13.5|
|kotoba-v2_b1_nt | 9.2| 6.4| 1.0| 1.7| | 10.0| 6.9| 1.2| 1.8| | 8.4| 6.2| 1.2| 1.0| | 11.7| 4.8| 3.2| 3.6| | 8.9| 4.1| 1.2| 3.6| | 27.7| 12.2| 1.3| 14.2|
|kotoba-v2_b5_nt | 9.1| 6.4| 1.0| 1.7| | 9.8| 6.8| 1.1| 1.8| | 8.4| 6.2| 1.2| 1.1| | 11.5| 4.7| 3.1| 3.7| | 8.6| 4.0| 1.1| 3.5| | 27.6| 12.3| 1.3| 14.0|
|kotoba-v2_b1_n5_nt| 9.3| 6.5| 1.1| 1.8| | 10.0| 7.0| 1.2| 1.9| | 8.5| 6.3| 1.2| 1.1| | 11.8| 4.9| 3.3| 3.7| | 9.0| 4.1| 1.2| 3.7| | 27.8| 12.3| 1.3| 14.2|
|kotoba-v2_b5_n5_nt| 9.2| 6.4| 1.0| 1.7| | 9.9| 6.9| 1.2| 1.8| | 8.4| 6.2| 1.2| 1.1| | 11.5| 4.7| 3.1| 3.7| | 8.6| 4.0| 1.1| 3.5| | 27.6| 12.3| 1.3| 14.0|
||
|anime_b1 | 10.0| 7.0| 1.2| 1.8| | 11.1| 7.7| 1.4| 2.0| | 8.1| 5.9| 1.0| 1.2| | 30.0| 8.3| 18.1| 3.6| | 7.5| 4.1| 1.9| 1.5| | 25.1| 11.7| 7.4| 6.1|
|anime_b5 | 9.9| 6.9| 1.2| 1.8| | 11.0| 7.6| 1.4| 1.9| | 7.8| 5.8| 0.9| 1.1| | 26.6| 7.8| 15.3| 3.5| | 7.3| 4.0| 1.8| 1.5| | 22.2| 11.3| 4.7| 6.2|
|anime_b1_n5 | 10.1| 7.0| 1.2| 1.9| | 11.2| 7.7| 1.4| 2.0| | 8.2| 6.0| 1.0| 1.2| | 27.4| 8.2| 15.4| 3.7| | 7.6| 4.2| 1.9| 1.5| | 21.0| 11.6| 3.1| 6.3|
|anime_b5_n5 | 10.0| 7.0| 1.2| 1.8| | 11.1| 7.7| 1.4| 2.0| | 7.9| 5.8| 1.0| 1.1| | 26.3| 7.9| 15.0| 3.5| | 7.3| 4.0| 1.8| 1.5| | 20.6| 11.3| 2.9| 6.4|
|anime_b1_nt | 9.7| 6.7| 1.2| 1.8| | 10.8| 7.4| 1.3| 2.0| | 7.4| 5.5| 0.8| 1.1| | 30.5| 8.0| 18.9| 3.6| | 7.2| 4.1| 1.9| 1.2| | 24.4| 11.2| 7.5| 5.7|
|anime_b5_nt | 9.6| 6.7| 1.1| 1.8| | 10.6| 7.4| 1.3| 1.9| | 7.4| 5.5| 0.8| 1.1| | 27.6| 7.7| 16.5| 3.4| | 7.2| 4.0| 1.8| 1.4| | 20.7| 11.0| 3.8| 5.8|
|anime_b1_n5_nt | 9.8| 6.8| 1.2| 1.8| | 10.9| 7.5| 1.4| 2.0| | 7.5| 5.6| 0.8| 1.1| | 28.2| 7.9| 16.7| 3.7| | 7.3| 4.1| 1.9| 1.2| | 20.3| 11.2| 3.2| 5.9|
|anime_b5_n5_nt | 9.7| 6.7| 1.1| 1.8| | 10.7| 7.5| 1.3| 1.9| | 7.5| 5.6| 0.8| 1.1| | 27.3| 7.7| 16.2| 3.4| | 7.2| 4.0| 1.8| 1.4| | 19.9| 11.0| 2.9| 6.0|
||
|v0.1_b1 | 9.0*| 6.1*| 1.2*| 1.7*| | 10.1*| 6.8*| 1.5*| 1.7*| | 7.2| 5.3| 0.8| 1.1| | 16.2| 4.5| 9.4| 2.3| | 6.9| 3.9| 1.7| 1.4| | 22.9| 12.7| 3.4| 6.8|
|v0.1_b5 | 8.9*| 6.1*| 1.2*| 1.6*| | 10.0*| 6.8*| 1.5*| 1.7*| | 7.1| 5.2| 0.8| 1.0| | 15.7| 4.4| 9.0| 2.3| | 7.5| 4.1| 2.0| 1.4| | 22.7| 12.9| 3.4| 6.5|
|v0.1_b1_n5 | 9.1*| 6.2*| 1.2*| 1.7*| | 10.2*| 6.9*| 1.5*| 1.8*| | 7.3| 5.3| 0.8| 1.1| | 16.3| 4.5| 9.4| 2.3| | 7.0| 3.9| 1.7| 1.4| | 22.6| 12.7| 3.0| 6.9|
|v0.1_b5_n5 | 9.0*| 6.1*| 1.2*| 1.6*| | 10.0*| 6.8*| 1.5*| 1.7*| | 7.2| 5.3| 0.8| 1.0| | 15.8| 4.5| 9.1| 2.3| | 7.5| 4.1| 2.0| 1.4| | 22.8| 12.9| 3.3| 6.6|
|v0.1_b1_nt | 8.9*| 6.1*| 1.1*| 1.7*| | 10.0*| 6.8*| 1.4*| 1.8*| | 7.2| 5.3| 0.8| 1.1| | 15.8| 4.5| 9.0| 2.3| | 6.9| 3.9| 1.6| 1.4| | 22.7| 12.5| 3.2| 6.9|
|v0.1_b5_nt | 8.9*| 6.1*| 1.1*| 1.7*| | 9.9*| 6.8*| 1.4*| 1.7*| | 7.1| 5.2| 0.8| 1.0| | 15.5| 4.4| 8.8| 2.3| | 6.9| 3.9| 1.6| 1.4| | 22.4| 12.5| 2.8| 7.1|
|v0.1_b1_n5_nt | 9.0*| 6.2*| 1.2*| 1.7*| | 10.1*| 6.9*| 1.4*| 1.8*| | 7.2| 5.3| 0.8| 1.1| | 15.9| 4.6| 9.0| 2.3| | 7.0| 3.9| 1.6| 1.4| | 22.4| 12.6| 2.9| 7.0|
|v0.1_b5_n5_nt | 8.9*| 6.1*| 1.1*| 1.7*| | 10.0*| 6.9*| 1.4*| 1.7*| | 7.2| 5.3| 0.8| 1.1| | 15.6| 4.5| 8.8| 2.3| | 7.0| 3.9| 1.6| 1.5| | 22.4| 12.5| 2.7| 7.2|
||
|v0.2_b1 | 6.9*| 3.4*| 2.6*| 0.9*| | 8.1| 4.6| 2.2| 1.3| | 6.4| 4.6| 0.7| 1.1| | 11.7| 3.2| 5.2| 3.2| | 7.8| 4.3| 2.0| 1.5| | 20.4| 11.1| 2.9| 6.4|
|v0.2_b5 | 6.7*| 3.3*| 2.4*| 1.0*| | 7.2| 4.5| 1.5| 1.3| | 6.4| 4.6| 0.7| 1.1| | 11.5| 3.2| 5.2| 3.1| | 8.1| 4.5| 2.1| 1.5| | 20.7| 11.2| 3.3| 6.2|
|v0.2_b1_n5 | 5.6*| 3.4*| 1.2*| 0.9*| | 7.2| 4.6| 1.3| 1.3| | 6.5| 4.6| 0.7| 1.1| | 11.7| 3.2| 5.2| 3.2| | 7.9| 4.3| 2.0| 1.5| | 20.4| 11.1| 2.9| 6.4|
|v0.2_b5_n5 | 5.6*| 3.3*| 1.3*| 1.0*| | 7.1| 4.5| 1.3| 1.3| | 6.4| 4.6| 0.7| 1.1| | 11.5| 3.2| 5.2| 3.1| | 8.1| 4.5| 2.1| 1.5| | 20.4| 11.1| 3.0| 6.2|
|v0.2_b1_nt | 5.3*| 3.4*| 0.9*| 1.0*| | 7.2| 4.7| 1.2| 1.3| | 6.5| 4.6| 0.7| 1.1| | 9.8| 3.1| 4.0| 2.7| | 7.9| 4.3| 2.0| 1.5| | 20.4| 11.1| 3.0| 6.4|
|v0.2_b5_nt | 5.3*| 3.4*| 0.9*| 1.0*| | 7.1| 4.5| 1.3| 1.3| | 6.4| 4.6| 0.7| 1.1| | 9.2| 3.0| 3.4| 2.8| | 7.9| 4.4| 2.0| 1.5| | 20.3| 11.0| 2.9| 6.4|
|v0.2_b1_n5_nt | 5.3*| 3.4*| 0.9*| 1.0*| | 7.2| 4.7| 1.3| 1.3| | 6.5| 4.6| 0.7| 1.1| | 9.2| 3.0| 3.5| 2.7| | 7.9| 4.3| 2.0| 1.5| | 20.3| 11.1| 2.9| 6.4|
|v0.2_b5_n5_nt | 5.2*| 3.4*| 0.8*| 1.0*| | 6.9| 4.5| 1.1| 1.3| | 6.4| 4.6| 0.7| 1.1| | 9.1| 3.0| 3.3| 2.8| | 7.9| 4.4| 2.0| 1.5| | 20.3| 11.1| 2.9| 6.3|
|