NeMo
PyTorch
NeMo
trysem kavyamanohar commited on
Commit
8de7ec4
·
0 Parent(s):

Duplicate from kavyamanohar/stt_ml_fastconformer_ctc_med_punct

Browse files

Co-authored-by: Kavya Manohar <kavyamanohar@users.noreply.huggingface.co>

.gitattributes ADDED
@@ -0,0 +1,35 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ *.7z filter=lfs diff=lfs merge=lfs -text
2
+ *.arrow filter=lfs diff=lfs merge=lfs -text
3
+ *.bin filter=lfs diff=lfs merge=lfs -text
4
+ *.bz2 filter=lfs diff=lfs merge=lfs -text
5
+ *.ckpt filter=lfs diff=lfs merge=lfs -text
6
+ *.ftz filter=lfs diff=lfs merge=lfs -text
7
+ *.gz filter=lfs diff=lfs merge=lfs -text
8
+ *.h5 filter=lfs diff=lfs merge=lfs -text
9
+ *.joblib filter=lfs diff=lfs merge=lfs -text
10
+ *.lfs.* filter=lfs diff=lfs merge=lfs -text
11
+ *.mlmodel filter=lfs diff=lfs merge=lfs -text
12
+ *.model filter=lfs diff=lfs merge=lfs -text
13
+ *.msgpack filter=lfs diff=lfs merge=lfs -text
14
+ *.npy filter=lfs diff=lfs merge=lfs -text
15
+ *.npz filter=lfs diff=lfs merge=lfs -text
16
+ *.onnx filter=lfs diff=lfs merge=lfs -text
17
+ *.ot filter=lfs diff=lfs merge=lfs -text
18
+ *.parquet filter=lfs diff=lfs merge=lfs -text
19
+ *.pb filter=lfs diff=lfs merge=lfs -text
20
+ *.pickle filter=lfs diff=lfs merge=lfs -text
21
+ *.pkl filter=lfs diff=lfs merge=lfs -text
22
+ *.pt filter=lfs diff=lfs merge=lfs -text
23
+ *.pth filter=lfs diff=lfs merge=lfs -text
24
+ *.rar filter=lfs diff=lfs merge=lfs -text
25
+ *.safetensors filter=lfs diff=lfs merge=lfs -text
26
+ saved_model/**/* filter=lfs diff=lfs merge=lfs -text
27
+ *.tar.* filter=lfs diff=lfs merge=lfs -text
28
+ *.tar filter=lfs diff=lfs merge=lfs -text
29
+ *.tflite filter=lfs diff=lfs merge=lfs -text
30
+ *.tgz filter=lfs diff=lfs merge=lfs -text
31
+ *.wasm filter=lfs diff=lfs merge=lfs -text
32
+ *.xz filter=lfs diff=lfs merge=lfs -text
33
+ *.zip filter=lfs diff=lfs merge=lfs -text
34
+ *.zst filter=lfs diff=lfs merge=lfs -text
35
+ *tfevents* filter=lfs diff=lfs merge=lfs -text
299f3c3e10064a928e07b138ca8d25c8_vocab.txt ADDED
@@ -0,0 +1,511 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ ##ന്
2
+ ##ക്
3
+ ##ത്
4
+ ##ക്ക
5
+
6
+ ##്ട
7
+ ##ന്ന
8
+
9
+
10
+ ##ും
11
+ ##തി
12
+
13
+
14
+ ##ങ്
15
+ ##യി
16
+
17
+ ##്പ
18
+ ##ട്ട
19
+
20
+ ##്യ
21
+ ##ച്
22
+
23
+ ##രു
24
+ ##ങ്ങ
25
+ ##പ്പ
26
+ ##്ര
27
+ ##ാണ
28
+ ##റ്
29
+ ##ണ്ട
30
+ ##രി
31
+ ##്ല
32
+
33
+
34
+ ##ല്ല
35
+ ##ത്ത
36
+ ##സ്
37
+ ##ത്തി
38
+ ##ുന്ന
39
+
40
+
41
+ ##ച്ച
42
+ ##ാണ്
43
+ ##െയ
44
+ ##ായി
45
+ ##ക്ക്
46
+ ##ുക
47
+ ##ിയ
48
+ ##ിൽ
49
+ ##ിക്ക
50
+
51
+ ##ില
52
+ ##ടെ
53
+ ##റ്റ
54
+ ##ള്
55
+ ##ള്ള
56
+ ##ന്ന്
57
+ ##ാന
58
+ പ്ര
59
+ ##ാര
60
+
61
+ ##ാൻ
62
+ ##ടു
63
+ നമ
64
+ ##ഞ്
65
+ ##ന്റ
66
+ ##്മ
67
+ ##ായ
68
+ ##ങ്ങള
69
+ ##ുള്ള
70
+ ##ുമ
71
+ ##ണ്ട്
72
+ ##ങ്ക
73
+
74
+ വി
75
+ ##വി
76
+ ##ക്കെ
77
+ ഒരു
78
+ ##ന്റെ
79
+
80
+ ##ോൾ
81
+ ##ങ്ങൾ
82
+ ചെയ
83
+ ##ട്ട്
84
+ നി
85
+ ##ഞ്ഞ
86
+ ##ന്നെ
87
+ ##ിച്ച
88
+ ##ിക
89
+
90
+ ##ക്ഷ
91
+ ##ുടെ
92
+ ##രുന്ന
93
+ പറ
94
+ പി
95
+ ##ദ്
96
+ ##ാർ
97
+ സ്
98
+ ##ന്ത്
99
+ നമ്മ
100
+ ##യിൽ
101
+ കു
102
+ ##െങ്ക
103
+ ##റി
104
+ ##ാല
105
+ അത
106
+ ##പ്പോൾ
107
+
108
+
109
+ ##ന്ത
110
+ സം
111
+ ##ാവ
112
+ ##ദേ
113
+ ##ാക്ക
114
+ ##ാം
115
+ ##രിക്ക
116
+ ##ത്ര
117
+ അവ
118
+ ##നി
119
+ ##നെ
120
+ ##ൊക്കെ
121
+ ##ുണ്ട്
122
+ ##െന്ന്
123
+ ##ലെ
124
+ പോ
125
+ ##ാൽ
126
+ ##ണം
127
+
128
+ ##ില്ല
129
+
130
+ ചെയ്യ
131
+ ##ട്
132
+ ##പ്പെ
133
+ ##ച്ച്
134
+ ##ടി
135
+ എന്ന
136
+ ##ന്നും
137
+ ##ുന്നത്
138
+ ##ത്തിൽ
139
+ കാര
140
+
141
+
142
+ കൂ
143
+ കോ
144
+ കേ
145
+ ##റ്റ്
146
+
147
+ നമു
148
+ കൊ
149
+ ##രുന്നു
150
+ ##ോഗ
151
+ നട
152
+ ##ത്ത്
153
+ അതി
154
+ മാ
155
+ ##ാമ
156
+ വേ
157
+ ##െങ്കിൽ
158
+ മു
159
+ ##ത്തെ
160
+ ##സി
161
+ ##ഴി
162
+ സമ
163
+ ##ിട്ട
164
+ ##്യമ
165
+
166
+ അത്
167
+ ##ന്ത്രി
168
+ പിന്നെ
169
+ പറഞ്ഞ
170
+ നമുക്ക്
171
+ ##സ്ഥ
172
+ വെ
173
+ ##ുകയ
174
+ ##ുവ
175
+ ##ന്ദ
176
+
177
+
178
+ ##ണ്
179
+
180
+ ##ഡ്
181
+
182
+ പു
183
+ ##ിലും
184
+ നമ്മൾ
185
+
186
+ ##രെ
187
+ ##വർ
188
+ ##ദേശ
189
+ ##വും
190
+ ##ാധ
191
+ ##മായി
192
+ ##യ്
193
+ ##ുപ
194
+ ##ുണ്ട
195
+ അങ്ങ
196
+ ##ുകള
197
+
198
+ ചെയ്
199
+ നല്ല
200
+ പറയ
201
+ എല്ല
202
+ ##ടുക്ക
203
+ ##േഷ
204
+ ##ിക്കുന്ന
205
+ ഞാൻ
206
+ കാര്യ
207
+ ##ാള
208
+ ##ുട
209
+ ##ൊരു
210
+ രാ
211
+ ##ിവ
212
+ ഉണ്ട
213
+ തന്നെ
214
+ ##യില
215
+ ##മ്മ
216
+ ##ുകൾ
217
+ ##ാക
218
+ ##കള
219
+ ##നം
220
+ കുറ
221
+ നേ
222
+ ##ഷ്ട
223
+ ##ായിരുന്നു
224
+
225
+ ##ദ്ധ
226
+ എന്ത
227
+ ##ുമ്പ
228
+ ##മെ
229
+ ##ദ്യ
230
+ ##രം
231
+ ##ന്ദ്ര
232
+ ഇപ്പോൾ
233
+ സ്ഥ
234
+ ##പ്പം
235
+ അപ്പോൾ
236
+ ##ക്കും
237
+ ##ിലെ
238
+ ##ടുത്ത
239
+ പരി
240
+ വീ
241
+ ##പാ
242
+ ##െയാണ്
243
+ ##യും
244
+ ##ാസ
245
+ ##ന്ധ
246
+ ##നു
247
+ ##മായ
248
+ ##ികള
249
+ ##ിച്ചു
250
+ ക്
251
+ ##ശ്
252
+ ##ാറ
253
+ തി
254
+ ##ൽക
255
+ ##റ്റി
256
+ ##മാണ്
257
+ ##പ്പ്
258
+ ##റിയ
259
+ ##ാഗ
260
+ ##ച്ചു
261
+ കൂടു
262
+ ##ഴ്
263
+ ##ട്ടി
264
+ നൽക
265
+ പറഞ്ഞു
266
+ 1
267
+ കൂടുത
268
+ ##ണ്ടി
269
+ തുട
270
+ എന്ന്
271
+ ##വിടെ
272
+ ##കൾ
273
+ ##ത്തില
274
+ ##ാപ
275
+ ##കാര
276
+ ##രോ
277
+ അല്ല
278
+ ##തു
279
+ 2
280
+ വ്യ
281
+ ##ംഗ
282
+ ##ികൾ
283
+ ##സ്ഥാന
284
+ ##മ്പ
285
+ ##ഴിഞ്ഞ
286
+ ##െങ്കിലും
287
+ ##െന്നും
288
+ ##തിയ
289
+ ##നിക്ക്
290
+ ##ധാന
291
+ ##പ്പോ
292
+ ##േക്ക്
293
+ ##ത്യ
294
+ സി
295
+ ##ൂർ
296
+ ##കര
297
+ ##െയും
298
+ ##ദേഹ
299
+ നമ്മുടെ
300
+ ചെ
301
+ അവർ
302
+ ഉപ
303
+ സാധ
304
+ ##ന്ത്യ
305
+ ##ുകൊ
306
+ എനിക്ക്
307
+ ##ത്തിന്റെ
308
+ ##പ്പെട്ട
309
+ ##ാത
310
+ ##ദ്ദേഹ
311
+ ##്
312
+
313
+ ##ി
314
+ ##ക
315
+ ##ന
316
+ ##ു
317
+ ##ത
318
+ ##ാ
319
+ ##യ
320
+ ##ട
321
+ ##പ
322
+ ##ര
323
+ ##െ
324
+ ##മ
325
+ ##ല
326
+ ##വ
327
+ ##ം
328
+ ##റ
329
+ ##സ
330
+ ##ണ
331
+ ##ച
332
+ ##ങ
333
+ ##ള
334
+ ##ോ
335
+ ##.
336
+ ##അ
337
+ ##േ
338
+ ##ൽ
339
+ ##ർ
340
+ ##ൾ
341
+ ##ദ
342
+ ##എ
343
+ ##ഞ
344
+ ##ീ
345
+ ##ൻ
346
+ ##ഷ
347
+ ##ഇ
348
+ ##ൊ
349
+ ##ആ
350
+ ##ശ
351
+ ##ൂ
352
+ ##,
353
+ ##ഗ
354
+ ##ധ
355
+ ##ജ
356
+ ##ബ
357
+ ##ഒ
358
+ ##ഴ
359
+ ##ഡ
360
+ ##ഹ
361
+ ##ഉ
362
+ ##ഭ
363
+ ##ഥ
364
+ ##ഫ
365
+ ##ൈ
366
+ ##ഓ
367
+ ##ഖ
368
+ ##?
369
+ ##0
370
+ ##ൺ
371
+ ##ൃ
372
+ ##ഈ
373
+ ##ഏ
374
+ ##2
375
+ ##1
376
+ ##ഘ
377
+ ##ൗ
378
+ ##3
379
+ ##5
380
+ ##-
381
+ ##ഠ
382
+ ##4
383
+ ##ഐ
384
+ ##6
385
+ ##7
386
+ ##8
387
+ ##9
388
+ ##P
389
+ ##C
390
+ ##I
391
+ ##ഛ
392
+ ##D
393
+ ##W
394
+ ##ഊ
395
+ ##S
396
+ ##A
397
+ ##ഔ
398
+ ##T
399
+ ##O
400
+ ##R
401
+ ##:
402
+ ##ഃ
403
+ ##F
404
+ ##r
405
+ ##N
406
+ ##ഢ
407
+ ##M
408
+ ##E
409
+ ##L
410
+ ##!
411
+ ##"
412
+ ##'
413
+ ##/
414
+ ##V
415
+ ##B
416
+ ##;
417
+ ##G
418
+ ##J
419
+ ##ഋ
420
+ ##t
421
+ ##ഝ
422
+ ##(
423
+ ##)
424
+ ##o
425
+ ##x
426
+ ##e
427
+ ##c
428
+ ##H
429
+ ##n
430
+ ##i
431
+ ##a
432
+ ##u
433
+ ##K
434
+ ##s
435
+ ##m
436
+ ##d
437
+ ##l
438
+ ##%
439
+ ##U
440
+ ##f
441
+ ##v
442
+ ##h
443
+ ##p
444
+ ##൦
445
+ ##൫
446
+ ##Y
447
+ ##b
448
+ ##൨
449
+ ##—
450
+ ##X
451
+ ##൩
452
+ ##`
453
+ ##൪
454
+ ##g
455
+ ##y
456
+ ##ഌ
457
+ ##൧
458
+ ##@
459
+ ##்
460
+ ##+
461
+ ##k
462
+ ##ा
463
+ ##ச
464
+ ##。
465
+ ##ं
466
+ ##न
467
+ ##्
468
+ ##ய
469
+ ##൭
470
+ ##൯
471
+ ##ൿ
472
+ ##$
473
+ ##*
474
+ ##~
475
+ ##ठ
476
+ ##ध
477
+ ##ब
478
+ ##म
479
+ ##ா
480
+ ##൬
481
+ ##Q
482
+ ##Z
483
+ ##°
484
+ ##त
485
+ ##द
486
+ ##प
487
+ ##य
488
+ ##र
489
+ ##ल
490
+ ##व
491
+ ##स
492
+ ##ह
493
+ ##ि
494
+ ##ु
495
+ ##े
496
+ ##ঠ
497
+ ##র
498
+ ##ো
499
+ ##લ
500
+ ##ુ
501
+ ##ன
502
+ ##ம
503
+ ##ற
504
+ ##న
505
+ ##ల
506
+ ##ా
507
+ ##ి
508
+ ##ీ
509
+ ##్
510
+ ##ತ
511
+ ##ಿ
49704422a930474bb04998e5f862af1e_tokenizer.model ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:ae65ec9e1cb9e5f400246142d19a9ac76cc1541c50c53d86c670575b556f2c11
3
+ size 248296
87be75af54e141a8a50481d3ebfa5088_tokenizer.vocab ADDED
@@ -0,0 +1,512 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ <unk> 0
2
+ ന് -0
3
+ ക് -1
4
+ ത് -2
5
+ ക്ക -3
6
+ ▁പ -4
7
+ ്ട -5
8
+ ന്ന -6
9
+ ▁ക -7
10
+ ▁അ -8
11
+ ും -9
12
+ തി -10
13
+ ▁വ -11
14
+ ▁ന -12
15
+ ങ് -13
16
+ യി -14
17
+ ▁സ -15
18
+ ്പ -16
19
+ ട്ട -17
20
+ ▁മ -18
21
+ ്യ -19
22
+ ച് -20
23
+ ▁എ -21
24
+ രു -22
25
+ ങ്ങ -23
26
+ പ്പ -24
27
+ ്ര -25
28
+ ാണ -26
29
+ റ് -27
30
+ ണ്ട -28
31
+ രി -29
32
+ ്ല -30
33
+ ▁ഇ -31
34
+ ▁ആ -32
35
+ ല്ല -33
36
+ ത്ത -34
37
+ സ് -35
38
+ ത്തി -36
39
+ ുന്ന -37
40
+ ▁ത -38
41
+ ▁ച -39
42
+ ച്ച -40
43
+ ാണ് -41
44
+ െയ -42
45
+ ായി -43
46
+ ക്ക് -44
47
+ ുക -45
48
+ ിയ -46
49
+ ിൽ -47
50
+ ിക്ക -48
51
+ ▁ഒ -49
52
+ ില -50
53
+ ടെ -51
54
+ റ്റ -52
55
+ ള് -53
56
+ ള്ള -54
57
+ ന്ന് -55
58
+ ാന -56
59
+ ▁പ്ര -57
60
+ ാര -58
61
+ ▁ഉ -59
62
+ ാൻ -60
63
+ ടു -61
64
+ ▁നമ -62
65
+ ഞ് -63
66
+ ന്റ -64
67
+ ്മ -65
68
+ ായ -66
69
+ ങ്ങള -67
70
+ ുള്ള -68
71
+ ുമ -69
72
+ ണ്ട് -70
73
+ ങ്ക -71
74
+ ▁ര -72
75
+ ▁വി -73
76
+ വി -74
77
+ ക്കെ -75
78
+ ▁ഒരു -76
79
+ ന്റെ -77
80
+ ▁ബ -78
81
+ ോൾ -79
82
+ ങ്ങൾ -80
83
+ ▁ചെയ -81
84
+ ട്ട് -82
85
+ ▁നി -83
86
+ ഞ്ഞ -84
87
+ ന്നെ -85
88
+ ിച്ച -86
89
+ ിക -87
90
+ ▁ജ -88
91
+ ക്ഷ -89
92
+ ുടെ -90
93
+ രുന്ന -91
94
+ ▁പറ -92
95
+ ▁പി -93
96
+ ദ് -94
97
+ ാർ -95
98
+ ▁സ് -96
99
+ ന്ത് -97
100
+ ▁നമ്മ -98
101
+ യിൽ -99
102
+ ▁കു -100
103
+ െങ്ക -101
104
+ റി -102
105
+ ാല -103
106
+ ▁അത -104
107
+ പ്പോൾ -105
108
+ ▁ശ -106
109
+ ▁ഓ -107
110
+ ന്ത -108
111
+ ▁സം -109
112
+ ാവ -110
113
+ ദേ -111
114
+ ാക്ക -112
115
+ ാം -113
116
+ രിക്ക -114
117
+ ത്ര -115
118
+ ▁അവ -116
119
+ നി -117
120
+ നെ -118
121
+ ൊക്കെ -119
122
+ ുണ്ട് -120
123
+ െന്ന് -121
124
+ ലെ -122
125
+ ▁പോ -123
126
+ ാൽ -124
127
+ ണം -125
128
+ ▁ഞ -126
129
+ ില്ല -127
130
+ ▁ല -128
131
+ ▁ചെയ്യ -129
132
+ ട് -130
133
+ പ്പെ -131
134
+ ച്ച് -132
135
+ ടി -133
136
+ ▁എന്ന -134
137
+ ന്നും -135
138
+ ുന്നത് -136
139
+ ത്തിൽ -137
140
+ ▁കാര -138
141
+ ▁ഗ -139
142
+ ▁ഭ -140
143
+ ▁കൂ -141
144
+ ▁കോ -142
145
+ ▁കേ -143
146
+ റ്റ് -144
147
+ ▁ഫ -145
148
+ ▁നമു -146
149
+ ▁കൊ -147
150
+ രുന്നു -148
151
+ ോഗ -149
152
+ ▁നട -150
153
+ ത്ത് -151
154
+ ▁അതി -152
155
+ ▁മാ -153
156
+ ാമ -154
157
+ ▁വേ -155
158
+ െങ്കിൽ -156
159
+ ▁മു -157
160
+ ത്തെ -158
161
+ സി -159
162
+ ഴി -160
163
+ ▁സമ -161
164
+ ിട്ട -162
165
+ ്യമ -163
166
+ ▁ഈ -164
167
+ ▁അത് -165
168
+ ന്ത്രി -166
169
+ ▁പിന്നെ -167
170
+ ▁പറഞ്ഞ -168
171
+ ▁നമുക്ക് -169
172
+ സ്ഥ -170
173
+ ▁വെ -171
174
+ ുകയ -172
175
+ ുവ -173
176
+ ന്ദ -174
177
+ ▁ഡ -175
178
+ ▁യ -176
179
+ ണ് -177
180
+ ▁ഹ -178
181
+ ഡ് -179
182
+ ▁ഏ -180
183
+ ▁പു -181
184
+ ിലും -182
185
+ ▁നമ്മൾ -183
186
+ ▁ദ -184
187
+ രെ -185
188
+ വർ -186
189
+ ദേശ -187
190
+ വും -188
191
+ ാധ -189
192
+ മായി -190
193
+ യ് -191
194
+ ുപ -192
195
+ ുണ്ട -193
196
+ ▁അങ്ങ -194
197
+ ുകള -195
198
+ ▁റ -196
199
+ ▁ചെയ് -197
200
+ ▁നല്ല -198
201
+ ▁പറയ -199
202
+ ▁എല്ല -200
203
+ ടുക്ക -201
204
+ േഷ -202
205
+ ിക്കുന്ന -203
206
+ ▁ഞാൻ -204
207
+ ▁കാര്യ -205
208
+ ാള -206
209
+ ുട -207
210
+ ൊരു -208
211
+ ▁രാ -209
212
+ ിവ -210
213
+ ▁ഉണ്ട -211
214
+ ▁തന്നെ -212
215
+ യില -213
216
+ മ്മ -214
217
+ ുകൾ -215
218
+ ാക -216
219
+ കള -217
220
+ നം -218
221
+ ▁കുറ -219
222
+ ▁നേ -220
223
+ ഷ്ട -221
224
+ ായിരുന്നു -222
225
+ ▁ട -223
226
+ ദ്ധ -224
227
+ ▁എന്ത -225
228
+ ുമ്പ -226
229
+ മെ -227
230
+ ദ്യ -228
231
+ രം -229
232
+ ന്ദ്ര -230
233
+ ▁ഇപ്പോൾ -231
234
+ ▁സ്ഥ -232
235
+ പ്പം -233
236
+ ▁അപ്പോൾ -234
237
+ ക്കും -235
238
+ ിലെ -236
239
+ ടുത്ത -237
240
+ ▁പരി -238
241
+ ▁വീ -239
242
+ പാ -240
243
+ െയാണ് -241
244
+ യും -242
245
+ ാസ -243
246
+ ന്ധ -244
247
+ നു -245
248
+ മായ -246
249
+ ികള -247
250
+ ിച്ചു -248
251
+ ▁ക് -249
252
+ ശ് -250
253
+ ാറ -251
254
+ ▁തി -252
255
+ ൽക -253
256
+ റ്റി -254
257
+ മാണ് -255
258
+ പ്പ് -256
259
+ റിയ -257
260
+ ാഗ -258
261
+ ച്ചു -259
262
+ ▁കൂടു -260
263
+ ഴ് -261
264
+ ട്ടി -262
265
+ ▁നൽക -263
266
+ ▁പറഞ്ഞു -264
267
+ ▁1 -265
268
+ ▁കൂടുത -266
269
+ ണ്ടി -267
270
+ ▁തുട -268
271
+ ▁എന്ന് -269
272
+ വിടെ -270
273
+ കൾ -271
274
+ ത്തില -272
275
+ ാപ -273
276
+ കാര -274
277
+ രോ -275
278
+ ▁അല്ല -276
279
+ തു -277
280
+ ▁2 -278
281
+ ▁വ്യ -279
282
+ ംഗ -280
283
+ ികൾ -281
284
+ സ്ഥാന -282
285
+ മ്പ -283
286
+ ഴിഞ്ഞ -284
287
+ െങ്കിലും -285
288
+ െന്നും -286
289
+ തിയ -287
290
+ നിക്ക് -288
291
+ ധാന -289
292
+ പ്പോ -290
293
+ േക്ക് -291
294
+ ത്യ -292
295
+ ▁സി -293
296
+ ൂർ -294
297
+ കര -295
298
+ െയും -296
299
+ ദേഹ -297
300
+ ▁നമ്മുടെ -298
301
+ ▁ചെ -299
302
+ ▁അവർ -300
303
+ ▁ഉപ -301
304
+ ▁സാധ -302
305
+ ന്ത്യ -303
306
+ ുകൊ -304
307
+ ▁എനിക്ക് -305
308
+ ത്തിന്റെ -306
309
+ പ്പെട്ട -307
310
+ ാത -308
311
+ ���്ദേഹ -309
312
+ ് -310
313
+ ▁ -311
314
+ ി -312
315
+ ക -313
316
+ ന -314
317
+ ു -315
318
+ ത -316
319
+ ാ -317
320
+ യ -318
321
+ ട -319
322
+ പ -320
323
+ ര -321
324
+ െ -322
325
+ മ -323
326
+ ല -324
327
+ വ -325
328
+ ം -326
329
+ റ -327
330
+ സ -328
331
+ ണ -329
332
+ ച -330
333
+ ങ -331
334
+ ള -332
335
+ ോ -333
336
+ . -334
337
+ അ -335
338
+ േ -336
339
+ ൽ -337
340
+ ർ -338
341
+ ൾ -339
342
+ ദ -340
343
+ എ -341
344
+ ഞ -342
345
+ ീ -343
346
+ ൻ -344
347
+ ഷ -345
348
+ ഇ -346
349
+ ൊ -347
350
+ ആ -348
351
+ ശ -349
352
+ ൂ -350
353
+ , -351
354
+ ഗ -352
355
+ ധ -353
356
+ ജ -354
357
+ ബ -355
358
+ ഒ -356
359
+ ഴ -357
360
+ ഡ -358
361
+ ഹ -359
362
+ ഉ -360
363
+ ഭ -361
364
+ ഥ -362
365
+ ഫ -363
366
+ ൈ -364
367
+ ഓ -365
368
+ ഖ -366
369
+ ? -367
370
+ 0 -368
371
+ ൺ -369
372
+ ൃ -370
373
+ ഈ -371
374
+ ഏ -372
375
+ 2 -373
376
+ 1 -374
377
+ ഘ -375
378
+ ൗ -376
379
+ 3 -377
380
+ 5 -378
381
+ - -379
382
+ ഠ -380
383
+ 4 -381
384
+ ഐ -382
385
+ 6 -383
386
+ 7 -384
387
+ 8 -385
388
+ 9 -386
389
+ P -387
390
+ C -388
391
+ I -389
392
+ ഛ -390
393
+ D -391
394
+ W -392
395
+ ഊ -393
396
+ S -394
397
+ A -395
398
+ ഔ -396
399
+ T -397
400
+ O -398
401
+ R -399
402
+ : -400
403
+ ഃ -401
404
+ F -402
405
+ r -403
406
+ N -404
407
+ ഢ -405
408
+ M -406
409
+ E -407
410
+ L -408
411
+ ! -409
412
+ " -410
413
+ ' -411
414
+ / -412
415
+ V -413
416
+ B -414
417
+ ; -415
418
+ G -416
419
+ J -417
420
+ ഋ -418
421
+ t -419
422
+ ഝ -420
423
+ ( -421
424
+ ) -422
425
+ o -423
426
+ x -424
427
+ e -425
428
+ c -426
429
+ H -427
430
+ n -428
431
+ i -429
432
+ a -430
433
+ u -431
434
+ K -432
435
+ s -433
436
+ m -434
437
+ d -435
438
+ l -436
439
+ % -437
440
+ U -438
441
+ f -439
442
+ v -440
443
+ h -441
444
+ p -442
445
+ ൦ -443
446
+ ൫ -444
447
+ Y -445
448
+ b -446
449
+ ൨ -447
450
+ — -448
451
+ X -449
452
+ ൩ -450
453
+ ` -451
454
+ ൪ -452
455
+ g -453
456
+ y -454
457
+ ഌ -455
458
+ ൧ -456
459
+ @ -457
460
+ ் -458
461
+ + -459
462
+ k -460
463
+ ा -461
464
+ ச -462
465
+ 。 -463
466
+ ं -464
467
+ न -465
468
+ ् -466
469
+ ய -467
470
+ ൭ -468
471
+ ൯ -469
472
+ ൿ -470
473
+ $ -471
474
+ * -472
475
+ ~ -473
476
+ ठ -474
477
+ ध -475
478
+ ब -476
479
+ म -477
480
+ ா -478
481
+ ൬ -479
482
+ Q -480
483
+ Z -481
484
+ ° -482
485
+ त -483
486
+ द -484
487
+ प -485
488
+ य -486
489
+ र -487
490
+ ल -488
491
+ व -489
492
+ स -490
493
+ ह -491
494
+ ि -492
495
+ ु -493
496
+ े -494
497
+ ঠ -495
498
+ র -496
499
+ ো -497
500
+ લ -498
501
+ ુ -499
502
+ ன -500
503
+ ம -501
504
+ ற -502
505
+ న -503
506
+ ల -504
507
+ ా -505
508
+ ి -506
509
+ ీ -507
510
+ ్ -508
511
+ ತ -509
512
+ ಿ -510
README.md ADDED
@@ -0,0 +1,196 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ ---
2
+ library_name: nemo
3
+ license: cc-by-4.0
4
+ tags:
5
+ - pytorch
6
+ - NeMo
7
+ ---
8
+
9
+ # Stt Ml Fastconformer Ctc Med Punct
10
+
11
+ <style>
12
+ img {
13
+ display: inline;
14
+ }
15
+ </style>
16
+
17
+ [![Model architecture](https://img.shields.io/badge/Model_Arch-PUT-YOUR-ARCHITECTURE-HERE-lightgrey#model-badge)](#model-architecture)
18
+ | [![Model size](https://img.shields.io/badge/Params-PUT-YOUR-MODEL-SIZE-HERE-lightgrey#model-badge)](#model-architecture)
19
+ | [![Language](https://img.shields.io/badge/Language-PUT-YOUR-LANGUAGE-HERE-lightgrey#model-badge)](#datasets)
20
+
21
+ **Put a short model description here.**
22
+
23
+ See the [model architecture](#model-architecture) section and [NeMo documentation](https://docs.nvidia.com/deeplearning/nemo/user-guide/docs/en/stable/index.html) for complete architecture details.
24
+
25
+
26
+ ## NVIDIA NeMo: Training
27
+
28
+ To train, fine-tune or play with the model you will need to install [NVIDIA NeMo](https://github.com/NVIDIA/NeMo). We recommend you install it after you've installed latest Pytorch version.
29
+ ```
30
+ pip install nemo_toolkit['all']
31
+ ```
32
+
33
+ ## How to Use this Model
34
+
35
+ The model is available for use in the NeMo toolkit [3], and can be used as a pre-trained checkpoint for inference or for fine-tuning on another dataset.
36
+
37
+ ### Automatically instantiate the model
38
+
39
+ **NOTE**: Please update the model class below to match the class of the model being uploaded.
40
+
41
+ ```python
42
+ import nemo.core import ModelPT
43
+ model = ModelPT.from_pretrained("kavyamanohar/stt_ml_fastconformer_ctc_med_punct")
44
+ ```
45
+
46
+ ### NOTE
47
+
48
+ Add some information about how to use the model here. An example is provided for ASR inference below.
49
+
50
+ ### Transcribing using Python
51
+ First, let's get a sample
52
+ ```
53
+ wget https://dldata-public.s3.us-east-2.amazonaws.com/2086-149220-0033.wav
54
+ ```
55
+ Then simply do:
56
+ ```
57
+ asr_model.transcribe(['2086-149220-0033.wav'])
58
+ ```
59
+
60
+ ### Transcribing many audio files
61
+
62
+ ```shell
63
+ python [NEMO_GIT_FOLDER]/examples/asr/transcribe_speech.py pretrained_name="kavyamanohar/stt_ml_fastconformer_ctc_med_punct" audio_dir=""
64
+ ```
65
+
66
+ ### Input
67
+
68
+ **Add some information about what are the inputs to this model**
69
+
70
+ ### Output
71
+
72
+ **Add some information about what are the outputs of this model**
73
+
74
+ ## Model Architecture
75
+
76
+ **Add information here discussing architectural details of the model or any comments to users about the model.**
77
+
78
+ ## Training
79
+
80
+ **Add information here about how the model was trained. It should be as detailed as possible, potentially including the the link to the script used to train as well as the base config used to train the model. If extraneous scripts are used to prepare the components of the model, please include them here.**
81
+
82
+ ### NOTE
83
+
84
+ An example is provided below for ASR
85
+
86
+ The NeMo toolkit [3] was used for training the models for over several hundred epochs. These model are trained with this [example script](https://github.com/NVIDIA/NeMo/blob/main/examples/asr/asr_transducer/speech_to_text_rnnt_bpe.py) and this [base config](https://github.com/NVIDIA/NeMo/blob/main/examples/asr/conf/fastconformer/fast-conformer_transducer_bpe.yaml).
87
+
88
+ The tokenizers for these models were built using the text transcripts of the train set with this [script](https://github.com/NVIDIA/NeMo/blob/main/scripts/tokenizers/process_asr_text_tokenizer.py).
89
+
90
+
91
+ ### Datasets
92
+
93
+ **Try to provide as detailed a list of datasets as possible. If possible, provide links to the datasets on HF by adding it to the manifest section at the top of the README (marked by ---).**
94
+
95
+ ### NOTE
96
+
97
+ An example for the manifest section is provided below for ASR datasets
98
+
99
+ datasets:
100
+ - librispeech_asr
101
+ - fisher_corpus
102
+ - Switchboard-1
103
+ - WSJ-0
104
+ - WSJ-1
105
+ - National-Singapore-Corpus-Part-1
106
+ - National-Singapore-Corpus-Part-6
107
+ - vctk
108
+ - voxpopuli
109
+ - europarl
110
+ - multilingual_librispeech
111
+ - mozilla-foundation/common_voice_8_0
112
+ - MLCommons/peoples_speech
113
+
114
+ The corresponding text in this section for those datasets is stated below -
115
+
116
+ The model was trained on 64K hours of English speech collected and prepared by NVIDIA NeMo and Suno teams.
117
+
118
+ The training dataset consists of private subset with 40K hours of English speech plus 24K hours from the following public datasets:
119
+
120
+ - Librispeech 960 hours of English speech
121
+ - Fisher Corpus
122
+ - Switchboard-1 Dataset
123
+ - WSJ-0 and WSJ-1
124
+ - National Speech Corpus (Part 1, Part 6)
125
+ - VCTK
126
+ - VoxPopuli (EN)
127
+ - Europarl-ASR (EN)
128
+ - Multilingual Librispeech (MLS EN) - 2,000 hour subset
129
+ - Mozilla Common Voice (v7.0)
130
+ - People's Speech - 12,000 hour subset
131
+
132
+
133
+ ## Performance
134
+
135
+ **Add information here about the performance of the model. Discuss what is the metric that is being used to evaluate the model and if there are external links explaning the custom metric, please link to it.
136
+
137
+ ### NOTE
138
+
139
+ An example is provided below for ASR metrics list that can be added to the top of the README
140
+
141
+ model-index:
142
+ - name: PUT_MODEL_NAME
143
+ results:
144
+ - task:
145
+ name: Automatic Speech Recognition
146
+ type: automatic-speech-recognition
147
+ dataset:
148
+ name: AMI (Meetings test)
149
+ type: edinburghcstr/ami
150
+ config: ihm
151
+ split: test
152
+ args:
153
+ language: en
154
+ metrics:
155
+ - name: Test WER
156
+ type: wer
157
+ value: 17.10
158
+ - task:
159
+ name: Automatic Speech Recognition
160
+ type: automatic-speech-recognition
161
+ dataset:
162
+ name: Earnings-22
163
+ type: revdotcom/earnings22
164
+ split: test
165
+ args:
166
+ language: en
167
+ metrics:
168
+ - name: Test WER
169
+ type: wer
170
+ value: 14.11
171
+
172
+ Provide any caveats about the results presented in the top of the discussion so that nuance is not lost.
173
+
174
+ It should ideally be in a tabular format (you can use the following website to make your tables in markdown format - https://www.tablesgenerator.com/markdown_tables)**
175
+
176
+ ## Limitations
177
+
178
+ **Discuss any practical limitations to the model when being used in real world cases. They can also be legal disclaimers, or discussion regarding the safety of the model (particularly in the case of LLMs).**
179
+
180
+
181
+ ### Note
182
+
183
+ An example is provided below
184
+
185
+ Since this model was trained on publicly available speech datasets, the performance of this model might degrade for speech which includes technical terms, or vernacular that the model has not been trained on. The model might also perform worse for accented speech.
186
+
187
+
188
+ ## License
189
+
190
+ License to use this model is covered by the [CC-BY-4.0](https://creativecommons.org/licenses/by/4.0/). By downloading the public and release version of the model, you accept the terms and conditions of the [CC-BY-4.0](https://creativecommons.org/licenses/by/4.0/) license.
191
+
192
+ ## References
193
+
194
+ **Provide appropriate references in the markdown link format below. Please order them numerically.**
195
+
196
+ [1] [NVIDIA NeMo Toolkit](https://github.com/NVIDIA/NeMo)
model_config.yaml ADDED
@@ -0,0 +1,743 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ sample_rate: 16000
2
+ log_prediction: true
3
+ ctc_reduction: mean_volume
4
+ skip_nan_grad: false
5
+ init_from_nemo_model: exp/fastconformer_512_1_2/2025-11-24_22-11-55/checkpoints/fastconformer_512_1_2.nemo
6
+ train_ds:
7
+ manifest_filepath: data/all_manifests/adalat-ai_common_voice_17_0_curated_train.jsonl,data/all_manifests/adalat-ai_festvox-iiith-ml_curated_train.jsonl,data/all_manifests/adalat-ai_fleurs_ml_curated_train.jsonl,data/all_manifests/adalat-ai_fleurs_ml_curated_validation.jsonl,data/all_manifests/adalat-ai_indic_tts_ml_curated_train.jsonl,data/all_manifests/adalat-ai_openslr63_ml_curated_train.jsonl,data/all_manifests/adalat-ai_Shrutilipi_ml_curated_train.jsonl,data/all_manifests/adalat-ai_IMaSC_ml_curated_train.jsonl,data/all_manifests/adalat-ai_IndicVoices-malayalam_curated_train.jsonl,data/all_manifests/adalat-ai_Kathbath_ml_curated_train.jsonl
8
+ sample_rate: 16000
9
+ batch_size: 128
10
+ shuffle: true
11
+ num_workers: 18
12
+ pin_memory: true
13
+ max_duration: 25
14
+ min_duration: 0.1
15
+ is_tarred: false
16
+ tarred_audio_filepaths: null
17
+ shuffle_n: 2048
18
+ bucketing_strategy: fully_randomized
19
+ bucketing_batch_size: null
20
+ validation_ds:
21
+ manifest_filepath: data/all_manifests/adalat-ai_curated-malayalam-test_test.jsonl
22
+ sample_rate: 16000
23
+ batch_size: 128
24
+ shuffle: false
25
+ use_start_end_token: false
26
+ num_workers: 8
27
+ pin_memory: true
28
+ test_ds:
29
+ manifest_filepath: data/all_manifests/adalat-ai_in22_ml_test.jsonl
30
+ sample_rate: 16000
31
+ batch_size: 64
32
+ shuffle: false
33
+ use_start_end_token: false
34
+ num_workers: 8
35
+ pin_memory: true
36
+ tokenizer:
37
+ dir: data/tokenizer-512-punct/tokenizer_spe_bpe_v512
38
+ type: bpe
39
+ model_path: nemo:49704422a930474bb04998e5f862af1e_tokenizer.model
40
+ vocab_path: nemo:299f3c3e10064a928e07b138ca8d25c8_vocab.txt
41
+ spe_tokenizer_vocab: nemo:87be75af54e141a8a50481d3ebfa5088_tokenizer.vocab
42
+ preprocessor:
43
+ _target_: nemo.collections.asr.modules.AudioToMelSpectrogramPreprocessor
44
+ sample_rate: 16000
45
+ normalize: per_feature
46
+ window_size: 0.025
47
+ window_stride: 0.01
48
+ window: hann
49
+ features: 80
50
+ n_fft: 512
51
+ log: true
52
+ frame_splicing: 1
53
+ dither: 1.0e-05
54
+ pad_to: 0
55
+ pad_value: 0.0
56
+ spec_augment:
57
+ _target_: nemo.collections.asr.modules.SpectrogramAugmentation
58
+ freq_masks: 2
59
+ time_masks: 10
60
+ freq_width: 27
61
+ time_width: 0.05
62
+ encoder:
63
+ _target_: nemo.collections.asr.modules.ConformerEncoder
64
+ feat_in: 80
65
+ feat_out: -1
66
+ n_layers: 16
67
+ d_model: 256
68
+ subsampling: dw_striding
69
+ subsampling_factor: 8
70
+ subsampling_conv_channels: 256
71
+ causal_downsampling: false
72
+ ff_expansion_factor: 4
73
+ self_attention_model: rel_pos
74
+ n_heads: 4
75
+ att_context_size:
76
+ - 70
77
+ - 6
78
+ att_context_style: regular
79
+ xscaling: true
80
+ untie_biases: true
81
+ pos_emb_max_len: 5000
82
+ use_pytorch_sdpa: false
83
+ use_pytorch_sdpa_backends: []
84
+ conv_kernel_size: 9
85
+ conv_norm_type: batch_norm
86
+ conv_context_size: null
87
+ dropout: 0.1
88
+ dropout_pre_encoder: 0.1
89
+ dropout_emb: 0.0
90
+ dropout_att: 0.1
91
+ stochastic_depth_drop_prob: 0.0
92
+ stochastic_depth_mode: linear
93
+ stochastic_depth_start_layer: 1
94
+ decoder:
95
+ _target_: nemo.collections.asr.modules.ConvASRDecoder
96
+ feat_in: 256
97
+ num_classes: 512
98
+ vocabulary:
99
+ - <unk>
100
+ - ന്
101
+ - ക്
102
+ - ത്
103
+ - ക്ക
104
+ - ▁പ
105
+ - ്ട
106
+ - ന്ന
107
+ - ▁ക
108
+ - ▁അ
109
+ - ും
110
+ - തി
111
+ - ▁വ
112
+ - ▁ന
113
+ - ങ്
114
+ - യി
115
+ - ▁സ
116
+ - ്പ
117
+ - ട്ട
118
+ - ▁മ
119
+ - ്യ
120
+ - ച്
121
+ - ▁എ
122
+ - രു
123
+ - ങ്ങ
124
+ - പ്പ
125
+ - ്ര
126
+ - ാണ
127
+ - റ്
128
+ - ണ്ട
129
+ - രി
130
+ - ്ല
131
+ - ▁ഇ
132
+ - ▁ആ
133
+ - ല്ല
134
+ - ത്ത
135
+ - സ്
136
+ - ത്തി
137
+ - ുന്ന
138
+ - ▁ത
139
+ - ▁ച
140
+ - ച്ച
141
+ - ാണ്
142
+ - െയ
143
+ - ായി
144
+ - ക്ക്
145
+ - ുക
146
+ - ിയ
147
+ - ിൽ
148
+ - ിക്ക
149
+ - ▁ഒ
150
+ - ില
151
+ - ടെ
152
+ - റ്റ
153
+ - ള്
154
+ - ള്ള
155
+ - ന്ന്
156
+ - ാന
157
+ - ▁പ്ര
158
+ - ാര
159
+ - ▁ഉ
160
+ - ാൻ
161
+ - ടു
162
+ - ▁നമ
163
+ - ഞ്
164
+ - ന്റ
165
+ - ്മ
166
+ - ായ
167
+ - ങ്ങള
168
+ - ുള്ള
169
+ - ുമ
170
+ - ണ്ട്
171
+ - ങ്ക
172
+ - ▁ര
173
+ - ▁വി
174
+ - വി
175
+ - ക്കെ
176
+ - ▁ഒരു
177
+ - ന്റെ
178
+ - ▁ബ
179
+ - ോൾ
180
+ - ങ്ങൾ
181
+ - ▁ചെയ
182
+ - ട്ട്
183
+ - ▁നി
184
+ - ഞ്ഞ
185
+ - ന്നെ
186
+ - ിച്ച
187
+ - ിക
188
+ - ▁ജ
189
+ - ക്ഷ
190
+ - ുടെ
191
+ - രുന്ന
192
+ - ▁പറ
193
+ - ▁പി
194
+ - ദ്
195
+ - ാർ
196
+ - ▁സ്
197
+ - ന്ത്
198
+ - ▁നമ്മ
199
+ - യിൽ
200
+ - ▁കു
201
+ - െങ്ക
202
+ - റി
203
+ - ാല
204
+ - ▁അത
205
+ - പ്പോൾ
206
+ - ▁ശ
207
+ - ▁ഓ
208
+ - ന്ത
209
+ - ▁സം
210
+ - ാവ
211
+ - ദേ
212
+ - ാക്ക
213
+ - ാം
214
+ - രിക്ക
215
+ - ത്ര
216
+ - ▁അവ
217
+ - നി
218
+ - നെ
219
+ - ൊക്കെ
220
+ - ുണ്ട്
221
+ - െന്ന്
222
+ - ലെ
223
+ - ▁പോ
224
+ - ാൽ
225
+ - ണം
226
+ - ▁ഞ
227
+ - ില്ല
228
+ - ▁ല
229
+ - ▁ചെയ്��
230
+ - ട്
231
+ - പ്പെ
232
+ - ച്ച്
233
+ - ടി
234
+ - ▁എന്ന
235
+ - ന്നും
236
+ - ുന്നത്
237
+ - ത്തിൽ
238
+ - ▁കാര
239
+ - ▁ഗ
240
+ - ▁ഭ
241
+ - ▁കൂ
242
+ - ▁കോ
243
+ - ▁കേ
244
+ - റ്റ്
245
+ - ▁ഫ
246
+ - ▁നമു
247
+ - ▁കൊ
248
+ - രുന്നു
249
+ - ോഗ
250
+ - ▁നട
251
+ - ത്ത്
252
+ - ▁അതി
253
+ - ▁മാ
254
+ - ാമ
255
+ - ▁വേ
256
+ - െങ്കിൽ
257
+ - ▁മു
258
+ - ത്തെ
259
+ - സി
260
+ - ഴി
261
+ - ▁സമ
262
+ - ിട്ട
263
+ - ്യമ
264
+ - ▁ഈ
265
+ - ▁അത്
266
+ - ന്ത്രി
267
+ - ▁പിന്നെ
268
+ - ▁പറഞ്ഞ
269
+ - ▁നമുക്ക്
270
+ - സ്ഥ
271
+ - ▁വെ
272
+ - ുകയ
273
+ - ുവ
274
+ - ന്ദ
275
+ - ▁ഡ
276
+ - ▁യ
277
+ - ണ്
278
+ - ▁ഹ
279
+ - ഡ്
280
+ - ▁ഏ
281
+ - ▁പു
282
+ - ിലും
283
+ - ▁നമ്മൾ
284
+ - ▁ദ
285
+ - രെ
286
+ - വർ
287
+ - ദേശ
288
+ - വും
289
+ - ാധ
290
+ - മായി
291
+ - യ്
292
+ - ുപ
293
+ - ുണ്ട
294
+ - ▁അങ്ങ
295
+ - ുകള
296
+ - ▁റ
297
+ - ▁ചെയ്
298
+ - ▁നല്ല
299
+ - ▁പറയ
300
+ - ▁എല്ല
301
+ - ടുക്ക
302
+ - േഷ
303
+ - ിക്കുന്ന
304
+ - ▁ഞാൻ
305
+ - ▁കാര്യ
306
+ - ാള
307
+ - ുട
308
+ - ൊരു
309
+ - ▁രാ
310
+ - ിവ
311
+ - ▁ഉണ്ട
312
+ - ▁തന്നെ
313
+ - യില
314
+ - മ്മ
315
+ - ുകൾ
316
+ - ാക
317
+ - കള
318
+ - നം
319
+ - ▁കുറ
320
+ - ▁നേ
321
+ - ഷ്ട
322
+ - ായിരുന്നു
323
+ - ▁ട
324
+ - ദ്ധ
325
+ - ▁എന്ത
326
+ - ുമ്പ
327
+ - മെ
328
+ - ദ്യ
329
+ - രം
330
+ - ന്ദ്ര
331
+ - ▁ഇപ്പോൾ
332
+ - ▁സ്ഥ
333
+ - പ്പം
334
+ - ▁അപ്പോൾ
335
+ - ക്കും
336
+ - ിലെ
337
+ - ടുത്ത
338
+ - ▁പരി
339
+ - ▁വീ
340
+ - പാ
341
+ - െയാണ്
342
+ - യും
343
+ - ാസ
344
+ - ന്ധ
345
+ - നു
346
+ - മായ
347
+ - ികള
348
+ - ിച്ചു
349
+ - ▁ക്
350
+ - ശ്
351
+ - ാറ
352
+ - ▁തി
353
+ - ൽക
354
+ - റ്റി
355
+ - മാണ്
356
+ - പ്പ്
357
+ - റിയ
358
+ - ാഗ
359
+ - ച്ചു
360
+ - ▁കൂടു
361
+ - ഴ്
362
+ - ട്ടി
363
+ - ▁നൽക
364
+ - ▁പറഞ്ഞു
365
+ - ▁1
366
+ - ▁കൂടുത
367
+ - ണ്ടി
368
+ - ▁തുട
369
+ - ▁എന്ന്
370
+ - വിടെ
371
+ - കൾ
372
+ - ത്തില
373
+ - ാപ
374
+ - കാര
375
+ - രോ
376
+ - ▁അല്ല
377
+ - തു
378
+ - ▁2
379
+ - ▁വ്യ
380
+ - ംഗ
381
+ - ികൾ
382
+ - സ്ഥാന
383
+ - മ്പ
384
+ - ഴിഞ്ഞ
385
+ - െങ്കിലും
386
+ - െന്നും
387
+ - തിയ
388
+ - നിക്ക്
389
+ - ധാന
390
+ - പ്പോ
391
+ - േക്ക്
392
+ - ത്യ
393
+ - ▁സി
394
+ - ൂർ
395
+ - കര
396
+ - െയും
397
+ - ദേഹ
398
+ - ▁നമ്മുടെ
399
+ - ▁ചെ
400
+ - ▁അവർ
401
+ - ▁ഉപ
402
+ - ▁സാധ
403
+ - ന്ത്യ
404
+ - ുകൊ
405
+ - ▁എനിക്ക്
406
+ - ത്തിന്റെ
407
+ - പ്പെട്ട
408
+ - ാത
409
+ - ദ്ദേഹ
410
+ - ്
411
+ - ▁
412
+ - ി
413
+ - ക
414
+ - ന
415
+ - ു
416
+ - ത
417
+ - ാ
418
+ - യ
419
+ - ട
420
+ - പ
421
+ - ര
422
+ - െ
423
+ - മ
424
+ - ല
425
+ - വ
426
+ - ം
427
+ - റ
428
+ - സ
429
+ - ണ
430
+ - ച
431
+ - ങ
432
+ - ള
433
+ - ോ
434
+ - .
435
+ - അ
436
+ - േ
437
+ - ൽ
438
+ - ർ
439
+ - ൾ
440
+ - ദ
441
+ - എ
442
+ - ഞ
443
+ - ീ
444
+ - ൻ
445
+ - ഷ
446
+ - ഇ
447
+ - ൊ
448
+ - ആ
449
+ - ശ
450
+ - ൂ
451
+ - ','
452
+ - ഗ
453
+ - ധ
454
+ - ജ
455
+ - ബ
456
+ - ഒ
457
+ - ഴ
458
+ - ഡ
459
+ - ഹ
460
+ - ഉ
461
+ - ഭ
462
+ - ഥ
463
+ - ഫ
464
+ - ൈ
465
+ - ഓ
466
+ - ഖ
467
+ - '?'
468
+ - '0'
469
+ - ൺ
470
+ - ൃ
471
+ - ഈ
472
+ - ഏ
473
+ - '2'
474
+ - '1'
475
+ - ഘ
476
+ - ൗ
477
+ - '3'
478
+ - '5'
479
+ - '-'
480
+ - ഠ
481
+ - '4'
482
+ - ഐ
483
+ - '6'
484
+ - '7'
485
+ - '8'
486
+ - '9'
487
+ - P
488
+ - C
489
+ - I
490
+ - ഛ
491
+ - D
492
+ - W
493
+ - ഊ
494
+ - S
495
+ - A
496
+ - ഔ
497
+ - T
498
+ - O
499
+ - R
500
+ - ':'
501
+ - ഃ
502
+ - F
503
+ - r
504
+ - 'N'
505
+ - ഢ
506
+ - M
507
+ - E
508
+ - L
509
+ - '!'
510
+ - '"'
511
+ - ''''
512
+ - /
513
+ - V
514
+ - B
515
+ - ;
516
+ - G
517
+ - J
518
+ - ഋ
519
+ - t
520
+ - ഝ
521
+ - (
522
+ - )
523
+ - o
524
+ - x
525
+ - e
526
+ - c
527
+ - H
528
+ - 'n'
529
+ - i
530
+ - a
531
+ - u
532
+ - K
533
+ - s
534
+ - m
535
+ - d
536
+ - l
537
+ - '%'
538
+ - U
539
+ - f
540
+ - v
541
+ - h
542
+ - p
543
+ - '൦'
544
+ - '൫'
545
+ - 'Y'
546
+ - b
547
+ - '൨'
548
+ - —
549
+ - X
550
+ - '൩'
551
+ - '`'
552
+ - '൪'
553
+ - g
554
+ - 'y'
555
+ - ഌ
556
+ - '൧'
557
+ - '@'
558
+ - ்
559
+ - +
560
+ - k
561
+ - ा
562
+ - ச
563
+ - 。
564
+ - ं
565
+ - न
566
+ - ्
567
+ - ய
568
+ - '൭'
569
+ - '൯'
570
+ - ൿ
571
+ - $
572
+ - '*'
573
+ - '~'
574
+ - ठ
575
+ - ध
576
+ - ब
577
+ - म
578
+ - ா
579
+ - '൬'
580
+ - Q
581
+ - Z
582
+ - °
583
+ - त
584
+ - द
585
+ - प
586
+ - य
587
+ - र
588
+ - ल
589
+ - व
590
+ - स
591
+ - ह
592
+ - ि
593
+ - ु
594
+ - े
595
+ - ঠ
596
+ - র
597
+ - ো
598
+ - લ
599
+ - ુ
600
+ - ன
601
+ - ம
602
+ - ற
603
+ - న
604
+ - ల
605
+ - ా
606
+ - ి
607
+ - ీ
608
+ - ్
609
+ - ತ
610
+ - ಿ
611
+ interctc:
612
+ loss_weights: []
613
+ apply_at_layers: []
614
+ optim:
615
+ name: adamw
616
+ lr: 0.001
617
+ betas:
618
+ - 0.9
619
+ - 0.98
620
+ weight_decay: 0.005
621
+ sched:
622
+ name: CosineAnnealing
623
+ warmup_steps: 40000
624
+ warmup_ratio: null
625
+ min_lr: 1.0e-05
626
+ target: nemo.collections.asr.models.ctc_bpe_models.EncDecCTCModelBPE
627
+ nemo_version: 2.5.2
628
+ decoding:
629
+ strategy: greedy_batch
630
+ preserve_alignments: null
631
+ compute_timestamps: null
632
+ word_seperator: ' '
633
+ segment_seperators:
634
+ - .
635
+ - '!'
636
+ - '?'
637
+ segment_gap_threshold: null
638
+ ctc_timestamp_type: all
639
+ batch_dim_index: 0
640
+ greedy:
641
+ preserve_alignments: false
642
+ compute_timestamps: false
643
+ preserve_frame_confidence: false
644
+ confidence_method_cfg:
645
+ name: entropy
646
+ entropy_type: tsallis
647
+ alpha: 0.33
648
+ entropy_norm: exp
649
+ temperature: DEPRECATED
650
+ ngram_lm_model: null
651
+ ngram_lm_alpha: 0.0
652
+ boosting_tree:
653
+ model_path: null
654
+ key_phrases_file: null
655
+ key_phrases_list: null
656
+ context_score: 1.0
657
+ depth_scaling: 1.0
658
+ unk_score: 0.0
659
+ final_eos_score: 1.0
660
+ score_per_phrase: 0.0
661
+ source_lang: en
662
+ use_triton: true
663
+ uniform_weights: false
664
+ use_bpe_dropout: false
665
+ num_of_transcriptions: 5
666
+ bpe_alpha: 0.3
667
+ boosting_tree_alpha: 0.0
668
+ allow_cuda_graphs: true
669
+ beam:
670
+ beam_size: 4
671
+ search_type: default
672
+ preserve_alignments: false
673
+ compute_timestamps: false
674
+ return_best_hypothesis: true
675
+ allow_cuda_graphs: true
676
+ beam_alpha: null
677
+ beam_beta: 1.0
678
+ beam_threshold: 20.0
679
+ kenlm_path: null
680
+ ngram_lm_alpha: 1.0
681
+ ngram_lm_model: null
682
+ boosting_tree:
683
+ model_path: null
684
+ key_phrases_file: null
685
+ key_phrases_list: null
686
+ context_score: 1.0
687
+ depth_scaling: 1.0
688
+ unk_score: 0.0
689
+ final_eos_score: 1.0
690
+ score_per_phrase: 0.0
691
+ source_lang: en
692
+ use_triton: true
693
+ uniform_weights: false
694
+ use_bpe_dropout: false
695
+ num_of_transcriptions: 5
696
+ bpe_alpha: 0.3
697
+ boosting_tree_alpha: 0.0
698
+ flashlight_cfg:
699
+ lexicon_path: null
700
+ boost_path: null
701
+ beam_size_token: 16
702
+ beam_threshold: 20.0
703
+ unk_weight: -.inf
704
+ sil_weight: 0.0
705
+ pyctcdecode_cfg:
706
+ beam_prune_logp: -10.0
707
+ token_min_logp: -5.0
708
+ prune_history: false
709
+ hotwords: null
710
+ hotword_weight: 10.0
711
+ wfst:
712
+ beam_size: 4
713
+ search_type: riva
714
+ return_best_hypothesis: true
715
+ preserve_alignments: false
716
+ compute_timestamps: false
717
+ decoding_mode: nbest
718
+ open_vocabulary_decoding: false
719
+ beam_width: 10.0
720
+ lm_weight: 1.0
721
+ device: cuda
722
+ arpa_lm_path: null
723
+ wfst_lm_path: null
724
+ riva_decoding_cfg: {}
725
+ k2_decoding_cfg:
726
+ search_beam: 20.0
727
+ output_beam: 10.0
728
+ min_active_states: 30
729
+ max_active_states: 10000
730
+ confidence_cfg:
731
+ preserve_frame_confidence: false
732
+ preserve_token_confidence: false
733
+ preserve_word_confidence: false
734
+ exclude_blank: true
735
+ aggregation: min
736
+ tdt_include_duration: false
737
+ method_cfg:
738
+ name: entropy
739
+ entropy_type: tsallis
740
+ alpha: 0.33
741
+ entropy_norm: exp
742
+ temperature: DEPRECATED
743
+ temperature: 1.0
model_weights.ckpt ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:f59ca749274296b867c83adb1832ba6e49a89170183f29a4caceba7b118d016d
3
+ size 105409123