DSTK / text2token /data_bin /dict.ph.txt
gooorillax's picture
first push of codes and models for g2p, t2u, tokenizer and detokenizer
cd8454d
- 1044467
[CM] 376216024
[EX] 98579
[PD] 165555931
[QN] 16264706
en_AA0 1953460
en_AA1 94766089
en_AA2 5397346
en_AE0 2819508
en_AE1 134136994
en_AE2 5977536
en_AH0 355572398
en_AH1 126363413
en_AH2 4460040
en_AO0 1564602
en_AO1 81711345
en_AO2 3280311
en_AW0 345855
en_AW1 34194322
en_AW2 1010852
en_AY0 2238725
en_AY1 104762042
en_AY2 6062480
en_B 98726913
en_CH 25123469
en_D 214549774
en_DH 159741696
en_EH0 4447188
en_EH1 135111165
en_EH2 9513807
en_ER0 75505367
en_ER1 28802278
en_ER2 1003346
en_EY0 715097
en_EY1 75681781
en_EY2 7142133
en_F 84796037
en_G 52599362
en_HH 70210003
en_IH0 135919096
en_IH1 175950882
en_IH2 15240319
en_IY0 76580112
en_IY1 104545272
en_IY2 5930979
en_JH 30236775
en_K 178582179
en_L 202276091
en_M 141990710
en_N 350871796
en_NG 69860022
en_OW0 7995749
en_OW1 72724096
en_OW2 5242343
en_OY0 50238
en_OY1 4341384
en_OY2 227867
en_P 103111532
en_R 222618568
en_S 258373769
en_SH 35642075
en_T 405218443
en_TH 28711212
en_UH0 252861
en_UH1 23210914
en_UH2 893374
en_UNK 982
en_UW0 7292389
en_UW1 108877626
en_UW2 4227724
en_V 96862468
en_W 116706819
en_Y 57747815
en_Z 144506200
en_ZH 2083898
zh_AA 28584816
zh_E1 61362
zh_E2 3428156
zh_E3 16094043
zh_E4 5292654
zh_E5 477075
zh_EE 33947540
zh_En1 584834
zh_En2 4757216
zh_En3 4578524
zh_En4 1873932
zh_En5 26956
zh_OO 1877163
zh_a1 66497672
zh_a2 11643828
zh_a3 20107192
zh_a4 51339278
zh_a5 32233911
zh_ai1 14812124
zh_ai2 40926739
zh_ai3 9895830
zh_ai4 64023701
zh_ai5 10850574
zh_an1 20822641
zh_an2 35880910
zh_an3 18054702
zh_an4 46523862
zh_an5 1307029
zh_ang1 26424935
zh_ang2 22682089
zh_ang3 13965721
zh_ang4 37578831
zh_ang5 6031205
zh_ao1 13142414
zh_ao2 10148574
zh_ao3 31127549
zh_ao4 63310211
zh_ao5 1635849
zh_b 148845119
zh_c 34671790
zh_ch 76865460
zh_d 368432496
zh_e1 7351411
zh_e2 33280388
zh_e3 15862560
zh_e4 84068533
zh_e5 304906329
zh_ei1 12200131
zh_ei2 24022833
zh_ei3 12746965
zh_ei4 35450989
zh_ei5 594720
zh_en1 31165228
zh_en2 54314851
zh_en3 21801590
zh_en4 15417539
zh_en5 26271439
zh_eng1 21928018
zh_eng2 36081049
zh_eng3 6601838
zh_eng4 16195248
zh_eng5 1317750
zh_er2 14691496
zh_er3 1979209
zh_er4 6291985
zh_er5 887181
zh_f 69355002
zh_g 169563854
zh_h 163493941
zh_i01 8937489
zh_i02 1642781
zh_i03 6981454
zh_i04 22477260
zh_i05 13338786
zh_i1 30890571
zh_i2 80382362
zh_i3 91866259
zh_i4 92726783
zh_i5 12109909
zh_ia1 14432442
zh_ia2 617912
zh_ia3 1510051
zh_ia4 14878966
zh_ia5 2140492
zh_ian1 30431114
zh_ian2 23730626
zh_ian3 14120637
zh_ian4 47131938
zh_ian5 351607
zh_iang1 9348732
zh_iang2 7047136
zh_iang3 17801522
zh_iang4 14035749
zh_iang5 805646
zh_iao1 7323672
zh_iao2 6792463
zh_iao3 13687380
zh_iao4 15789800
zh_iao5 218920
zh_ie1 16685113
zh_ie2 11954677
zh_ie3 8565633
zh_ie4 8473873
zh_ie5 437735
zh_in1 28682916
zh_in2 9221089
zh_in3 6368394
zh_in4 11315421
zh_in5 820771
zh_ing1 28447297
zh_ing2 34371432
zh_ing3 8021719
zh_ing4 25821801
zh_ing5 3836374
zh_iong1 1106073
zh_iong2 865142
zh_iong3 36158
zh_iong5 35590
zh_ir1 28157449
zh_ir2 46716702
zh_ir3 12828841
zh_ir4 120439906
zh_ir5 3602404
zh_iu1 3925653
zh_iu2 8086521
zh_iu3 4954427
zh_iu4 46595570
zh_iu5 176976
zh_j 226332787
zh_k 66306186
zh_l 184559402
zh_m 126332087
zh_n 118194157
zh_o1 2662432
zh_o2 9590516
zh_o3 42412777
zh_o4 4350378
zh_o5 1487797
zh_ong1 38763629
zh_ong2 19830074
zh_ong3 14946612
zh_ong4 21560675
zh_ong5 490671
zh_ou1 22312107
zh_ou2 16650372
zh_ou3 49466393
zh_ou4 35835598
zh_ou5 9915286
zh_p 31236738
zh_q 102182921
zh_r 79878857
zh_s 54184865
zh_sh 289571083
zh_t 126111108
zh_u1 28397375
zh_u2 48949575
zh_u3 24354672
zh_u4 75574050
zh_u5 8757675
zh_ua1 2750068
zh_ua2 1252326
zh_ua3 184866
zh_ua4 10983848
zh_ua5 523485
zh_uai1 396392
zh_uai2 721864
zh_uai3 164750
zh_uai4 5017098
zh_uai5 56975
zh_uan1 11418019
zh_uan2 5403559
zh_uan3 5247985
zh_uan4 9085443
zh_uan5 1547598
zh_uang1 5788626
zh_uang2 3299645
zh_uang3 1173917
zh_uang4 4384120
zh_uang5 91495
zh_ui1 7355473
zh_ui2 8377949
zh_ui3 4192939
zh_ui4 44490466
zh_ui5 208788
zh_un1 3857100
zh_un2 3765799
zh_un3 1986714
zh_un4 5591686
zh_un5 42370
zh_uo1 37198463
zh_uo2 20431801
zh_uo3 12055870
zh_uo4 34365560
zh_uo5 4167486
zh_v1 6444458
zh_v2 11672371
zh_v3 12529928
zh_v4 27493549
zh_v5 3699927
zh_van1 1538825
zh_van2 15111847
zh_van3 3291264
zh_van4 2868984
zh_van5 73807
zh_ve1 1634105
zh_ve2 17030310
zh_ve3 716201
zh_ve4 12205899
zh_ve5 30049
zh_vn1 3418367
zh_vn2 3353765
zh_vn3 85129
zh_vn4 2949636
zh_vn5 16005
zh_w 128558943
zh_x 162936428
zh_y 313134645
zh_z 116677726
zh_zh 215892038