<commit_before>ক,kV
চ,s
ট,ʈV
ত,t̪V
প,pV
খ,kʰV
ছ,sV
ঠ,ʈʰV
থ,t̪ʰV
ফ,pʰV
গ,ɡV
জ,zV
ড,ɖV
দ,d̪V
ব,bV
ঘ,ɡ̤V
ঝ,d͡z̤V
ঢ,ɖ̤V
ধ,d̪̤V
ভ,b̤V
ঙ,ŋV
ঞ,nV
ণ,nV
ন,nV
ম,mV
য,d͡zV
র,rV
ল,lV
শ,sV
ষ,ʃV
স,ʃV
হ,hV
ড়,ɽV
ঢ়,ɽ̤V
য়,jV
অ,ɔ
ই,i
ি,i
উ,u
ু,u
ঋ,ri
ৃ,ri
ঌ,li
ৢ,li
এ,e
ও,o
আ,a
া,a
ঈ,i
ী,i
ঊ,u
ূ,u
ৠ,rːi
ৄ,rːi
ৡ,lːi
ৣ,lːi
ঐ,oi
ৈ,oi
ঔ,ou
ৌ,ou
্,্
ঃ,ঃ
াঁ,̃
ং,ŋ<commit_msg>Additions to Bengali east<commit_after>Orth,Phon
ক,kV
চ,s
ট,ʈV
ত,t̪V
প,pV
খ,kʰV
ছ,sV
ঠ,ʈʰV
থ,t̪ʰV
ফ,pʰV
গ,ɡV
জ,zV
ড,ɖV
দ,d̪V
ব,bV
ঘ,ɡ̤V
ঝ,d͡z̤V
ঢ,ɖ̤V
ধ,d̪̤V
ভ,b̤V
ঙ,ŋV
ঞ,nV
ণ,nV
ন,nV
ম,mV
য,d͡zV
র,rV
ল,lV
শ,sV
ষ,ʃV
স,ʃV
হ,hV
ড়,ɽV
ঢ়,ɽ̤V
য়,jV
অ,ɔ
ই,i
ি,i
উ,u
ু,u
ঋ,ri
ৃ,ri
ঌ,li
ৢ,li
এ,e
ে,e
ও,o
ো,o
আ,a
া,a
ঈ,i
ী,i
ঊ,u
ূ,u
ৠ,rːi
ৄ,rːi
ৡ,lːi
ৣ,lːi
ঐ,oi
ৈ,oi
ঔ,ou
ৌ,ou
্,্
ঃ,ঃ
াঁ,̃
ং,ŋ
{'fraction_non_alphanumeric': 0.2804878048780488, 'fraction_numerical': 0.0, 'mean_word_length': 4.556390977443609, 'pattern_counts': {'":': 0, '<': 3, '<?xml version=': 0, '>': 3, 'https://': 0, 'lorem ipsum': 0, 'www.': 0, 'xml': 0}, 'pii_count': 0, 'substrings_counts': 0, 'word_list_counts': {'cursed_substrings.json': 0, 'profanity_word_list.json': 0, 'sexual_word_list.json': 0, 'zh_pornsignals.json': 0}}
{'dir': 'git-commits-cleaned', 'id': '7229248', 'n_tokens_mistral': 830, 'n_tokens_neox': 868, 'n_words': 133}