<commit_before># entries to be added to the postag database
Duitsland	Duitsland	ENM:LOC:LND
a	a	FOREIGN
anemieke	anemieke	BNW:STL:VRB
babyvrije	babyvrij	BNW:STL:VRB
in	in	FOREIGN
of	of	FOREIGN
capo	capo	ZNW:EKV:DE_
gemenieden	meniën	WKW:VTD:MRV:DE_
meniënden	meniën	WKW:ODW:MRV:DE_
gegord	gorren	WKW:VTD:ONV
gegorde	gorren	WKW:VTD:VRB
gegorden	gorren	WKW:VTD:MRV:DE_
gor	gorren	WKW:TGW:1EP
gorde	gorren	WKW:VLT:1EP
gorden	gorren	WKW:VLT:INF
gorre	gorren	WKW:AWS
gorren	gorren	WKW:TGW:INF
gorrend	gorren	WKW:ODW:ONV
gorrende	gorren	WKW:ODW:VRB
gorrenden	gorren	WKW:ODW:MRV:DE_
gort	gorren	WKW:TGW:3EP
matcha	matcha	ZNW:MRV:DE_
onbekrast	onbekrast	BNW:STL:ONV
onbekraste	onbekrast	BNW:STL:VRB
allereutroofst	eutroof	BNW:ALR:ONV
allereutroofste	eutroof	BNW:ALR:VRB
allereutroofsten	eutroof	BNW:ALR:MRV:DE_
eutrofe	eutroof	BNW:STL:VRB
eutrofen	eutroof	BNW:STL:MRV:DE_
eutrofer	eutroof	BNW:VGR:ONV
eutrofere	eutroof	BNW:VGR:VRB
eutroferen	eutroof	BNW:VGR:MRV:DE_
eutrofers	eutroof	BNW:VGR:IET
eutroof	eutroof	BNW:STL:ONV
eutroofs	eutroof	BNW:STL:IET
eutroofst	eutroof	BNW:OVR:ONV
eutroofste	eutroof	BNW:OVR:VRB
eutroofsten	eutroof	BNW:OVR:MRV:DE_
Armeniër	Armeniër	ZNW:EKV:DE_
Armeniërs	Armeniër	ZNW:MRV:DE_
ECB	ECB	ZNW:EKV:DE_
Hollandse	Hollandse	ZNW:EKV:DE_
Nederlander	Nederlander	ZNW:EKV:DE_
Nederlanders	Nederlander	ZNW:MRV:DE_
PVV	PVV	ZNW:EKV:DE_
SER	SER	ZNW:EKV:DE_
daarvoor	daarvoor	BYW<commit_msg>[nl] corrections for speller and postags<commit_after># entries to be added to the postag database
Duitsland	Duitsland	ENM:LOC:LND
a	a	FOREIGN
anemieke	anemieke	BNW:STL:VRB
babyvrije	babyvrij	BNW:STL:VRB
in	in	FOREIGN
of	of	FOREIGN
capo	capo	ZNW:EKV:DE_
gemenieden	meniën	WKW:VTD:MRV:DE_
meniënden	meniën	WKW:ODW:MRV:DE_
gegord	gorren	WKW:VTD:ONV
gegorde	gorren	WKW:VTD:VRB
gegorden	gorren	WKW:VTD:MRV:DE_
gor	gorren	WKW:TGW:1EP
gorde	gorren	WKW:VLT:1EP
gorden	gorren	WKW:VLT:INF
gorre	gorren	WKW:AWS
gorren	gorren	WKW:TGW:INF
gorrend	gorren	WKW:ODW:ONV
gorrende	gorren	WKW:ODW:VRB
gorrenden	gorren	WKW:ODW:MRV:DE_
gort	gorren	WKW:TGW:3EP
matcha	matcha	ZNW:MRV:DE_
onbekrast	onbekrast	BNW:STL:ONV
onbekraste	onbekrast	BNW:STL:VRB
allereutroofst	eutroof	BNW:ALR:ONV
allereutroofste	eutroof	BNW:ALR:VRB
allereutroofsten	eutroof	BNW:ALR:MRV:DE_
eutrofe	eutroof	BNW:STL:VRB
eutrofen	eutroof	BNW:STL:MRV:DE_
eutrofer	eutroof	BNW:VGR:ONV
eutrofere	eutroof	BNW:VGR:VRB
eutroferen	eutroof	BNW:VGR:MRV:DE_
eutrofers	eutroof	BNW:VGR:IET
eutroof	eutroof	BNW:STL:ONV
eutroofs	eutroof	BNW:STL:IET
eutroofst	eutroof	BNW:OVR:ONV
eutroofste	eutroof	BNW:OVR:VRB
eutroofsten	eutroof	BNW:OVR:MRV:DE_
Armeniër	Armeniër	ZNW:EKV:DE_
Armeniërs	Armeniër	ZNW:MRV:DE_
ECB	ECB	ZNW:EKV:DE_
Hollandse	Hollandse	ZNW:EKV:DE_
Nederlander	Nederlander	ZNW:EKV:DE_
Nederlanders	Nederlander	ZNW:MRV:DE_
PVV	PVV	ZNW:EKV:DE_
SER	SER	ZNW:EKV:DE_
daarvoor	daarvoor	BYW
buitenboord	buitenboord	BYW
{'fraction_non_alphanumeric': 0.06860343017150858, 'fraction_numerical': 0.0021001050052502626, 'mean_word_length': 8.309446254071661, 'pattern_counts': {'":': 0, '<': 3, '<?xml version=': 0, '>': 3, 'https://': 0, 'lorem ipsum': 0, 'www.': 0, 'xml': 0}, 'pii_count': 0, 'substrings_counts': 0, 'word_list_counts': {'cursed_substrings.json': 0, 'profanity_word_list.json': 0, 'sexual_word_list.json': 0, 'zh_pornsignals.json': 0}}
{'dir': 'git-commits-cleaned', 'id': '4377915', 'n_tokens_mistral': 1757, 'n_tokens_neox': 1687, 'n_words': 307}