<commit_before># Golang Dirty Filter

[![GoDoc](https://godoc.org/github.com/antlinker/go-dirtyfilter?status.svg)](https://godoc.org/github.com/antlinker/go-dirtyfilter)

> 支持动态修改敏感词，同时支持特殊字符的筛选；
> 敏感词的存储支持内存存储及MongoDB存储。
<commit_msg>Modify README<commit_after># Golang Dirty Filter

[![GoDoc](https://godoc.org/github.com/antlinker/go-dirtyfilter?status.svg)](https://godoc.org/github.com/antlinker/go-dirtyfilter)
[![wercker status](https://app.wercker.com/status/02cb69dcbba94ee4274f1c0c06ce68f9/s "wercker status")](https://app.wercker.com/project/bykey/<KEY>)

> 支持动态修改敏感词，同时支持特殊字符的筛选；
> 敏感词的存储支持内存存储及MongoDB存储。

{'fraction_non_alphanumeric': 0.17017828200972449, 'fraction_numerical': 0.027552674230145867, 'mean_word_length': 7.131578947368421, 'pattern_counts': {'":': 0, '<': 4, '<?xml version=': 0, '>': 8, 'https://': 6, 'lorem ipsum': 0, 'www.': 0, 'xml': 0}, 'pii_count': 0, 'substrings_counts': 0, 'word_list_counts': {'cursed_substrings.json': 0, 'profanity_word_list.json': 0, 'sexual_word_list.json': 0, 'zh_pornsignals.json': 0}}
{'dir': 'git-commits-cleaned', 'id': '4272450', 'n_tokens_mistral': 308, 'n_tokens_neox': 320, 'n_words': 19}