<commit_before># gwv

[![Test](https://github.com/kurgm/gwv-view/actions/workflows/test.yml/badge.svg)](https://github.com/kurgm/gwv-view/actions/workflows/test.yml)
[![codecov](https://codecov.io/gh/kurgm/gwv/branch/master/graph/badge.svg)](https://codecov.io/gh/kurgm/gwv)

GlyphWiki data validator - https://kurgm.github.io/gwv-view/


## Installation

```sh
pip3 install .
```


## Usage

```sh
gwv /path/to/dump_newest_only.txt
```

（↑を実行すると `dump_newest_only.txt` と同じディレクトリに `gwv_result.json` が生成される（フォーマットは今後大きく変更する可能性がある））


## License

MIT
<commit_msg>[skip ci] Fix badge URLs<commit_after># gwv

[![Test](https://github.com/kurgm/gwv/actions/workflows/test.yml/badge.svg)](https://github.com/kurgm/gwv/actions/workflows/test.yml)
[![codecov](https://codecov.io/gh/kurgm/gwv/branch/master/graph/badge.svg)](https://codecov.io/gh/kurgm/gwv)

GlyphWiki data validator - https://kurgm.github.io/gwv-view/


## Installation

```sh
pip3 install .
```


## Usage

```sh
gwv /path/to/dump_newest_only.txt
```

（↑を実行すると `dump_newest_only.txt` と同じディレクトリに `gwv_result.json` が生成される（フォーマットは今後大きく変更する可能性がある））


## License

MIT

{'fraction_non_alphanumeric': 0.1923419412288513, 'fraction_numerical': 0.0017809439002671415, 'mean_word_length': 4.764102564102564, 'pattern_counts': {'":': 0, '<': 3, '<?xml version=': 0, '>': 3, 'https://': 10, 'lorem ipsum': 0, 'www.': 0, 'xml': 0}, 'pii_count': 0, 'substrings_counts': 0, 'word_list_counts': {'cursed_substrings.json': 0, 'profanity_word_list.json': 0, 'sexual_word_list.json': 0, 'zh_pornsignals.json': 0}}
{'dir': 'git-commits-cleaned', 'id': '3886219', 'n_tokens_mistral': 581, 'n_tokens_neox': 541, 'n_words': 50}