<commit_before>package main

import (
    "fmt"
    pybr "github.com/go-cc/cc-table/cc-pinyin-range"
)

func main() {
    s := `9月30日，金秋送爽，在祖国大地处处洋溢着和平幸福美好生活的今天，我们迎来了第三个法定“烈士纪念日”。雄伟壮丽的天安门广场上，鲜艳的五星红旗迎风飘扬，庄严肃穆的人民英雄纪念碑巍然矗立，指向云天`

    py := pybr.New()
    p, _ := py.Convert(s)

    fmt.Println(p)
 <commit_msg>update sample string to include more symbols<commit_after>package main

import (
    "fmt"
    pybr "github.com/go-cc/cc-table/cc-pinyin-range"
)

func main() {
    s := `名著：《红楼梦》〖清〗曹雪芹 著、高鹗 续／『人民文学』出版社／1996—9月30日／59.70【元】，《三国演义》〖明〗罗贯中。`

    py := pybr.New()
    p, _ := py.Convert(s)

    fmt.Println(p)
 
{'fraction_non_alphanumeric': 0.17263843648208468, 'fraction_numerical': 0.02280130293159609, 'mean_word_length': 3.58955223880597, 'pattern_counts': {'":': 0, '<': 3, '<?xml version=': 0, '>': 3, 'https://': 0, 'lorem ipsum': 0, 'www.': 0, 'xml': 0}, 'pii_count': 0, 'substrings_counts': 0, 'word_list_counts': {'cursed_substrings.json': 0, 'profanity_word_list.json': 0, 'sexual_word_list.json': 0, 'zh_pornsignals.json': 0}}
{'dir': 'git-commits-cleaned', 'id': '287641', 'n_tokens_mistral': 399, 'n_tokens_neox': 417, 'n_words': 38}