23:56二月に書いたプーシキンの『オネーギン』論の統計分析の見直しを行っている。単語における色彩的要素を抽出して自論の検証に用いたのだが,数値が何故有意なのかという統計的検証がまともにできているとはいえないことは自覚していた。これを統計的検定によって論証しておこうと考えている。このため単語統計の分析ツールをせっせと作成しているところである。いう多言語単語統計プログラムを利用し,その出力から単語の出現頻度や分散などの統計量を算出するツールを追加しようとしている。形式で準備した分析対象テキストに対し,単語出現回数や指定条件にマッチするテキストを抽出し,キリル言語,ラテン文字言語,日本語毎に結果を表示するものである。古典的多言語テキストフォーマットである。統合漢字のような包摂問題がない,というメリットがある。想定外のエスケープシーケンスが現われ,ぼろぼろエラーが発生する。なっていて確かにおかしい。こんなことにはならない。サポートで新しいエスケープシーケンス仕様が追加されたようである。付加されるようである。除去するプログラムを一本書いて対策した。ブラウザでの多国語環境』を,久しぶりに引っ張り出すことになった。開発したかつての電総研の半田剣一氏など,錚々たるメンバーが書いた名著といってよい。日本の研究者が当時この分野で世界をリードしていたことが解る。利用一辺倒になってしまったのである。活かされていないようで,ちょっと寂しい。この本もいまや絶版となり,入手は困難のようである。キリル文字に付加されていたエスケープシーケンスはいったい何なのだろうか。新仕様だとすれば,どこでそれを確認すればよいのであろうか。原因があることが判った。キリル文字を符号化できる。