グーテンベルクプロジェクトのウェブサイトからテキストを入手して、一連の処理をおこなうサンプルが示してあります。あったので、これでやってみました。Burroughs'このテキストファイルにはBOMが付いているようで、『入門』と同様の結果を出すためには添え字の範囲を調節しなければなりません。'la']BOMは独立したトークンとして扱われてはいないようです。BOMの存在を想定していなかった可能性があります。位置を求め、次に第1章の冒頭部分を表示させてみました。これらを除くためには、次のように小説本文を抽出します。エスペラント単語だけが現れてきます。ひろたかpythonで自然言語処理プログラムが書けるようになりたいと思っています。Ticketnoteで自分の到達度を確認できれば嬉しいです。---(下書き中)閉じる。