統計解析を英語に適用した結果、どのようなことが明らかになったのでしょうか。
情報理論が自然言語処理と計算言語学に与える基本的な貢献は、1951年の論文「Prediction and Entropy of Printed English」で、英語の統計にエントロピーの上限と下限を示し、言語解析に統計的基礎を与えることでさらに確立した。また、空白をアルファベットの27番目の文字として扱うと、実際に書き言葉の不確実性が低下することを証明し、文化的慣習と確率的認知の間に明確な定量的関連性を与えた。
統計解析を英語に適用した主な成果は、英語のエントロピーの上限と下限を設定したこと、空白を27番目のアルファベットとして扱うと不確実性が低くなることでしたのだ。