自然言語処理学習結果 自然言語処理勉強結果「ビタビアルゴリズム」
前回までで、形態素解析に必要な項目のうち、ラティス構造を求めて、コストを推定するところまで来た。 あとは、そのコストが最小となる経路をどうやって見つけるかだけが残っている。 今回は、その最小コストとなる経路を求めるアルゴリズムの一つであるビ...
形態素解析
自然言語処理学習結果 
自然言語処理学習結果 自然言語処理勉強結果「形態素解析のコスト推定」
前回は、形態素解析には二つの段階があることと、その前半のラティス構造について解説した。 後半として、コストを推定し、その最小経路を探す部分が残っている。 今回は、そのコストを推定する部分について解説していこう。 このあたりは前回も書いた通り...
自然言語処理学習結果 自然言語処理勉強結果「形態素解析の詳細」
前回は、自然言語処理のうち、解析の部分に焦点を当てていた。 その中でも、特に構造的な解析を行う二つの解析を紹介した。 形態素解析構文解析 今回は、このうち、形態素解析を具体的にどうやっているのかというお話をしよう。 実際にはツールでやってく...
自然言語処理学習結果 自然言語処理勉強結果「形態素解析・構文解析」
前回は…結局日本語の構造だけで終えてしまった。 今回こそ、本格的に自然言語処理の内容に入っていこう。 まずは、自然言語の内容を解析しなければいけない。 この解析は、大きく分けると構造の解析と意味の解析になる。 そのうち、構造の部分について解...