単語の意味は、前後の単語との関係で決定される
というもの
PR
1.文の抽出
文章を文に分ける
句点やピリオドを利用する
2.形態素解析
形態素は単語にあたるもの
文を形態素へ分割する
3.構文解析
形態素解析の結果を用いて
文の構造を決定する
例えば、名詞+動詞 など
4.意味解析
文の意味を決定する
CBOWモデル
自然言語処理で、対象の単語の前後に現れる単語から、
その単語を推測する
コーパス
自然言語処理のため、など、目的をもって集められた大量のテキストデータ
のこと
1.形態素解析
文章を形態素(品詞など)に分ける
2.単語の分散表現
分散表現とは、単語を数値として示すもの
Word2Vecは、単語の分散表現の1つ