忍者ブログ

いけいけ機械学習

統計、機械学習、AIを学んでいきたいと思います。 お役に立てば幸いです。

NLPにおける単語の正規化の例

1.文字種の統一

半角で書かれているもの、全角で書かれているものを揃えるなど

2.用語の統一

同じものを別の言葉で表現しているものの統一など


PR