形態素とは、文章をそれ以上に分解できない単位をいう。
吾輩は猫である。
これを文節に分ければ、
吾輩は 猫で ある。
形態素分析をすると、
吾輩 は 猫 で ある 。
となる。
形態素分析に必要なツールは、ありがたいことに公開されている。
これはDOSコマンドで実行することになるので、Rで使うためのライブラリが提供されている。