質問: テキストマイニングについての質問です。 タグは無視してください。 文章中に出現する特定の単語の頻度を調べてリスト化する方法が知りたいです。 また、その場合Mecabなどによる形態素解析を行う必要はありますか? Mecabは文章中の全て形態素の頻度を調べることには適していると思いますが、特定の形態素の頻度をリスト化して返すことにも使えるのでしょうか?わざわざ形態素解析する意味もよくわからないため教えてくれると助かります。 形態素解析なしでも特定の単語の出現頻度をリスト化する方法があれば教えてもらえると助かります。
回答: まあ、文字列検索してマッチした回数を数えるのでしょう。 KojiDoiさんのおっしゃるような問題がありますが、それが問題にならなければ使えます。例えば「国会」「ニュース」などを取りたいとか。 パフォーマンス上、とにかく速くないと困るけど、形態素解析の性能は要求されない、とか単に形態素解析器動かすのが面倒くさい、とかそうしたい理由があるのなら、ありです。