機械学習とか形態素解析とか使わずに手っ取りはやく単語を抽出する方法ってないか？
IDFの計算をやってみたいだけで「連続するカタカナは単語である」とかその程度の規則で構わないんだけど。