概要 MeCabのデフォルトでは半角記号が名詞、サ変接続とされてしまう。 $ mecab ; ; 名詞,サ変接続,*,*,*,*,* EOS この問題を解消するために未定義語の辞書を編集して、半角記号が記号として取り扱うことができるようにする 前提環境 Linux (CentOS7.3) MeCa…

インストール方法 $ sudo yum localinstall -y http://mirror.centos.org/centos/6/os/x86_64/Packages/nkf-2.0.8b-6.2.el6.x86 _64.rpm nkfでEUC-JPなファイルをUTF8に変換し、変換元を書き換える $ nkf -g hoge.csv EUC-JP (LF) $ nkf -w --overwrite hoge…