前回は「ラムネマンゴーココナッツパフェ」をmecabが単語に分けてくれない、という問題が未解決。
mecabのオプションでそれっぽいのがないかなと見てみる。
$ mecab -h
を見ながらそれっぽいのを探してみたが、–levelがそれっぽいかなと思ったけど違う感じだし、–level 1と2で–margnalとか–nbest使ったら？って言われるからそっちも試してみるが正直うまくいかない。ラムネマンゴーココナッツパフェはラムネマンゴーココナッツパフェのまま。
そこで色々調べているとChasenとKakasiとMeCabの形態素解析・わかち書きの比較っていうサイトが出て来て、ブラウザ上でそれぞれを試せるのだけど、Chasenならラムネマンゴーココナッツパフェを分割できることが確認できたのでChasenを次は入れてみる。
mecabは保留。
前の記事でmecabとmecab-pythonをmacに入れてみたので、csvファイルを読んでmecabにかけてみる。
csvは普通にexcelで作る。こんなかんじでいいや。
data.csvという名前で保存した。
id,name 1,すもももももももものうち 2,いちごパイカスタードパフェ 3,ラムネマンゴーココナッツパフェ
あとはcsv読み込んでmecabかけるpythonを書く。
pythonは正直あんまりわかってないから間違ってるかもしれないけど、一応動く。
#!/usr/bin/python
# -*- coding: utf-8 -*-
import MeCab
import csv
csvFile=open('data.csv','rU')
csvFile.next() # 先頭行は今回見出し行だから飛ばす
csvReader=csv.reader(csvFile)
for row in csvReader:
rowId=row[0]
sentence=row[1]
print '-'
print 'id : '+rowId
print 'sentence : '+sentence
try:
t=MeCab.Tagger()
m=t.parseToNode(sentence)
while m:
if m.surface=='':
m=m.next
continue
print 'surface : ' + m.surface
print 'feature : '+m.feature
m = m.next
except RuntimeError, e:
print "RuntimeError:", e;
実行する。
$ python example.py - id : 1 sentence : すもももももももものうち surface : すもも feature : 名詞,一般,*,*,*,*,すもも,スモモ,スモモ surface : も feature : 助詞,係助詞,*,*,*,*,も,モ,モ surface : もも feature : 名詞,一般,*,*,*,*,もも,モモ,モモ surface : も feature : 助詞,係助詞,*,*,*,*,も,モ,モ surface : もも feature : 名詞,一般,*,*,*,*,もも,モモ,モモ surface : の feature : 助詞,連体化,*,*,*,*,の,ノ,ノ surface : うち feature : 名詞,非自立,副詞可能,*,*,*,うち,ウチ,ウチ - id : 2 sentence : いちごパイカスタードパフェ surface : いちご feature : 名詞,一般,*,*,*,*,いちご,イチゴ,イチゴ surface : パイカスタードパフェ feature : 名詞,一般,*,*,*,*,* - id : 3 sentence : ラムネマンゴーココナッツパフェ surface : ラムネマンゴーココナッツパフェ feature : 名詞,固有名詞,組織,*,*,*,*
動いた。
動いたけど、あんまり分解できてないのがわかる。
「すもももももももものうち」はきっちり分解できてるけど、「いちごパイカスタードパフェ」は「いちご」と「パイカスタードパフェ」にしかわけれてない。パイカスタードパフェっていう一般名詞は無いと思うけど辞書に入ってるのかな。
「ラムネマンゴーココナッツパフェ」に至っては1個の固有名詞ってことになってる。
これではイマイチ。
次はmecabのオプションを見てみよう。細かく分ける方法があるかも。
GoProをプログラムから制御してみた。GoProはHero3 plus black edition。Macは10.9.2。
ライブラリを調べてみる。
pythonのライブラリ
https://github.com/joshvillbrandt/GoProController
Node.jsのライブラリ
https://www.npmjs.org/package/gopro
が出て来た。
pythonはmacに最初から入ってるから、と思って動かしてみるけど何かライブラリが足りないっぽくてエラー出るし、作者はUbuntuで動くようにしか作ってないみたいだし、頑張ってMacで動くようにする前にNodeのほうを試す。
Node.jsは前に入れたのが入ってるし。
nodeモジュールをインストールする。
$ npm install gopro
exampleフォルダには、4つくらいサンプルがあるから動かしてみる。
$ cd node_modules/gopro/examples $ node status.original.js http://10.5.5.9/bacpac/se?t=jambikassu ReferenceError: body is not defined
エラーが出た。
status.jsを開いて見るとパスワードを入れる必要があるみたいので書き換える。
var cam = new Camera('10.5.5.9', 'mypasswd')
new Camera()の第2引数を自分でgoproに設定したwifiパスワードに書き換える。
再度実行。
$ node status.js
http://10.5.5.9/bacpac/se?t=kosegopropasswd
status byte 0 0
status byte 1 100
status byte 2 1
status byte 3 0
status byte 4 4
status byte 5 0
status byte 6 65533
status byte 7 0
status byte 8 82
status byte 9 1
status byte 10 0
status byte 11 1
status byte 12 11
status byte 13 2
status byte 14 1
status byte 15 1
camera status { ready: true }
正常なステータスが帰って来てるっぽい。
ここまでは簡単だったので他のサンプルも動かしてみる。
HTMLのテキストに何か面白いことができないか試す。マウスの軌跡がびょんびょんすると蟻の巣みたくなる。
View
日本語形態素解析をしてみたい、ということでMacにMeCabとmecab-pythonを入れた。
環境はMac OS X 10.9.2 Marvericks
MeCabは0.996
macportsとかhomebrewとかは今回は無し
1 MeCabのインストール
http://mecab.googlecode.com/svn/trunk/mecab/doc/index.html#download
でダウンロードURLを確認
$ cd ~/Downloads $ curl -O https://mecab.googlecode.com/files/mecab-0.996.tar.gz $ tar zxfv mecab-0.996.tar.gz $ cd mecab-0.996 $ ./configure $ make $ make check
2 MeCab用の辞書のインストール
http://mecab.googlecode.com/svn/trunk/mecab/doc/index.html#download
でダウンロードURLを確認
$ cd ~/Downloads $ tar zxfv mecab-ipadic-2.7.0-20070801.tar.gz $ cd mecab-ipadic-2.7.0-20070801 $ ./configure --with-charset=utf8 $ make $ sudo make install
3 MeCabのインストール確認
$ mecab すもももももももものうち すもも 名詞,一般,*,*,*,*,すもも,スモモ,スモモ も 助詞,係助詞,*,*,*,*,も,モ,モ もも 名詞,一般,*,*,*,*,もも,モモ,モモ も 助詞,係助詞,*,*,*,*,も,モ,モ もも 名詞,一般,*,*,*,*,もも,モモ,モモ の 助詞,連体化,*,*,*,*,の,ノ,ノ うち 名詞,非自立,副詞可能,*,*,*,うち,ウチ,ウチ EOS
いけた
4 mecab-pythonのインストール
https://code.google.com/p/mecab/downloads/list
でダウンロードURLを確認
$ curl -O https://mecab.googlecode.com/files/mecab-python-0.996.tar.gz $ tar zxfv mecab-python-0.996.tar.gz $ cd mecab-python-0.996
READMEを読む
$ python setup.py build $ su $ python setup.py install
とあるのでやる
error: command 'cc' failed with exit status 1
とか言われるのでググる
MarvericksにしてPILのインストールがコケる件 – Qiita http://qiita.com/noblejasper/items/797849a6c3c603016166
xcode-select --install
をする、なおらず
mecab-pythonをMacにインストールする – Qiita http://qiita.com/wwacky/items/e1e3b7cbfa3c4da4d877
を見る
$ export CFLAGS=-Qunused-arguments $ export CPPFLAGS=-Qunused-arguments
をするとよいようだ（内容はわかってない、とりあえずやってみる）
$ python setup.py build $ python setup.py install
いけた
5 mecab-pythonのテスト
mecab-python-0.996にtest.pyがあるのでそれを実行する
$ python test.py 0.996 太郎 名詞,固有名詞,人名,名,*,*,太郎,タロウ,タロー は 助詞,係助詞,*,*,*,*,は,ハ,ワ この 連体詞,*,*,*,*,*,この,コノ,コノ 本 名詞,一般,*,*,*,*,本,ホン,ホン を 助詞,格助詞,一般,*,*,*,を,ヲ,ヲ 二 名詞,数,*,*,*,*,二,ニ,ニ 郎 名詞,一般,*,*,*,*,郎,ロウ,ロー を 助詞,格助詞,一般,*,*,*,を,ヲ,ヲ 見 動詞,自立,*,*,一段,連用形,見る,ミ,ミ た 助動詞,*,*,*,特殊・タ,基本形,た,タ,タ 女性 名詞,一般,*,*,*,*,女性,ジョセイ,ジョセイ に 助詞,格助詞,一般,*,*,*,に,ニ,ニ 渡し 動詞,自立,*,*,五段・サ行,連用形,渡す,ワタシ,ワタシ た 助動詞,*,*,*,特殊・タ,基本形,た,タ,タ 。 記号,句点,*,*,*,*,。,。,。 EOS BOS/EOS,*,*,*,*,*,*,*,* 太郎 名詞,固有名詞,人名,名,*,*,太郎,タロウ,タロー は 助詞,係助詞,*,*,*,*,は,ハ,ワ この 連体詞,*,*,*,*,*,この,コノ,コノ 本 名詞,一般,*,*,*,*,本,ホン,ホン を 助詞,格助詞,一般,*,*,*,を,ヲ,ヲ 二 名詞,数,*,*,*,*,二,ニ,ニ 郎 名詞,一般,*,*,*,*,郎,ロウ,ロー を 助詞,格助詞,一般,*,*,*,を,ヲ,ヲ 見 動詞,自立,*,*,一段,連用形,見る,ミ,ミ た 助動詞,*,*,*,特殊・タ,基本形,た,タ,タ 女性 名詞,一般,*,*,*,*,女性,ジョセイ,ジョセイ に 助詞,格助詞,一般,*,*,*,に,ニ,ニ 渡し 動詞,自立,*,*,五段・サ行,連用形,渡す,ワタシ,ワタシ た 助動詞,*,*,*,特殊・タ,基本形,た,タ,タ 。 記号,句点,*,*,*,*,。,。,。 BOS/EOS,*,*,*,*,*,*,*,* EOS EOS filename: /usr/local/lib/mecab/dic/ipadic/sys.dic charset: utf-8 size: 392126 type: 0 lsize: 1316 rsize: 1316 version: 102
できた