White scenery @showyou, hatena

If you have any comments, you may also send twitter @shsub or @showyou.

Hadoop

PigのスクリプトをGraphvizで表示する

PigのExplain文にはgraphvizのdotファイルで出力する機能があるので、それを使ってGVEditというので開くとPigの処理内容を図示できる 元記事: Visualizing Pig explain plans http://www.simon-fortelny.com/?p=118 元のスクリプト文 student = LOAD './stud…

Ubuntu11.04(natty)にCDH3u1を入れたらReducerが動かなかった

簡単なとこで引っかかったのでメモ。 「Error reading task outputInvalid argument」とか出てmapperの一部やreducerで止まった。 最初CDH3u1に上げたあたりを疑ったけど、CDH3u1が悪いんじゃなくて/etc/hostsにマシン名:LANのIPって書かなかったのが問題で…