Hadoop
PigのExplain文にはgraphvizのdotファイルで出力する機能があるので、それを使ってGVEditというので開くとPigの処理内容を図示できる 元記事: Visualizing Pig explain plans http://www.simon-fortelny.com/?p=118 元のスクリプト文 student = LOAD './stud…
簡単なとこで引っかかったのでメモ。 「Error reading task outputInvalid argument」とか出てmapperの一部やreducerで止まった。 最初CDH3u1に上げたあたりを疑ったけど、CDH3u1が悪いんじゃなくて/etc/hostsにマシン名:LANのIPって書かなかったのが問題で…