前回は既存のコードからHadoopのコンテナを動かすところまで書きましたが、今回はそれに手を加えて複数ノードで動くようにしました。 少し試行錯誤してたので、ソースだけ置いて要点だけ書いて行きます。 showyou/hadoop-docker at multinode · GitHub まずD…

後半書きました( Hadoop on docker 後編 - White scenery @showyou, hatena ) 書き忘れていましたが、この記事 Spark, SQL on Hadoop etc. Advent Calendar 2014 - Qiita の23日目になります。 はじめはPivotal社の商用SQL on HadoopであるHAWQの話でもしよ…

40社あまりが創立に参加しCloud Foundry Foundationを立ち上げ…Linuxからも積極賛助へ - TechCrunch Cloud Foundryっていう、乱暴に言ってしまうとHerokuみたいなのを自社環境に立てられるツールがあります。元々vmware->Pivotal社で作っていて、それをOSSに…

先週土曜日、Japan.Rでパネルディスカッションの一人として参加しました。割とトークグダグダでしたが、みなさんから山ほどの反応を頂いて感謝しております。japan.R始まったばかりの頃は学術系もしくは広告系の人が多かった気がしますが、今回は思いの外エ…

この記事は #ingadv2014 6日目のエントリーです。 showyouです。ingressアカウントもshowyouで、Enlighted(緑)のA14です。 (余談ですがingressアカウントと他のネットアカウントを一致させるのは好ましくありません。日頃のingress位置情報とネット上の活動…

DB Tech Showcaseでの発表 Pivotal 社員が発表していました。 [db tech showcase Tokyo 2014] D36: 次世代分析基盤 "Data Lake" を支えるPivotalのインメモリ+SQL on Hadoopテクノロジー by Pivotalジャパン株式会社 市村友寛 & 宵勇樹 from Insight Technol…

日本のデータベース系のコミュニティ、なぜイマイチ盛り上がらないのか - kuenishi's blog uenishiさんが書いた記事が、個人的にも結構納得できる内容だったので、自分の意見も書いておく。ただし自分はコンピュータ周りの知識は独学で、どっちかというと機…

http://pydata.tokyo/ PyData(http://pydata.org/)ってのは海外で開催されているPython向けデータ分析ツールの集まりです。先日のPyConJPで日本でもデータ分析系の需要があることがわかり、コミュニティを作成したようです。 #PyDataTokyo のお知らせ - ALBE…

<a href="http://showyou.hatenablog.com/entry/2014/09/14/104328" data-mce-href="http://showyou.hatenablog.com/entry/2014/09/14/104328">Python2ユーザから見たPython3 - White scenery @showyou, hatena</a> Python2ユー…

ひとつ前の話では単語羅列して力尽きたので、いくつか特に面白かった発表について列挙します。 以下の記事にも書かれているので、ここに乗ってない情報は見ていただければと思います。ほかにもtwitterで#pyconjpと検索すればこれから出てくるかもしれません…

終わりました。 1日目の終わりにも書きましたが、「英語ができない、勘と経験と度胸に頼る」というイメージどこいったんだって感じの、今までとは違う感じのPyCon JPだったかと思います。スタッフすらやってないのに私がPyConの理想像あげてしまうのも申し訳…

この記事はpycon.jpのKeynoteでpython3が残念っていう話があったので、それについて書きます。 なぜPython3を使わないのか 文法が少し変わったので習得にコストがかかる(特に3.0とか3.1はかなり互換性捨てられてた気が) C周りの補助機能が亡くなった気が(お…

あとで書く 一言で言うと、予想以上に数値計算・英語セッションの参加者が多くてよかったとこですね。 参考： PyCon JP 2014 1日目参加レポート #pyconjp - Time Flies PyCon JP 2014 1日目参加レポート #pyconjp - Time Flies

Twitter apiとはなんだったのか？ | F's Garage＠fshin2000 こちらも思いついたものを書いときます。 立場的には「Twitterを草の根的にいじってた開発者」という立場です。 Twitter APIとはなにか？ ひどい言い方すると、スクレイピング*1とかやられてすごく…

昨日、寿司を確認する(食べる)会が渋谷で開かれました。 現状確認会 on Zusaar 即興でLTしようかと思いましたがMacbook持ってなかったので今作りました。 注) 個人的な見解なので会社の見解と異なる場合がございます 寿司と言えば？ 回転寿司。 すぐに、途切…

なんとなく思い立ったんで書いてみた Iaas, paasと利用者 from show you

前回の日記ではアメリカ行った人が「アメリカすげー。日本も変えて行かないと」的な感じな事書いてましたが、自分も思うところはあって、少し変えようとしたことがあります。 それは"日本でのpythonはWeb開発言語でしかない"というイメージを覆したい、とい…

うーん、まずプロフィールの長さで本文読む気失せました。ざっと読んだ感じ、「俺はなにもしないけど日本の研究職もっと待遇よくなればいいのに」としか見えませんでした。 当然お金が降ってくる裏にはお金を取ってくる源があるはずで、アメリカの場合は大学…

というか、就職しました。 EMCでPivotalの仕事をします。詳しく何やるのかははっきりしてないですが、PivotalHDとかGreenPlum DBあたりはやると思います。HawkとかGemfireでImpala, Sparkあたりとベンチしてみたいですね(ワクワク) 7/8のHadoop Conference J…

転職活動で心を病んだ件について 就活生が「クソ企業」告発、採用活動の注意点 | JIJICO [ジジコ] | 専門家による時事ネタコラム （人手不足列島）雇用、増えるは非正社員ばかり 求人２２年ぶり高水準でも：朝日新聞デジタル って参考文献を上げると、あたか…

ちょっと前の話になりましたが、3月付で会社を辞めておりました。 (twitterなどで軽く仄めかしてはおりました) 極めて個人的な退職にも関わらず、送別会を開いていただくなど入社から退職まで色々とお世話になりました。 3月からは学会に顔を出したり、誘い…

http://event.shoeisha.jp/dss/20140627/ 午前中の基調講演はひたすら辛かった。 午後遅くになるにつれてだんだん面白い話が出てきた。やっぱ自分技術屋なんだなぁ。。 聞いたセッションは以下の通り。 貴重公演 MapR TreasureData(というか@doryokujin) Sis…

ssig33.com - LINE の件考えられる可能性 いやなんかでもさ、この辺あんま笑い事じゃなくて、 Elastic MapReduce 使ってますみたいな会社があったとして、「企業が大量に所持している個人情報が外国企業の Amazon のサーバーに流出している！！」みたいな事…

元ネタはこちら http://togetter.com/li/683941 「手取り15万円で家賃7万円ってやっぱ詰みますね!」 全部合わせると「そりゃ詰むよ！」って感じなんだけど、部分部分で当たり前なのかどうか分かれると思うので条件を書き下してみます。 初任給手取り15万 都…

スペック的には Atom Z3740 @ 1.33GHz 1280x800 8インチ IPS液晶 2GB Mem 32bit Windows 8.1 64GB Disk(32GBもあり) 350g とか。 ネットで探すと2万ちょいで手に入ります。 iPad miniと比べると横幅(長辺)一緒で縦が狭い感じ。 ディスプレイの発色は綺麗。

ここでは自分が触ってみた感じについて主観的に書いていきます。書いている内容は少し前(0.8くらい)なのもあり、事実と異なるかもしれないのでその時は指摘下さい。 Dockerとは何か Dockerとは - 意味/解説/説明/定義 ： IT用語辞典 でも読むかググってくだ…

先日台湾に行った時の話ですが、nexus5が現地のSIMで使えたことを書いておきます。 まず前提としての話ですが、 海外で携帯を使うには、(i)国際ローミング機能を使うか、(ii)WiFiをレンタルするか、(iii)現地でSIMを購入しSIMフリー携帯に挿入する必要があり…

ここんとこの活動紹介。 - 台湾で開催された「PyCon APAC 2014」参加レポート #1 PyCon APAC 2014開催の台湾へ，そしてイベント1日目の模様：台湾で開催された「PyCon APAC 2014」参加レポート｜gihyo.jp … 技術評論社 一部担当しております。去年は1コーナ…

http://plus.timescar.jp/ Timesカープラスは、カーシェアリング、すなわち複数人でいくつかの車を使いまわすサービス。長時間借りるならばレンタカーの方が安いかもしれないけど、短時間ならば圧倒的に安い。15分206円とかだし、ガソリン代かからないし(長…

Scikit learn and favor from show you 「pyconにScipy/Numpy/Scikit-learnネタ投稿しましょう」っていうだけのネタだったので3ページ目以降は既知の方には全く情報量なかったですね。 余談ですが先日の見える化会はScipy使いが1人でほとんどインフラエンジ…