https://twitter.com/Takakura_Anzu ついかっとなってもふもふしたくて作った。当然ですが非公式です。アイコンはtwitter用に用意されてるものを使っております。 今のところ定期更新はなく、followerの一部の単語に反応するようになってます。あと@takakura…

言語処理学会行ってるときにバッテリーが２時間くらいしかもたなかったり、「バッテリーの交換修理」といったメッセージが出てたので変えてみた。 手順としてはhttp://www.jumbo-stickies.com/sticky/node/740にあるのと全く同じ。 購入元はAmazonのA1405っ…

なんかCentOSのSElinux並にひっかかんじゃないのかこれ・・ 環境 Ubuntu 12.04 LTS MySQLのデータ設置ディレクトリを既存とは別のとこに設定 apparmor使ってればどのOSでも起きそう 症状 apt-get dist-upgradeでmysql-server周りの更新に失敗する(=起動でき…

手元、と言ってもお外から家につなぐIP変わってたので、EC2(m1.large, Ubuntu 12.04)上に立ててみた。 取り立てて記述する手順もなく、このあたり読んでapt-getでいれまくって設定すればいい。s3使えよとか普通の分散やれよって感じだが、今回はあくまでCDH5…

先日契約したNexus5が5GBの転送制限があり、また通信範囲的に不安なのでDocomo系の安SIMを契約した。それとGP02が2980円で売ってたので購入した。 GP02はSIMフリーで、通信規格がDocomoと同じためDocomoの安SIMが使える。ただしLTE通信は通信帯の問題で使用…

まずは3.11ということで、黙祷をします。 それはともかくとして、バスや電車の優先席付近では、ペースメーカに影響をおよぼす為電源を切れっていう話があるのはみなさん知ってると思います。一方で現行の3G通信やLTEは影響を及ぼさないって話があるのも一部…

Hadoopとその周辺の紹介 - BPStudy http://t.co/ywmVJOmDth 上の資料、公開頂きありがとうございます。 個人的にここは違うのではないかというのが幾つかあったので書きます。自分が書くとこも怪しいかもしれないので後ろからshiumachiせんせーとかが援護す…

参考: http://nyatla.hatenadiary.jp/entry/20131231/1388467696 こちらもいろいろぶん回して一ヶ月程度経ちましたんで経過報告します。 金額は確定じゃないんで明記しづらいですが、若干の黒字になる見込みです。多分nyatla氏よりは利益率低いでしょう。 売…

検索しやすいようにBitcoinとは書いてますが実際にはLitecoinとか掘ってます。 参考サイト：http://nyatla.jp/nyartoolkit/wp/?page_id=952 まず最初に結論から書きますと、 空いてるPCにRadeon刺す 暖房代わりに温める のはありです。 電気代/回収コスト的…

タイトルは最近の流行からHadoop 倒壊とか書こうと思いましたがHadoopは倒壊しておりません。 ( https://twitter.com/DeNAPR/status/407831958916313088 ) 1. はじめに この記事はshowyouの主観に基づくものであり、所属する会社等を代表する記事ではないこ…

なんか今日Python APACでdata dogというツールが紹介されてたので、ちょっとググったらいくつかツールが見つかったのでメモ。 元の質問 http://www.quora.com/What-are-the-best-free-alternatives-to-Splunk 回答： https://papertrailapp.com/ http://www.…

pythonでBig Dataを使うというものをドヤ顔で発表しようと思ったのですが、既にこんな記事がありました。 http://blog.cloudera.com/blog/2013/01/a-guide-to-python-frameworks-for-hadoop/ 他にも、HadoopじゃないけどSparkならサンプルがpythonだったりと…

※旅行した日記は改めて書く予定 この休みになんとなく広島まで行ったのですが、行きたいとこが駅から離れてるとこなのでレンタカーを借りました。 ニッポンレンタカーを見たところ、電気自動車が普通乗用車と大差ない値段で借りられたので、12時間で借りてみ…

試しにpyramidを触っていて軽くハマったのでメモ。 tutorial見てdebugでセットアップしたのにdebug toolbarが出ないと思ったら、 ここを直す必要があった。 debugtoolbar.hosts ここにアクセス元のIPを入れる。host名がサーバに登録されてるならホスト名でも…

ってこれだけだと何やってるかわからないので解説。 通常crontabに入れてる実行スクリプトを、jenkinsのジョブとして登録しています。 こうすることで、 エラーが有った時だけエラーを通知 cronと違い標準出力に出力してもOK 複数のマシンのジョブを一括して…

なんとなく、自分も勉強がてらまとめてみました。主に先日のHadoop Conferece Japanから引っ張ってきてるので、 情報的にほとんど価値は無いと思いますが、誰かの助けになったら幸いです。あと資料は随時更新していくつもりです。うちの会社のも載せろ！って…

付け根だけ取れた。。 付け根をSATAのケーブル側にはめて金色の線を入れたら一応通信はできたので、急いでデータ退避。

EasyBotterでTwitter Botを作成して運用している方へ http://anond.hatelabo.jp/20130107170312 要点だけ書いてしまうと、 問題：bot.phpが外から見えるため誰でも叩きホーダイ。なので修造bot暴走みたいなことが起きる。 対策(簡易)：妥当な線としては.htac…

デスクトップ ML110 G7かExpress5800/S70でも買えばOS除いて2万以内余裕。メモリもDDR3なら大分値崩れしたし(ただし上の2つはデスクトップ向けのじゃなくて、Unbufferedっていうちょっと違うメモリがいるかも。値段あまり差がないけど) ってあれこれWindowsS…

データサイエンティストになりたい学生の為の就職先の選び方 shakezoの日記 http://d.hatena.ne.jp/shakezo/20130104/1357273241 「データサイエンティスト＝データ分析者」という意味で捉えるなら、大筋合ってんじゃないかって思います。ただデータサイエン…

普段頑張ってる自分へのご褒美として買いました。 まず最初持った感覚として、軽い！ 今まで使ってたiconia A500はMacBook Airと持ち歩くにはきつかったですが、これなら一緒に持ち歩けそうです。 Nexus 7もよさげでしたが、この辺の微妙な大きさでiPad mini…

http://d.hatena.ne.jp/shiumachi/20121007/1349576062 http://www.ryuzee.com/contents/blog/3244 これは個人的な感覚ということを始めにお断りしておきます。 幾つかの企業で技術者が必要ということは声を大にして言われています。だけどこれから必要にな…

shoheiという方がDe社に入られたと聞いたので誰それ？って思ったらscreenで大変お世話になった卜部さんでした。もっと雲の上の楽園に勤めてると思ってた。しかしtohaeといいRuby力上がってますね。負けるなpython。 今更ですがpythonのコーディング支援プラ…

問題 1. A, Bは並行稼働 2. CはA,Bが終わってから実行 3. A,B,Cは実行時間が長い(数分〜数時間レベル) 4. あまり手の凝ったことはしたくない こんなときにどう処理するか？

特に方向性決まってないですが、ある程度RTがあったら実装方法検討しようかと思います。 これ実装されればTwitter社にとってもいいマネタイズになると思うんだけどどうなんでしょうね。

http://d.hatena.ne.jp/tagomoris/20120814/1344933538 https://ccp.cloudera.com/display/CDHDOC/New+Features+in+CDH3#NewFeaturesinCDH3-What%27sNewinCDH3Update5 WebHDFSサポートと書いてたのに入ってなくて罵詈雑言を飛ばしてたCDH3ですが、やっとupda…

っていうのに数日悩まされ続けて、ある程度軽減できる対処法が見つかったので展開しておきます。 (既にhiveのuser mlには投稿してます) 再現方法：https://gist.github.com/3234772(英語) 簡単に言ってしまうと、link.txtを置くような形式のテーブルに対して…

昨日日本語版が発売されたHBase本ですが、なんと献本頂きました！ お誘いくださったClouderaの@shiumachiさん、またオライリー社様にはこの場をもって感謝の言葉をお伝え致します。 実は英語版が職場にあるのですが、日本語版では訳者の玉川竜司さんが書かれ…

redisは使いやすい。コーヒーを沸かす間にサンプルが実行できる。だけどpythonで実行してるときにこんなエラーに遭遇した。一体これはなんだろう？ client.zadd(u'これ', u'グロ', 1) ResponseError: Operation against a key holding the wrong kind of val…

スライド http://bit.ly/LgvU1n Twitter社での大規模機械学習として、Tweetのネガ・ポジ判定をロジスティック回帰使ってHadoop+Pigで回してるよ、的な話をしてきました。 ただちゃんと読み切れてなくて、emoticon( :)とか : あと今回デモとして公開してるソ…