はじめに:2010年弾丸ツアー 今年一年を一言でまとめると、「データと向き合った」一年でした。2009年の終わり、私は The Datacenter as a Computer の読書会を通して、分散システムによる大量なデータの処理がこれからの時代にもっと重要になるということを…

概要 イベント名 Hadoopソースコードリーディング第6回 URL http://atnd.org/events/10425 日時 2010/12/17 19:00 - 21:30 場所 楽天株式会社 関連リンク twitterハッシュタグ #hadoopreading Ust http://www.ustream.tv/recorded/11480862 Togetter http://…

Code complete ch22_developper_testView more presentations from Sho Shimauchi.某所で開催中の Code Complete 読書会に誘われたので参加してきました。私の担当は22章の「開発者テスト」です。ユニットテストの話や同値分割とか境界値分析の話など開発者…

第2回のレポートはこちら 概要 イベント名 Hadoopを中心とした分散環境での開発方法論・モデリング・設計手法等についての座談会(第3回) URL http://atnd.org/events/9098 日時 2010/11/19 18:30 - 21:00 場所 スター研修センター神田3F 関連リンク twitter…

Hadoop本2版を買ったその一週間後にDeals of the day で半額セールやられて死にたくなったので腹いせに書く はじめに ここに書いてあるのは全部参考リンク・文献からひっぱってきただけで、ほとんど全部検証してない。間違いがあればなるべく早めに更新する…

自分用メモ。前回はこちら リンク集(2) Google group Google Groups S4論文 リンク先に論文のpdfあり フロー図があるので英語読めない人でも見るのおすすめ API javadoc 前回 API は公開されてないと書いたが、前回の記事の投稿直後に公開された。 各コンポ…

(2010/11/06) 続き書きました自分用メモ。 注意:「リアルタイム」について Yahoo! からの最初のリリースで「リアルタイム」MapReduce と書かれていたので仕方なくそう書いているが、人によっては聞いただけでキレるので注意すること。(特にOS屋さん相手のと…

昨年末にニコニコ動画に投稿された、「等身大初音ミクを作ってみた」という動画を見て、私は大きな衝撃を受けました。その技術力もさることながら、2年もかけて作ったというその執念に非常に感銘を覚えたものです。ロボット制作だけでなく、理想の服を着せた…

青木さんのサイト、まだまだ読み続けてます。前回はこちら。 私のヒーローたち http://www.aoky.net/articles/paul_graham/heroes.htm中学入試の面接などで、「尊敬する人は誰ですか？」などという質問があったりしますが、こうした質問は子供に限らずその人…

第1回 第2,3回 日時 2010/10/17 19:30 - 21:00 場所 都内某所 挑戦者 marqs shiumachi 標的 Data-Intensive Text Processing with MapReduce 範囲 5章残り(marqs), 6.1 (shiumachi) Data-Intensive Text Processing with MapReduce ch6.1View more presentat…

(2010/10/19追記) 続き書きました ここ最近ずっと、青木さんのサイトを読み直しています。なぜ急に思いついたかというと、はてブでお気に入りに登録しているどなたかが青木さんのサイトの古い文書をブックマークしていたのを見て久しぶりに読み直したくなっ…

第1回はこちら 第2回 日時 2010/09/26 19:30 - 21:00？ 場所 都内某所 挑戦者 marqs shiumachi 標的 Data-Intensive Text Processing with MapReduce 範囲 3章残り(marqs)4章途中まで(shiumachi) 第3回(take1) 10/3にやるはずだったが、marqs が会場に着いた…

Hadoop: The Definitive Guide作者: Tom White,Doug Cutting出版社/メーカー: Oreilly & Associates Inc発売日: 2010/10/14メディア: ペーパーバック購入: 2人 クリック: 149回この商品を含むブログ (14件) を見る10/14に第2版が出るのですが(電子書籍版は既…

業界トップ のエンタープライズ Hadoop 企業 Cloudera に入社しました http://www.cloudera.co.jp/ 今年の6月に、「平成２１年度 産学連携ソフトウェア工学実践事業報告書」というドキュメント群が経産省から公表されました。そのうちの一つに、NTTデータに…

日時 2010/09/23 19:00 - 21:00？ 場所 都内某所 挑戦者 id:marqs id:shiumachi 標的 Data-Intensive Text Processing with MapReduce 範囲 1-2章(shiumachi),3章途中まで(marqs) Data-Intensive Text Processing with MapReduce(Ch1,Ch2)View more presenta…

明日から使える会議室陣形入門ここで書かれてたロマサガの陣形を絵にしてみました。 完全に勢いで書いてみただけです。 (陣形思い出そうとしたら案外うろ覚えだったので焦ってググったのは内緒です)ところでロマサガ3のリメイクはいつ出るんでしょうか。

2年半以上も前にほぼ同様の記事を書いたのですが、以下の2つの記事を読んだら再度掲載したくなりました。http://blog.livedoor.jp/insidears/archives/52373634.htmlhttp://anond.hatelabo.jp/201009171916352008年の初め、The Linux Foundation はオープン…

id:kaigai の主催する勉強会で発表してきました。Hadoop for programmerView more presentations from shiumachi. 答えられなかった質問 Shuffleフェーズって、ソートをどういう仕組みでやってるの？ データ全部をなめてるの？ Partitionerというクラスでデ…

なんかお酒に酔った勢いで書いてみます。 よく「日本はもうダメだ」とか「海外に脱出しよう」ということを聞きます。一方で、「でも英語ができないし」とかいう悩みもよく聞きます。じゃあ、もし海外の企業、たとえばシンガポールあたりの会社が「日本語だけ…

まあそれだけですが。http://github.com/shiumachi/configs/blob/master/.zshrc設定ファイルは全部 configs というディレクトリにまとめて、本来の場所へはシンボリックリンクを貼るように変えました。これで全設定ファイルを集約できそうです。次は .emacs …

年 月 Listening Reading Total 2006 08 365 285 650 2007 07 425 335 760 2010 08 445 395 850 (表のフォーマットはphoのものを勝手に借りました。thx!) 今回は特に素の自分の実力を試したかったので、事前勉強もせずに受けてみました。3年前は1ヶ月ぐらい…

8/15-8/19 は夏休みをいただきました。 通算25日。 さっき枚数数えたら500枚超えてました。 よく(飽きずに)撮ったものです。 次回、感動のフィナーレ。

あるオブジェクト群において、全オブジェクト間の類似度を計算するにはプログラムが全データにアクセスできる必要があります。 しかしこれではHadoop上でMapReduceによる計算ができません。 なぜなら、Map/Reduceの処理は分割できなければいけないからです。…

まだまだ続きます、東北旅行ネタ。今日は、旅のお供 HTC Desire を紹介します。HTC Desireは一ヶ月ほど前に入手し、ちらほらと遊んではいましたが、この旅でようやくその真価を発揮できたのかなと思います。ほんと、これなかったらどうなっていたことやら。…

注意:この記事には大変想像力を刺激する画像が含まれています。あなたはこの画像を見てあらぬものを想像してもいいし、ただの写真として無感動に見ることもできます。 というわけで、前回書いた通り、恐山を別枠で紹介します。 恐山、イタコの話だの祟られる…

前回の東北旅行で大変お世話になった、北海道＆東日本パス。 wikipediaから特徴を書き出してみます。(2010年度夏期) 10,000円 JR東日本・JR北海道に加え、青い森鉄道、いわて銀河鉄道などが連続7日間乗り放題 ただし期間は事前指定 青い森鉄道・いわて銀河鉄…

会社の夏期休暇を利用して東北一周旅行をしてきました。 目的地は白神山地と恐山でしたが、残念ながら天候不良のため白神山地は行けず。 その代わり青森観光は堪能しましたし、恐山は素晴らしいところでしたので非常に満足した旅行でした。 概要 日程 2010/0…

インドから短期出張してきたある一個人に聞いた話なので、ここに記された内容がインド全体にあてはまるとは決して思わないでください。 本やネットではなかなか得られない知識をもらえて、非常に感謝しています。 お礼代わりに、私も可能な限り日本に住んで…

食事の写真を撮る友人がいます。 空の景色を撮る友人がいます。 遊びにでかけた思い出を撮る友人がいます。 私はただ観測します。

概要 イベント名 Hadoopを中心とした分散環境での開発方法論・モデリング・設計手法等についての座談会(第二回) URL http://atnd.org/events/5987 日時 2010/07/26 18:00 - 20:00 場所 スター研修センター 御茶ノ水 Sun（サン）1F twitterハッシュタグ #hado…