震災から一週間

この度の地震により亡くなられた方々のご冥福をお祈りいたしますとともに 被災された皆様へ心よりお見舞い申し上げます。 私は東京に住んでいるのですが、幸いにして友人・親族等も含め特に損害を受けずに済みました。 地震の後、東京の人達の反応は様々なも…

Hadoop Conference Japan 2011 参加メモ

私の記事は個人的なメモで、間違った部分も多いため関連リンクを併読することをおすすめします。 特に今回は twitter と並行して読み書きしてたので、結構書き漏れてる箇所多いです。 網羅性とか正確性は期待しないように。 概要 イベント名 Hadoop Conferen…

Python Hack-a-thon 2011.02 参加メモ

概要 イベント名 Python Hack-a-thon 2011.02 URL http://atnd.org/events/9977 日時 2011/02/19 9:00-19:00 場所 オラクル青山センター 13F S3,4,5,6 関連リンク twitterハッシュタグ #aodag togetter http://togetter.com/li/102904

GNU screen メモ

はじめに id:marqs とかに「screen いいよー使うと便利だよー」と薦められながらも「別にそんなに不自由してないし、設定とか調べるの面倒だからいいや」と放置していた GNU screen ですが、年始に読んだnokunoさんの開発環境の記事に screen が載っているの…

CentOS6開発プロジェクトの現状

先週、CentOS 6 はいつ頃出るのかどうか、ふと気になりました。 リリース予定もニュースにならないし、どうしたのだろうと調べていたら、CentOSの開発MLが荒れていることを知りました。 不安を感じた私は調査を続けました。 すると、LWN.net の一つの記事に…

2010年まとめ:データと向き合った一年

はじめに:2010年弾丸ツアー 今年一年を一言でまとめると、「データと向き合った」一年でした。2009年の終わり、私は The Datacenter as a Computer の読書会を通して、分散システムによる大量なデータの処理がこれからの時代にもっと重要になるということを…

Hadoopソースコードリーディング第6回

概要 イベント名 Hadoopソースコードリーディング第6回 URL http://atnd.org/events/10425 日時 2010/12/17 19:00 - 21:30 場所 楽天株式会社 関連リンク twitterハッシュタグ #hadoopreading Ust http://www.ustream.tv/recorded/11480862 Togetter http://…

CodeComplete読書会「22章:開発者テスト」

Code complete ch22_developper_testView more presentations from Sho Shimauchi.某所で開催中の Code Complete 読書会に誘われたので参加してきました。私の担当は22章の「開発者テスト」です。ユニットテストの話や同値分割とか境界値分析の話など開発者…

Hadoopモデリング座談会#3

第2回のレポートはこちら 概要 イベント名 Hadoopを中心とした分散環境での開発方法論・モデリング・設計手法等についての座談会(第3回) URL http://atnd.org/events/9098 日時 2010/11/19 18:30 - 21:00 場所 スター研修センター神田3F 関連リンク twitter…

Hiveクエリチューニングメモ

Hadoop本2版を買ったその一週間後にDeals of the day で半額セールやられて死にたくなったので腹いせに書く はじめに ここに書いてあるのは全部参考リンク・文献からひっぱってきただけで、ほとんど全部検証してない。間違いがあればなるべく早めに更新する…

Yahoo!のリアルタイムMapReduce「S4」メモ(2)

自分用メモ。前回はこちら リンク集(2) Google group Google Groups S4論文 リンク先に論文のpdfあり フロー図があるので英語読めない人でも見るのおすすめ API javadoc 前回 API は公開されてないと書いたが、前回の記事の投稿直後に公開された。 各コンポ…

Yahoo!のリアルタイムMapReduce「S4」メモ(1)

(2010/11/06) 続き書きました自分用メモ。 注意:「リアルタイム」について Yahoo! からの最初のリリースで「リアルタイム」MapReduce と書かれていたので仕方なくそう書いているが、人によっては聞いただけでキレるので注意すること。(特にOS屋さん相手のと…

ニコニコ技術文化祭トークセッション「二次元に行けないなら創ろう!としてしまった人たちの反省会」

昨年末にニコニコ動画に投稿された、「等身大初音ミクを作ってみた」という動画を見て、私は大きな衝撃を受けました。その技術力もさることながら、2年もかけて作ったというその執念に非常に感銘を覚えたものです。ロボット制作だけでなく、理想の服を着せた…

Fine Software Writings 再読(2)

青木さんのサイト、まだまだ読み続けてます。前回はこちら。 私のヒーローたち http://www.aoky.net/articles/paul_graham/heroes.htm中学入試の面接などで、「尊敬する人は誰ですか?」などという質問があったりしますが、こうした質問は子供に限らずその人…

第4回MapReduce本読書会

第1回 第2,3回 日時 2010/10/17 19:30 - 21:00 場所 都内某所 挑戦者 marqs shiumachi 標的 Data-Intensive Text Processing with MapReduce 範囲 5章残り(marqs), 6.1 (shiumachi) Data-Intensive Text Processing with MapReduce ch6.1View more presentat…

Fine Software Writings 再読

(2010/10/19追記) 続き書きました ここ最近ずっと、青木さんのサイトを読み直しています。なぜ急に思いついたかというと、はてブでお気に入りに登録しているどなたかが青木さんのサイトの古い文書をブックマークしていたのを見て久しぶりに読み直したくなっ…

第2回,第3回MapReduce本読書会

第1回はこちら 第2回 日時 2010/09/26 19:30 - 21:00? 場所 都内某所 挑戦者 marqs shiumachi 標的 Data-Intensive Text Processing with MapReduce 範囲 3章残り(marqs)4章途中まで(shiumachi) 第3回(take1) 10/3にやるはずだったが、marqs が会場に着いた…

Hadoop本第2版読書マラソンしませんか

Hadoop: The Definitive Guide作者: Tom White,Doug Cutting出版社/メーカー: Oreilly & Associates Inc発売日: 2010/10/14メディア: ペーパーバック購入: 2人 クリック: 149回この商品を含むブログ (14件) を見る10/14に第2版が出るのですが(電子書籍版は既…

NTTデータのHadoop報告書がすごかった

業界トップ のエンタープライズ Hadoop 企業 Cloudera に入社しました http://www.cloudera.co.jp/ 今年の6月に、「平成21年度 産学連携ソフトウェア工学実践事業報告書」というドキュメント群が経産省から公表されました。そのうちの一つに、NTTデータに…

第1回MapReduce本読書会

日時 2010/09/23 19:00 - 21:00? 場所 都内某所 挑戦者 id:marqs id:shiumachi 標的 Data-Intensive Text Processing with MapReduce 範囲 1-2章(shiumachi),3章途中まで(marqs) Data-Intensive Text Processing with MapReduce(Ch1,Ch2)View more presenta…

明日から使える会議室陣形入門を絵にしてみた

明日から使える会議室陣形入門ここで書かれてたロマサガの陣形を絵にしてみました。 完全に勢いで書いてみただけです。 (陣形思い出そうとしたら案外うろ覚えだったので焦ってググったのは内緒です)ところでロマサガ3のリメイクはいつ出るんでしょうか。

「Linuxの開発に加わるにはどうすればいい?」Linusは言った、「もうそんな質問はするな」

2年半以上も前にほぼ同様の記事を書いたのですが、以下の2つの記事を読んだら再度掲載したくなりました。http://blog.livedoor.jp/insidears/archives/52373634.htmlhttp://anond.hatelabo.jp/201009171916352008年の初め、The Linux Foundation はオープン…

勉強会発表「プログラマのためのHadoop入門」

id:kaigai の主催する勉強会で発表してきました。Hadoop for programmerView more presentations from shiumachi. 答えられなかった質問 Shuffleフェーズって、ソートをどういう仕組みでやってるの? データ全部をなめてるの? Partitionerというクラスでデ…

もしシンガポールの企業が「英語できなくてOK」の求人を出したら

なんかお酒に酔った勢いで書いてみます。 よく「日本はもうダメだ」とか「海外に脱出しよう」ということを聞きます。一方で、「でも英語ができないし」とかいう悩みもよく聞きます。じゃあ、もし海外の企業、たとえばシンガポールあたりの会社が「日本語だけ…

zshrcの設定をgithub上に置いた

まあそれだけですが。http://github.com/shiumachi/configs/blob/master/.zshrc設定ファイルは全部 configs というディレクトリにまとめて、本来の場所へはシンボリックリンクを貼るように変えました。これで全設定ファイルを集約できそうです。次は .emacs …

エコ隊に1年参加したらTOEICの点数が100点近く上がった

年 月 Listening Reading Total 2006 08 365 285 650 2007 07 425 335 760 2010 08 445 395 850 (表のフォーマットはphoのものを勝手に借りました。thx!) 今回は特に素の自分の実力を試したかったので、事前勉強もせずに受けてみました。3年前は1ヶ月ぐらい…

定点観測(74/75/76/77/78)

8/15-8/19 は夏休みをいただきました。 通算25日。 さっき枚数数えたら500枚超えてました。 よく(飽きずに)撮ったものです。 次回、感動のフィナーレ。

Hadoopでできる類似度計算

あるオブジェクト群において、全オブジェクト間の類似度を計算するにはプログラムが全データにアクセスできる必要があります。 しかしこれではHadoop上でMapReduceによる計算ができません。 なぜなら、Map/Reduceの処理は分割できなければいけないからです。…

旅とAndroid

まだまだ続きます、東北旅行ネタ。今日は、旅のお供 HTC Desire を紹介します。HTC Desireは一ヶ月ほど前に入手し、ちらほらと遊んではいましたが、この旅でようやくその真価を発揮できたのかなと思います。ほんと、これなかったらどうなっていたことやら。…

恐山で一泊してきた

注意:この記事には大変想像力を刺激する画像が含まれています。あなたはこの画像を見てあらぬものを想像してもいいし、ただの写真として無感動に見ることもできます。 というわけで、前回書いた通り、恐山を別枠で紹介します。 恐山、イタコの話だの祟られる…