Hadoop on Flickr - Photo Sharing!
これは非常に興味深いです。
米Yahoo!はHadoopを使っている事を公表していましたが、日本でも使っているらしいです。
Hadoopで、かんたん分散処理 (Yahoo! JAPAN Tech Blog)
今回の話はMapReduceの処理の流れがどういったものかという感じです。実際に内部どれだけの規模で使用して、これだけの処理時間短縮・効率化という話ではないです。
これで日本でもHadoopに注目が集まって、もっとドキュメントが日本語化されて敷居が低くなってくれればいいなぁ:-)
しかし、6時間かかった処理が、1台マスター/19台スレーブで5分に短縮できたという話ですが、どうやったんだろう…
自分の場合はそこまで劇的に変化しなかったので気になる!
