「たまに行う大量なバッチ処理」にはAmazon EC2のクラウドサービスを使う - 小宮日記

http://www.hirax.net/techlog/2010/04/19.html#8994 同社では、社内のデータベースサーバを利用して、この処理を実施した場合、7000時間はかかると見積もった。 しかし、米AmazonのIaaS型のクラウドサービスであるEC2を活用し、50台のインスタンス（仮想マシン）を同時に立ち上げ、 分散処理のフレームワークである「Hadoop」を利用したところ、わずか30時間で完了した。おそらくAmazoneEC2の活用としてはこういうのが一番うまいんだと思う。 そういう意味ではbonanzaメソッドの学習なんかも利用すべき(^^; 大学の研究室でクラスターがあるならいいけど、 個人の開発者なんかにはいいんでは。 ただ、PC数台で時間をかける分には電気代しかかからないけど(^^; 単に大規模webサービスで、スケールアウトを狙ってるだけなら、 国内にも安い