トップページ⇒linux
7コメント2KB

MapReduce研究所

■ このスレッドは過去ログ倉庫に格納されています
0001login:Penguin2008/01/07(月) 01:25:56ID:1Dt54bh+
みんなで一緒の雲を見上げようじゃないか。

Hadoop : http://lucene.apache.org/hadoop/
skeynet : http://skynet.rubyforge.org/
0002login:Penguin2008/01/07(月) 14:25:56ID:8BAJp8yC
このスレは伸びる！
0003login:Penguin2008/01/07(月) 15:51:05ID:dbOMH+Gk
hadoop使ってるよ。
0004login:Penguin2008/01/07(月) 18:52:34ID:DBTZ8VT2
これってターミネーター関係?
0005login:Penguin2008/01/12(土) 20:23:13ID:GDIshVJ6
>>3

どういう使い方をしてますか？差し支えない範囲で教えていただけますか。

>>4

skynetって名前は確かに怖いですね。
MapReduceはgoogleが10万台とも100万台ともいわれているサーバでのデータ処理を行うアルゴリズムの基礎です。
0006login:Penguin2008/01/13(日) 20:21:32ID:9EY128Ye
>>5
まだ3ノードでHDFSつかってデータ共有してるだけ。とりあえず7ノードぐらいまでの予定はある。
元々は負荷分散(暇なノードを出さないように)したかったから、
処理自体はMapReduceで出来るように考えてあるんだけど、
今は各ノードで独自に処理してる。

HBaseも試したいと思ってるんだけどね。
0007login:Penguin2008/01/20(日) 13:13:02ID:OAix9r15
MapReduceが盛り上がらないのは、アプリケーションが具体的に想像があまり出来ない生なのかもしれないですね。
Googleはこれを検索エンジンなどに応用しているのかもしれないけど、検索エンジンなんて世の中にそう自分で持ちたいって人はいない。
（社内ってのはあるかもしれないけど、それくらいだとMapReduceでなくても、応用できる）

なので、MapReduceはどういうアプリが想定されるか、から議論をする必要があるんだろうね。
■ このスレッドは過去ログ倉庫に格納されています