複数のホストで処理を分散実行できるアプリケーションを探しています。


このアプリケーションに求める要件ですが、処理台数をスケールアウトした時の効果が
可視化されることです。
クラウド環境でのスケールアウト・メリットをデモンストレーションするのが目的なので、
アプリケーションの実用性は一切問いません。
アプリ実行中に処理ホストを追加した場合に、処理性能が向上したことを効果的に
デモンストレーションできるか、の一点を重視しています。

スケールアウトと書きましたが、さほど大規模なものではなく、
想定しているホストの台数は10台程度を上限と考えています。
アプリへの入力・出力の形式、Webアプリかリッチクライアントかどうか等の指定はありません。
オープンソースでLinuxベースだとうれしいですが、それも必須ではありません。

以前に、画像を加工・再描画するプログラムで、こうしたニーズに合うものがないか探しましたが、
見つけれらませんでした。
今回ここで皆さんのお知恵を拝借したく、よろしくお願いします。

回答の条件
  • 1人5回まで
  • 登録:
  • 終了:2013/02/07 12:00:04
※ 有料アンケート・ポイント付き質問機能は2023年2月28日に終了しました。

ベストアンサー

id:a-kuma3 No.5

回答回数4973ベストアンサー獲得回数2154

ポイント143pt

Hadoop + halook はどうでしょう。
halook の「MapReduce Job Gantt chart」が、求めているものに近いのではないかと思います。
実行するプログラムは、Hadoop についてくるデモプログラムで良いと思います。

halook

http://www.acroquest.co.jp/OSS/halook/
MapReduce Job Gantt chart
http://www.acroquest.co.jp/OSS/halook/images/gant_chart.png


Acroquest Technology の方のプレゼン資料。
http://www.slideshare.net/acroquest/halook

halook @github
https://github.com/endosnipe/halook

id:takarider

回答ありがとうございます。遅くなり申し訳ありません。
やはり、Hadoopですかね。。10台程度でスケールすればよいので、too muchかなと思っていましたが、
halookは確かに求めているものに非常に近かったので、大変参考になりました。
ありがとうございました。

2013/02/07 21:44:49
id:a-kuma3

各ノードにかかっている負荷の状況を視覚化できるツールが用意されている、ということは、売り物か有名どころだろう、ということで、とりあえず売り物は除外して、Hadoop か GridGain で探そうと思ったんです。
先に Hadoop で、それっぽいツールが見つかったんで、GridGain の方は探してないんですが、そっちもありそうな気がします。

2013/02/07 22:35:06

その他の回答10件)

id:SweetSmile1978 No.1

回答回数199ベストアンサー獲得回数31

ポイント1pt

このあたりは参考になりますでしょうか?

並列処理を体感してみよう
http://www.atmarkit.co.jp/fcoding/articles/parallel/01/para01b.html

id:takarider

ありがとうございます。Grid/HPCが性質上マッチするのは理解しているのですが、動きを視覚的にデモするいいアプリがないと思ってます。配列の演算だと視覚に訴えないので。よいアプリに関する情報があれば引き続きお待ちしています。

2013/02/01 10:50:24
id:mokeke090 No.2

回答回数12ベストアンサー獲得回数0

ポイント1pt

http://jyouhoushori.seesaa.net/category/1261346-1.html

これをおすすめします((
アプリでも怪しいものもあるのでご注意を。

id:takarider

ありがとうございます、が、頂いたリンクの先に、具体的なアプリケーションを見つけることができませんでした。何か見落としているのでしょうか?

2013/02/01 10:51:34
id:namihei99 No.3

回答回数2ベストアンサー獲得回数0

ポイント1pt

ubuntuで可能です。具体的な手順もございますが、どうでしょうか。

http://d.hatena.ne.jp/MIZUNO/20080809/1218289825

id:takarider

ありがとうございます。SGEでもいいのですが、実際のアプリケーションのアウトプットで、スケールメリットが直感的に感じられるようなものを探しています。グリッド・アプリでいいものがあれば、引き続き情報をお願いします。ポイントはベストアンサーの方にまとめて送りたいので、、すいません。

2013/02/02 12:22:14
id:mahosuto No.4

回答回数789ベストアンサー獲得回数28

ポイント1pt

http://www.hitachi.co.jp/Prod/comp/soft1/manual/pc/d3K2243/AJSD0029.HTM

アプリではありませんが、こちらが参考になるかと思います。

id:takarider

ありがとうございます。ジョブが複数ホストで実行されていることは示されると思うのですが、求めているのは、処理性能が台数が増えるたびに向上することを、一目瞭然に示せるようなアプリケーションなのです。

2013/02/04 07:41:58
id:a-kuma3 No.5

回答回数4973ベストアンサー獲得回数2154ここでベストアンサー

ポイント143pt

Hadoop + halook はどうでしょう。
halook の「MapReduce Job Gantt chart」が、求めているものに近いのではないかと思います。
実行するプログラムは、Hadoop についてくるデモプログラムで良いと思います。

halook

http://www.acroquest.co.jp/OSS/halook/
MapReduce Job Gantt chart
http://www.acroquest.co.jp/OSS/halook/images/gant_chart.png


Acroquest Technology の方のプレゼン資料。
http://www.slideshare.net/acroquest/halook

halook @github
https://github.com/endosnipe/halook

id:takarider

回答ありがとうございます。遅くなり申し訳ありません。
やはり、Hadoopですかね。。10台程度でスケールすればよいので、too muchかなと思っていましたが、
halookは確かに求めているものに非常に近かったので、大変参考になりました。
ありがとうございました。

2013/02/07 21:44:49
id:a-kuma3

各ノードにかかっている負荷の状況を視覚化できるツールが用意されている、ということは、売り物か有名どころだろう、ということで、とりあえず売り物は除外して、Hadoop か GridGain で探そうと思ったんです。
先に Hadoop で、それっぽいツールが見つかったんで、GridGain の方は探してないんですが、そっちもありそうな気がします。

2013/02/07 22:35:06
id:tutiyanaogahonnmyou No.6

回答回数50ベストアンサー獲得回数6

ポイント143pt

このあたりは参考になりますでしょうか?

並列処理を体感してみよう http://www.atmarkit.co.jp/fcoding/articles/parallel/01/para01b.htmlにて


それと、http://jyouhoushori.seesaa.net/category/1261346-1.htmlにて

上記をおすすめします((
アプリでも怪しいものもあるのでご注意を。

それに、ubuntuで可能です。具体的な手順もございますが、どうでしょうか。

http://d.hatena.ne.jp/MIZUNO/20080809/1218289825にて
これでどうでしょうか。ご参考になりましたら嬉しいです。

id:takarider

回答のまとめ?でしょうか。。
忙しかったため戻って来れず、ポイントが配分されてしまいましたが。。有効にご活用ください。

2013/02/07 21:47:26
id:pigmon88 No.7

回答回数501ベストアンサー獲得回数25

id:takarider

ありがとうございます。分散処理が手軽に書けるのは有意義ですが、スケールメリットのデモという面では視覚的に弱いかと。

2013/02/07 21:49:20
id:mahosuto No.8

回答回数789ベストアンサー獲得回数28

ポイント142pt

http://wirelesswire.jp/Close_Up_Technology/201007121400.html

こちらはどうでしょうか。

id:takarider

ありがとうございます。求めている内容とはかなり:)違っていましたが、内容は非常に興味深く、ブックマークしておきました:)

2013/02/07 21:53:33
id:takarider

下の方の回答と間違えてしまいました。Hadoopですね。ありがとうございました。

2013/02/07 21:55:17
id:nikodesu No.9

回答回数1025ベストアンサー獲得回数39

ポイント142pt

これが役に立つのではないですか?
http://oss.infoscience.co.jp/seleniumhq/index.html

あと、ここも参考になります。
http://itpro.nikkeibp.co.jp/article/COLUMN/20110322/358561/?k2

id:takarider

Seleniumは面白かったです。ありがとうございました。

2013/02/07 21:55:45
id:mahosuto No.10

回答回数789ベストアンサー獲得回数28

ポイント142pt

http://itpro.nikkeibp.co.jp/article/COLUMN/20110322/358561/

こちらも参考になると思います。

id:takarider

Asakusa開発責任者の神林氏の記事は注目度が高いですね。ありがとうございました。

2013/02/07 21:56:53
id:nikodesu No.11

回答回数1025ベストアンサー獲得回数39

ポイント142pt

これも役に立つのでは?
http://enterprisezine.jp/article/detail/3832

id:takarider

ありがとうございます。運用監視とAzureということで日立の十八番ですね。デモ用途にはちょっと厳しいですが、参考になりました。

2013/02/07 22:00:28

コメントはまだありません

この質問への反応(ブックマークコメント)

「あの人に答えてほしい」「この質問はあの人が答えられそう」というときに、回答リクエストを送ってみてましょう。

これ以上回答リクエストを送信することはできません。制限について

回答リクエストを送信したユーザーはいません