質問: ### 前提・実現したいこと 現在,研究で物理的に世界中に分散しているサーバー上のデータにアクセスし, あるバッチ処理を行なわなければならなくなりました. そこでなんとなく調べたところHadoopが使えるのではないかと感じました. しかし知識不足なためイマイチ実現できそうかどうかがわかりません. ここで質問なのですが,ある程度ファイルの配置や設定等をこちらで指定できる条件下で, 1. そもそもHadoopがそのような処理を行えるのか 2. 他に適した技術はあるのか 等々教えていただけると幸いです.
回答: Hadoop はBIGデータのバッチ処理を行うのに適しているので、扱うデータ量が大きければ適しているとは思います。 > > 研究で物理的に世界中に分散しているサーバー上のデータにアクセスし, あるバッチ処理 > > > 「世界中にあるデータにアクセス」というアプローチを期待されているのであれば、適しているとは言えないですね。 > > 他に適した技術はあるのか > > > 接続先のデータというのが何を指しているのか?また、どのように接続するのか?など不明点があるため、適切な回答を得られない気がしています。