あるクラスターに名前ノードを、別のクラスターにデータノードを持つことはできますか？

Question

hadoop 2.0の場合、すべての名前ノードが1つのクラスタにあり、すべてのデータノードが別のクラスタにあるというアーキテクチャ設定ができますか？

Answer 1

はい。それが可能だ。

ApacheウェブサイトのHDFS Federationの記事を参照してください。

複数Namenodes /名前空間

水平ネームサービスを拡張するために、フェデレーションは、複数の独立したNamenodes /名前空間を使用します。ネームノードは連合されます。ネームノードは独立しており、互いに調整する必要はありません。

Datanodesは全てNamenodesによってブロックに対して共通のストレージとして使用されます。

各データノードは、クラスタ内のすべてのネームノードに登録されます。データノードは定期的なハートビートを送信し、レポートをブロックします。また、Namenodeからのコマンドも処理します。