hdfsクラスタの破損したブロック

Question

下に追加されたスクリーンショットは、hdfs fsck /の出力を示しています。 "/"ディレクトリが壊れていることを示しています。これは私のHadoopクラスタのmasternodeです。何をすべきか？

Answer 1

あなたはHadoopの2を使用している場合は、高可用性を実現するためにスタンバイ名前ノードを実行することができます。これがなければ、クラスタのマスタは単一障害点になります。

ネーム・ノードのデータは、格納している通常のデータとは異なるため、他の場所から取得することはできません。あなたのnamenodeがダウンすると、あなたのブロックとファイルはそこに残っていますが、namenodeに関連するメタデータが存在しないので、それらのファイルにアクセスすることはできません。