Hadoop FileSystem - 指定されたhdfsディレクトリのサイズがゼロのファイルをすべて削除するにはどうすればいいですか？

Question

パス内にhdfsディレクトリAがあります。/ user/A

サイズがゼロのA内のファイルをすべて削除するにはどうすればよいですか？

Answer 1

これが参考になっ

ファイルのみ削除

hdfs dfs -ls -R /path/to/directory/ | grep part- | awk '{ if ($5 == 0) print $8 }' | xargs hdfs dfs -rm

Answer 2

かもしれない：0とメタデータやファイルを有することができるHDFSフォーマットがたくさんあるので、あなたは、最初に何を得る

hdfs dfs -rm $(hdfs dfs -ls -R /user/A/ | grep -v "^d" | awk '{if ($5 == 0) print $8}') 

テストを、バイトサイズ（寄せ木張りのようなもの...）、

hdfs dfs -ls -R /user/A/ | grep -v "^d" | awk '{if ($5 == 0) print $8}'