出力ファイルなしでHadoopジョブを実行

Question

出力ファイルを指定せずにhadoopジョブを実行できますか？ hadoopジョブを実行しようとすると、例外がスローされた出力ファイルが指定されていません。 Javaを使用して操作する手順は、いずれでも可能です。

reduceによって処理されたデータを非リレーショナルデータベースに書き込んでいるため、HDFSに書き込む必要はありません。

Answer 1

残念ながら、あなたは本当にこれを行うことはできません。出力を書くことはフレームワークの一部です。フレームワークの外で作業するときは、基本的に結果に対処する必要があります。

NullOutputFormatは、HDFSにデータを書き込まないでください。私はそれがまだフォルダを作成すると思う。 Hadoopにフォルダを作成させ、次にdelete itを作成させることができます。