MapReduceプログラムへの入力ファイルは必須ですか？

Question

map reduceプログラムを使用してランダムデータを生成するユースケースに取り組んでおり、HDFSに入力ファイルを必要としません。入力パスを与えなければ、MRプログラムは動作しません。だから、現在、私はダミー入力ファイルを持っています。これを避ける方法はありますか？

Answer 1

通常、MRプログラムには処理のためのデータがあります。しかし、Random Generationのようなシナリオがあり、処理されるべきデータはありません。 TeraGenのプログラムで、行数と出力ディレクトリを入力とする乱数生成をチェックします。また、私はDataGeneratorを試していませんが、面白いようです。