2017-09-15 10 views
0

私はcsvのヘッダをHDFSからMSSQLにスキップすることはできますか? 私はこれについて研究しようとしましたが、私は答えを見つけることができません。だから、これは私が今問題を抱えていることです。 私のcsvヘッダーにデータが保存されていない場合、一部の行がスキップされていると思います。その後、私は私のテーブルのデータ型をvarcharにしたときに、ヘッダも保存されてしまったので、ヘッダを削除して再度スクープしようとしました。Sqoopのヘッダーをスキップする方法は?

csvファイルには常にヘッダが付いているので、私はcsvヘッダをスキップするためにsqoopの設定を探しています。

ありがとうございます。

答えて

0

すべてをステージングテーブルに送信し、stored stored_procedureを使用してみます。そのストアドプロシージャでは、ファイナルテーブルに挿入する前にこのレコードをフィルタリングできます。私も直接財産の選択肢を見つけることはできませんでした。それ以外の場合は、ファイルを操作してsqoopを実行するのが最善の方法です。あなたはすでにこのプロセスについて認識しています。