データ吸入SQOOPを使用

Question

私はSqoopを使ってHDFSにCSVファイルを取り込まなければなりません。

問題は、私は区切り記号として '、'（カンマ）を使用していますが、私のデータには '、'が付いた列もあります。データの解析に問題が生じています。

問題を解決するために何をすべきですか？

SQOOPは使用できますか？

Answer 1

sqoopを使用してhdfsにデータをインポートするときに、-fields-terminated-by引数を使用してフィールドを区切ります。

ローカルファイルシステムからcsvファイルをインポートしようとしている場合は、hadoop fs -putコマンドを使用してファイルをhdfsに入れることができます。