sqoop

0熱

1答えて

私はクラスを作成しました： package costume.password.loader class CostumePasswordLoader extends FilePasswordLoader { override def loadPassword(p: String, conf: Configuration): String = ??? } は、以下のsqoopコールの

0熱

1答えて

kuduテーブルにインポートするsqoop構文

Kuduをテストしてデータをインポートする必要があります。 Sqoopは正しい選択のようだ。私はあなたがKuduにインポートできる参考文献を見つけるが、詳細はない。 Sqoopを使ってKuduにインポートする方法はありますか？

0熱

1答えて

HIVEテーブルへの増分sqoop

- 増分sqoopインポートスイッチは、SQOOPを介したHIVEインポートでは機能しません。しかし、その回避策は何ですか？ 1）私が作ることのできることの1つは、HIVEテーブルを作成し、SQOOPを通じてHDFSにインクリメンタルデータを持ち込み、手動でロードできることです。しかし、我々がそれをしているときは、毎回それが読み込まれ、データは上書きされます。私が間違っていれば私を修正してください

0熱

1答えて

Sqoop：マルチキャラクタデリミタ

ハイブテーブルの私のフィールドの1つにすべての特殊文字が含まれているので、私はMultiDelimitSerDe（〜＃）を使ってハイブフィールドを区切りました。これらのデータは、Sqoopエクスポートを使用してMy sqlにエクスポートする必要があります。そして私は複数の区切り文字でエクスポートするSqoopを見ません。他の方法はありますか？これらのフィールドには、date、bigint、dec

0熱

1答えて

hdfsへのsqoopインポートを使用しているときに、Postgresのカラムのタイプを変更するにはどうしたらいいですか？

タイムゾーンのないタイムスタンプのタイプのPostgresデータベースにカラムがあります。 sqoopを使用してhdfsにインポートする際に、タイムゾーン（UTC）でタイムスタンプに変換するにはどうすればよいですか？

1熱

2答えて

sqoopコマンドでHadoopユーザを設定する

別のユーザとしてsqoopコマンドを実行したい。私はmapreduce.map.memory.mbオプションを設定する方法に似sqoopコマンドでこれを設定する方法がある場合は、私が思っていた export HADOOP_USER_NAME=desiredUser sqoop import \ -D mapreduce.map.memory.mb=4096 \ -D mapreduce.m

0熱

2答えて

Sqoop：区切り文字として8進値（\ 0）を使用する

フィールドの1つに特殊文字があるので、区切り文字として低い値を使用したかったのです。 Hiveはデリミタ（\ 0）でうまく動作しますが、NoSuchElement Exceptionでsqoopが失敗します。デリミタが\ 0として検出されていないように見えます。これは、私のハイブのsqoopスクリプトの様子です。助けてください。 VIエディタで CREATE TABLE SCHEMA.test

1熱

2答えて

Sqoop with query clause

OracleからHiveにデータを移動する必要があり、Sqoopが役に立つツールであることがわかりました。問題は、クエリを処理し、結果をデスティネーションデータベースのテーブルに挿入する必要があることです。 Oracle関数の結果 - > HiveDB.myTable 私は、このコマンドが見つかりました： sqoop import --connect jdbc:oracle:thin:@****

0熱

1答えて

できないがsqoop私はClouderaのマネージャーからsqoopをアンインストールし

UbuntuマシンにCDH5かかわらインストールアンインストールするために、私はまだ端子を介してsqoopバージョンを参照してください。実行しているClouderaのマネージャサービスを取り付ける [email protected]:~$ sqoop version Warning: /opt/cloudera/parcels/CDH-5.13.1-1.cdh5.13.1.p0.2/bin/..