インポート時に特定の列をNULL値にマッピングする

Question

一部の列をインポート時にnullのプレースホルダに変換するにはどうすればよいでしょうか？

マップ列機能を使用できますか？

Argument Description 
--map-column-java <mapping> Override mapping from SQL to Java type for configured columns. 
--map-column-hive <mapping> Override mapping from SQL to Hive type for configured columns. 

私たちは、スキーマが同じになるようにしたいが、我々は彼らが私たちのクラスタに引き込まれたくないので、いくつかの列は、ちょうど膨張の多くを保持します。 もう一つの考えは、膨大な列がヌルであるが、それはsqoopのより多くの構成であり、マップする1000個のテーブルがあるカスタムのselect文を生成することです。

--map-column-java bloatedcolname=null 

考えられますか？

Answer 1

あなたは、例えば、この

あちこち--queryを使用することができます。

sqoop import --query 'select a, b, null as c, null as d from tbl where $CONDITIONS' 

$CONDITIONSは、分割のための最小値と最大値を置き換えるために使用されます。

Answer 2

あなたのハイブインポートクエリで単に--columns <col1, col2, col3…>を使用してください。

インポートしない列を除外します。

---

例：

私はRDBMSで4つの列を持っている - は、ID、名前、職業、住所、私は唯一のIDと名前をインポートしたいです。

インポートコマンドに--columns id, nameを使用してください。