SparkからNULL値をRedshiftに挿入するには？

Question

spark-csvを使用してファイルを作成し、COPYコマンドで使用して、Redshiftにデータをロードします。 Redshiftのドキュメントによれば、NULL値の有効なリテラルは、NULLhttp://docs.aws.amazon.com/redshift/latest/dg/r_Boolean_type.htmlである必要があります。

しかし、私は赤方偏移がこれを認識してもらうことができない、赤方偏移が正しくS3からCOPYコマンドでそれを認識するようNULL値に設定する正しいリテラル値は何ですか？

Answer 1

あなたは、私がロード赤方偏移のためspark-reshiftライブラリを試してみることをお勧めNULL AS 'NULL'http://docs.aws.amazon.com/redshift/latest/dg/copy-parameters-data-conversion.html#copy-null-as

であなたのCOPY文で値を指定することができます。これらの問題の多くはあなたのために処理されます。 https://github.com/databricks/spark-redshift