AWVデータパイプラインを使用してCSV & TSVファイルを作成しています。ファイルは正常に作成されていますが、列ヘッダーを使用してファイルを作成する方法を理解できません。AWS Data Pipelineを使用してCSV/TSVファイルに列ヘッダーを作成しますか?
最初は、エクスポートを実行するために実行しているSQLクエリに基づいてヘッダを自動的に生成することを期待していました。それはうまくいかなかったが、大丈夫だった。
次に、DefaultDataFormat3フィーチャー/ノードの「列」属性に列定義のリストを追加しました。
{
"escapeChar": "\\",
"name": "DefaultDataFormat3",
"column": [
"id INT",
"field1 STRING",
"field2 STRING"
],
"columnSeparator": "|",
"id": "DataFormatId_jEXqL",
"type": "TSV",
"recordSeparator": "\\n"
}
私はまだエクスポートでヘッダー行のないCSVとTSVを取得します。
AWS Datapipelineの文書化は非常によく行われていません。ほとんどの場所では、フィールドが何をすべきかを理解することは困難です。 – Anshul
同じ問題を抱えています...ソリューションを手に入れましたか? – joeB1
私は、@ joeB1:( –