Amazon Athenaと圧縮S3ファイル

Question

私は、いくつかの圧縮CSVファイル（利用ログ）を持つS3バケットを持っています。このデータをAthenaで照会したいと思いますが、出力が完全に文字化けしています。

アテナは、まず圧縮解除せずにzipファイルを解析しようとしているようです。 Hiveに自分のファイルを圧縮されたデータとして認識させることは可能ですか？アテナ圧縮用

Answer 1

支持されているが、サポートされるフォーマットは

• あるスナッピー（.snappy）
• Zlibの（.bz2）
• GZIP（.gzという）

これらの形式ファイル名の接尾辞で検出されます。接尾辞が一致しない場合、リーダーはコンテンツをデコードしません。 test.csv.gzファイルでテストしましたが、すぐに動作しました。圧縮をzipからgzipに変更してみるとうまくいくはずです。