amazon-athena

0熱

1答えて

Athena/Prestoを使用して1つのテーブル内の日付範囲によって制限された複数のテーブルからSQLデータを返す

AWS Athenaを活用して様々なログファイルを処理するプロジェクトが始まります。私の目標は、イベント相関のログ・ファイルを使用することです。そのため、単一のSQL文から、指定された時間範囲内の複数の表からデータを選択して表示する方法を見つける必要があります。ここで私が達成しようとしているものの例である：ここでは scada.timestamp process.eventid

1熱

2答えて

PythonとPyathenajdbcを使用してAthenaに接続

私はPythonを使用してAWS Athenaに接続しようとしています。私はこの作業を達成するためにpyathenajdbcを使用しようとしています。私が持っている問題は、接続を得ることです。以下のコードを実行すると、AthenaDriverが見つからないというエラーメッセージが表示されます。（java.lang.RuntimeException：クラスcom.amazonaws.athena.

0熱

1答えて

Athenaからs3データへのクエリパフォーマンスを向上させる方法

S3に格納されたデータをこのようなハイブ形式でパーティション化しました。 bucket/year=2017/month=3/date=1/filename.json bucket/year=2017/month=3/date=2/filename1.json bucket/year=2017/month=3/date=3/filename2.json すべてのパーティションには、約1,00

2熱

2答えて

寄木細工のスキーマからテーブルを作成する

アロエのスキーマに基づいて寄木細工のファイルから直接Amazon Athenaにテーブルを作成する方法はありますか？スキーマはファイルにエンコードされているので、実際にDDLを自分で作成する必要があります。私はそれは文句を言わないアテナのために働く、thisと、別のduplication を見ましたが、それらはハイブに直接関係しています。理想的には、コンソールで定義する必要なしにプログラムで実

1熱

1答えて

は私が名前の私のテストデータベース、作成したデータベース

渡っアテナテーブルAWSをドロップすることはできません：testを、という名前のテーブルがありました：test_table 私はdefaultデータベースからのコマンドを実行： DROP TABLE IF EXISTS test.test_tableとエラーメッセージました：を FAILED: Execution Error, return code 1 from org.apache.had

0熱

2答えて

Presto/Athena - JSON属性の頻度を検出するクエリですか？

私は、単一の列がJSONテキストを含むハイブテーブルを定義しています CREATE EXTERNAL TABLE IF NOT EXISTS my.rawdata ( json string ) PARTITIONED BY (dt string) ROW FORMAT SERDE 'org.apache.hadoop.hive.serde2.OpenCSVSerde' WITH

0熱

3答えて

pyathenajdbc.connect（）でAWSセッショントークンを渡すときにPython 2.7からAWS Athenaにクエリできません

pyathenajdbc.connect（）を使用してAthenaに接続しようとしています。マルチファクタ認証を使用してAWS認証情報を設定しています。接続文字列にAWSトークンを含めないと、次のエラーが発生します。 athena_conn = connect(access_key=AWS_KEY_ID, secret_key=AWS_SECRET, s3_staging_dir='s3://ab

2熱

1答えて

AWS Athena - SQLクエリをパラメータ化する方法

Select &テーブルステートメントを作成してクエリにランタイム値を入力したいとします。 Athena SQLクエリをパラメータ化する方法は何ですか？ PrestoのPREPARE & EXECUTEステートメントで試してみましたが、Athenaコンソールでは動作しません。 Pythonのような外部スクリプトを呼び出す必要がありますか？ PREPARE my_select1 FROM SELE

1熱

1答えて

過去1週間のアテーナからの結果を得るには？

私はAmazon Athenaを使用して、過去1週間に起こったすべてのコンソールログインを取得しています。今は、データに関係なくすべてのコンソールログインを取得できます。私は、このクエリが先週に起こったすべてのawsコンソールログインを常にピックアップするように、以下のクエリを変更する必要があります。 WITH events AS ( SELECT event.eventVers