aws-kinesis-firehose

1熱

1答えて

CloudFormationのAWS Kinesisにラインセパレータを追加する方法は？

Kinesis Firehoseに向かうKinesis Streamを通じてデータ（レコード）を処理しており、S3バケットのファイルにデータを出力しています。現在のところ、すべてのレコードは出力ファイル内の同じ行にありますが、各レコードはそれぞれの行に分かれていなければなりません。代わりのようなもの：私たちのCloudFormationテンプレートです。ここ Store1, 100, Broc

0熱

1答えて

AWS：PostgreSQLからRedshiftへのキネシスストリームの設定

私の前の質問を参考に、私の上司に、私のアナウンスチームのために私の既存のポストグルから新しいレッドシフトデータベースにDMSを設定させてもらいました。私が午前、およびこれに検索を行って3日過ごした後、これで私を助けるためには何もありませんしてい次号。私の上司はKinesisを使用して、PG dbからRS dbにリアルタイムデータを取得し、分析チームがリアルタイムでデータを取得できるようにしたいと

0熱

1答えて

ダイナモDbとキネシスのFirehose to Elastic Searchと赤方偏移

私たちのプロジェクトでは、数百万のアプリケーションデータを格納するためにダイナモDbを使用する計画を立てています。リアルタイムのデータと解析を検索する必要があります大丈夫ですか？）だから私たちはkinesis firehoseを使用してkinesis firehoseからAWSの弾性検索と赤方偏移にデータをプッシュすることを計画しています。もし私が最善のアプローチを提案していないのであれば正しい

0熱

1答えて

AWS Lambda Nodejs関数でHTTP DELETE要求を実行する方法

レコードをElasticsearchクラスタに直接送信するFirehoseストリーム用のAWSラムダ変換関数を作成しようとしています。現在、FirehoseストリームレコードにESドキュメントIDを指定する方法はないため、すべてのレコードが重複して挿入されます。しかし、FirehoseはLambdaでホストされている変換関数をサポートしています。私の解決方法は、変形中のすべてのレコードに対して

0熱

2答えて

計算デバイス秒

私はキネシス・アナリティクスで実験だし、それには多くの問題を解決しましたが、実際に立ち往生している以下：を私は実際にデバイスをオンにしたとき反映し、レコードとストリームを持っていますオフのような： device_id | timestamp | reading 1 | 2011/09/01 22:30 | 1 1 | 2011/09/01 23:00 | 0 1 | 2011/09/02 03:

0熱

1答えて

Kinesis FirehoseをCloudWatchイベントのターゲットとして設定するCloudFormationのルール

私は、CloudWatchイベントがKinesis Firehose Delivery Streamに送信されるプロセスのコンポーネントを取得するために、CloudFormationテンプレートを作成しています。私がAWS::Events::Ruleを定義するとき、有効なターゲットのARNを期待するTargetsプロパティがあります。問題は、AWS::KinesisFirehose::Deliv

4熱

2答えて

テラフォームドキュメントを1としてテラフォーム

に消火ホースでaws_api_gateway_integrationためのサービスAPIがどうあるべきか、aws_api_gateway_integrationためのURIは resource "aws_api_gateway_integration" "integration" { ... ... uri = "arn:aws:apigateway:{region

2熱

1答えて

Kinesis FirehoseにLambda関数をCloudformテンプレートで追加する

Kinesis FirehoseにLambda関数を追加して、hereのようにソースデータを変換したいとします。 Cloudformation Template for Kinesis firehoseを見て、私は Type: "AWS::KinesisFirehose::DeliveryStream" Properties: DeliveryStreamName: String

0熱

1答えて

停止Kinesis Firehoseの赤方偏移への配送

私はこのキネシスのfirehose delivery streamをs3とredshiftに持っています。私はs3にデータを入れ続けたいが、私は一時的にデータをredshiftに送るのをやめたい。 1つのトリックは、データベーステーブル名を変更することです。しかし依頼がまだ行われているのでそれはあまり洗練されていません。データを赤方偏移に送るのを止める他の方法があるかどうか疑問に思っていました。

0熱

1答えて

雲の形成循環依存性のfirehose

私は次のCloudFormationテンプレートを持っています。以前のチェンジセットでは、キネシスストリームとリストされたすべてのロールが正常に作成されました。今、私は消防車の配達ストリームを追加したいと思います。しかし、私の変更セットはFAILED - Circular dependency between resources: [EventDeliveryStream]メッセージで失敗します。