boto

0熱

1答えて

状況：データロードサービスを使用して、s3のディレクトリから約1TBのjsonファイルを取り込みます。これらのファイルをバッチでingestionディレクトリにロードして、ローディングサービスが圧倒されないようにします。私たちは、boto3クライアントのコピーメソッドを使用するローカルのpythonスクリプトを使ってそのバッチ処理を行っています。 import boto3 s3 = boto3

0熱

1答えて

エラー "セクション 'Boto'は既に存在します

新しいS3ファイルシステムを作成する必要があります（既存のものとは異なる）。私はそれをやろうとしているとき、私は Section 'Boto' already exists を取得し、私は、まず、私は、以前の後のBoto接続/後のBotoセクションを削除する必要があることを、理解しています。 1つの質問 - 既存のものを削除するにはどうすればよいですか？

0熱

1答えて

TypeError：リストのインデックスはstrでない整数でなければなりません

キュー 'myDownlinQueue'のメトリック（トリガ）がApproximateNumberOfMessagesVisibleであるアラームを作成したい場合、アラームはAutoScalingGroupのオートスケーリングの動作を行います。しかし、私が書いているコードに基づいて、私はタイトルに記載されているエラーを取得します。たぶん私は間違っているが、以下はこのエラーの原因となるコードです。

0熱

2答えて

boto 2を使用してCloudWatchのAlarmオブジェクトを取得します。

アラームを作成したあとで削除します... boto 2のdocumentationにはその方法が示されていません。助けが必要ですか？ありがとう

0熱

2答えて

ローカルファイルとS3の内容を確認して変更したファイルをアップロード

このpythonスクリプトを使用して、ローカルフォルダからS3フォルダに変更または新しく作成したファイルをアップロードしています。スクリプトが機能しません。それはちょうどバケット名を得ることに失敗した。私はpython2.7でbotoを使用しています。私はグーグルで答えは得られませんでした。ご迷惑をおかけして申し訳ございません。多くのありがとうございます。ここではここでエラー Traceb

1熱

1答えて

AWS s3（SSE）バケットからGoogleクラウドへファイルをコピーする

S3バケットからGoogleクラウドストレージにデータをコピーしようとしました。ただし、次のエラーでgsutilのコピーコマンドの結果： gsutil cp s3://my_s3_bucket/datadir1 gs://my_google_bucket がエラー： Requests specifying Server Side Encryption with AWS KMS managed

0熱

1答えて

GrinderテストスクリプトでJythonを使用してS3からファイルを取得

Grinderテストに使用しているマスタ/ワーカーEC2インスタンスがあります。 S3バケットから直接ファイルを取得する負荷テストを試す必要がありますが、JythonでGrinderテストスクリプトがどのように見えるかはわかりません。アイデアやヒントはありますか？私はそれを少し調べて、PythonにAWSを扱うためのbotoパッケージがあることを見てきました.Jythonでも同様に動作しますか？

1熱

1答えて

s3のファイルをPythonのサブフォルダでロードする

awsのs3バケットからpandasのcsvファイルをロードしようとしています。 Boto3は、サブフォルダからファイルをロードするための機能を提供するのに不足しているようです。私はs3で次のパスを持っているとしましょう： bucket1/bucketwithfiles1/file1.csv file1.csvの読み込み方法を指定するにはどうすればよいですか？私はs3がディレクトリ構造を持っていな

0熱

1答えて

バケット

私は別のコードのフォルダにバケット内のファイルをコピーしようとしています内のファイルをコピーできません： src_bucket = s3_conn.get_bucket('ABC') for k in src_bucket.list(prefix='AB_Test/OUT/gelnique_'): print "Processing" # Get Destination