bulkloader

4熱

3答えて

App Engineのバルクローダーのダウンロードの警告「__key__には降順のインデックス、シリアルダウンロードを行う」私は私の種類の1のすべてのインスタンスダウンロードするには、次の使用してい

を： appcfg.py download_data --config_file=bulkloader.yaml --kind=ModelName --filename=ModelName.csv --url=http://appid.appspot.com/remote_api 種類がより多くのインスタンスがある場合を No descending index on __key__, perf

2熱

3答えて

バルブローダーを使用してBlobstoreにアップロードすることは可能ですか

GAE Blobstoreにデータをプッシュするためにバルクローダーを使用することができるかどうか知りませんか？私はGoogleアプリケーションにプッシュするために必要なタイル画像が100,000枚しかありません。現在、私はそれらをDatastoreにゆっくりと押し込んでいます（エラーのために "バックオフ"を維持するように非常に遅いようです）。私はBlobstoreがタイルをバックアップする

2熱

1答えて

Google App Engine BulkLoaderの起動、停止、継続

私はGoogle App Engineにアップロードするデータがかなりあります。私はバルクローダーを使ってそれを手に入れたいと思っています。しかし、私はそれが完了する前に、私は一般的に私のCPUのクォータを使いすぎているデータがあります。また、悪いインターネット接続やランダムなコンピュータの問題など、他の問題があれば、プロセスが停止する可能性があります。途中からバルクロードを続ける方法はあります

1熱

1答えて

カスタムバルクローダ実行時のサーバエラー（Google Apps Engine）

正式に提供されているバルクローダオプションの使用に成功しなかったため、独自のバルクローダスクリプトを作成しました（実際にcsvからデータストアにエンティティを徐々にロードするハンドラをポストします）。アプリの 1.私はcsvファイルからデータをコピーします 2.フォームのテキストエリアに貼り付け 3.投稿フォーム 4.：次のように解決策を働いたにハンドラは、ヘッダ（列名）の受信テキストを解析し

1熱

1答えて

Google App Engine Bulkloaderでデフォルト値を生成する

以前はプロジェクトでバルクローダーの使用に成功しましたが、最近、レコードが変更されたときにタイムスタンプに新しいフィールドを追加しました。しかし、この新しいフィールドは、デフォルトでnullになっているので、私に問題を起こしています。それをインポートする前に手動でタイムスタンプをcsvに挿入する手間はありませんが、現在の正しいデータを挿入する方法はありますか？私はimport_transformラ

1熱

1答えて

AppEngineのバルクローダと自動的に作成されたプロパティは、私が財産を持っている私のモデルでは

値：この型のオブジェクトは、データストアに作成されると created = db.DateTimeProperty(required=True, auto_now_add=True) 、作成プロパティが自動的に入力されます。このフィールドを持たないテーブルでバルクローダーツールを使用すると、AppEngineにアップロードするときにフィールドが自動的に設定されず、新しいオブジェクトが作成され

1熱

2答えて

GAEから一括ログをダウンロード

"appcfg.py"を含むファイルにすべてのログをダウンロードしたいと思います。私はapp.yamlを使用していないが、私は非常にシンプルなものを書いた： "application: myAppId version: 1 runtime: java" 私は、このコマンドを使用します。 python appcfg.py --append request_logs "app.yaml's

10熱

1答えて

Bulkloader CSV寸法誤差

Bulkloaderは、次のエラーが発生： [ERROR ] Error in data source thread: field larger than field limit (131072) これを用いて固定することができるCSVモジュール用の共通の問題である： csv.field_size_limit(sys.maxint) バルクローダーでこれを実行させるにはどうすればよいですか

0熱

1答えて

AppEngine Bulkloaderはインポート中にデータを生成します

データストアにCSVをインポートし、インポート中にカスタムアクションでフィールドStringListPropertyを生成したい（インデックス生成や計算など）。質問Override save, put, get, etc... methods in Google App Engineに記載されているように、私のモデルのput（）メソッドをオーバーライドしようとしましたが、バルクローダーのインポート

1熱

1答えて

バルクローダーを使用してApp Engineデータをダウンロードするとき、ReferencePropertyクラスからプロパティを取得するにはどうすればよいですか？

App Engineのデータを効率的にローカルで操作できるように、私はApp Engineのデータをダウンロードしたい（私はそれに基づいていくつかのPDFを生成している）。 ReferencePropertyの列に、キーまたはIDだけではなく参照モデルの特定のプロパティが設定されるように定義するにはどうすればよいですか？私はそうのようなbulkloader.yamlにproperty_mapを記載