Google App Engineのシャードリスト

Question

私のApp Engineアプリケーションの1つでは、種類のすべてのエンティティのキ​​ーリストをコンパイルしてリストに入れる必要があります。私はその種のクエリを実行していましたが、スケールはまったくなく、ヒープエラーが発生しています。私はデータセットを更新する際に、この問題を念頭に置いてキーを追加したり削除したりすることを検討しましたが、動作させるにはいくつか問題が発生しました。

• アプリエンジンではシャードリストを使用できますか？
• シャードリストからオブジェクトを削除するよりも、シャードをすべて検索するよりも良い方法はありますか？
• 種類のすべてのキーを取得するより良い方法はありますか？

Answer 1

メモリが不足しているということは、キーのみを照会しているか、そのような種類のエンティティが多いことを示唆しています。いずれにしても、一度に表示するにはあまりにも多くのページがある可能性が高いので、何らかの形でページングを行っていると仮定します。

これは、カーソルの理想的な使用例です。クエリを発行し、ある程度のキー（またはエンティティ全体）を読み込み、HTMLでレンダリングし、カーソルのクエリを要求します。カーソルを保存します。ユーザーがページすると、同じクエリを再発行し、保存されたカーソルから開始するように指示します。カーソルはインデックスに依存しないので、すでにクエリから取得したエンティティのいずれかを削除しても問題は解決しません。また、ユーザーが1ページ後に興味を失った場合、キーのリスト全体を読み取るヒットを支払うことはありません。

http://code.google.com/appengine/docs/java/datastore/queries.html#Query_Cursors