チャンククエリ内のグローバル行番号

Question

私は結果セットにロー番号シーケンスを含むrow_numberカラムを追加したいと思います.1は最新のアイテムで、ギャップはありません。これは動作します：

SELECT id, row_number() over (ORDER BY id desc) AS row_number, title 
FROM mytable 
WHERE group_id = 10; 

今、私はメモリ上やすいように1000年各チャンクで同じデータを照会したいと思います：

ここ

SELECT id, row_number() over (ORDER BY id desc) AS row_number, title 
FROM mytable 
WHERE group_id = 10 AND id >= 0 AND id < 1000 
ORDER BY id ASC; 

ROW_NUMBERは、すべてのチャンクの1から再開しますが、私あたかもそれが最初のケースのようにグローバルクエリの一部であるかのようになります。これを達成する簡単な方法はありますか？

Answer 1

仮定：

• idをPRIMARY KEYとして定義される - UNIQUEとNOT NULLを意味します。そうでなければ、NULL値や重複（ネクタイ）を処理する必要があります。

• テーブルへの同時書き込みアクセス権がありません。スナップショットを作成した後に何が起きても気にしません。

MATERIALIZED VIEW、あなたがin your answerを発揮ようには、良い選択です。

CREATE MATERIALIZED VIEW mv_temp AS 
SELECT row_number() OVER (ORDER BY id DESC) AS rn, id, title 
FROM mytable 
WHERE group_id = 10; 

しかし、インデックスと後続の問合せは、1000年

CREATE INDEX ON mv_temp (rn); 

SELECT * FROM mv_temp WHERE rn BETWEEN 1000 AND 2000;

のチャンクで

データあなたの実装が保証ギャップレスが必要になりますを取得するには、行番号rn上にある必要がありますid列 - 行番号を追加する必要はありません。

行う場合：

DROP MATERIALIZED VIEW mv_temp; 

のインデックスが自動的に（この場合、マテリアライズド・ビュー）テーブルで死にます。

詳細と関連、：

• Optimize query with OFFSET on large table

Answer 2

最初の1000行、次の1000行などのクエリを実行する必要がありますか？

通常は、1つのクエリ（既に使用しているもの）を作成し、アプリケーションで1000個のレコードを取得し、何かそれらを実行してから次の1000個を取得します。したがって、個別のクエリの必要はありません。

しかし、そのような部分的なクエリを記述するためにかなり簡単だろう：あなたはページネーションを必要とする

select * 
from 
(
    SELECT id, row_number() over (ORDER BY id desc) AS rn, title 
    FROM mytable 
    WHERE group_id = 10 
) numbered 
where rn between 1 and 1000; -- <- simply change the row number range here 
          -- e.g. where rn between 1001 and 2000 for the second chunk 

Answer 3

。あなたはROW_NUMBERでWHERE句の変更、それ（にIDの開始値を変更すると、この

SELECT id, row_number() over (ORDER BY id desc)+0 AS row_number, title 
FROM mytable 
WHERE group_id = 10 AND id >= 0 AND id < 1000 
ORDER BY id ASC; 

次の時間を試してみてください）にも同様

SELECT id, row_number() over (ORDER BY id desc)+1000 AS row_number, title 
FROM mytable 
WHERE group_id = 10 AND id >= 1000 AND id < 2000 
ORDER BY id ASC; 

orベターの下に、あなたは、OFFSETおよびLIMITのアプローチを使用することができますページネーション私はそれをこのようにやってしまった最後に https://wiki.postgresql.org/images/3/35/Pagination_Done_the_PostgreSQL_Way.pdf

Answer 4

用：：

まず私は、一時的なマテリアライズド・ビューを作成します

CREATE INDEX idx_temp ON vw_temp USING btree(id); 

は今、私は非常に迅速にすべての操作を実行し、番号の行を持つことができます：

SELECT * FROM vw_temp WHERE id BETWEEN 1000 AND 2000; 

を、クリーンアップ操作を行った後：

CREATE MATERIALIZED VIEW vw_temp AS SELECT id, row_number() over (ORDER BY id desc) AS rn, title 
FROM mytable 
WHERE group_id = 10; 

は、それから私は、インデックスを定義

DROP INDEX idx_temp; 
DROP MATERIALIZED VIEW vw_temp; 

Thorstケットナーの答えは一番きれいなようですが、それは遅すぎるために私にとっては実用的ではありませんでした。みんなに貢献してくれてありがとう。実用的なケースでは、私はこれを使ってSphinxインデクサにデータを送る。