BigQuery - Java APIを使用して結果を反復する方法

Question

90k行のクエリ結果をダウンロードしようとしていますが（この量はWeb UIとその結果のオブジェクトを示しています）、イテレータでは130kを超えるアイテムが次のように取得されます：

QueryRequest queryRequest = QueryRequest 
             .newBuilder("......") 
             .setUseLegacySql(true) 
             .build(); 
QueryResponse response = bigquery.query(queryRequest); 
QueryResult result = response.getResult(); 
Integer c = 0; 

while(result != null){ 
      Iterator<List<FieldValue>> iter = result.iterateAll(); 
      while(iter.hasNext()){ 
       iter.next(); 
       c++; 
      }  
      result = result.getNextPage(); 
} 

読み込みの最後には約130Kですが、reuslt.getTotalRows()には90Kが含まれています。

あなたは私が正しく行っていないことについて何か考えていますか？

Answer 1

JavaDocから、Page.iterateAll（）はすべてのページの結果を返します。

最初のページからすべての結果が得られたら、次のページに進み、すべての結果を再度取得します（最初のページを除く）。ページサイズを小さく設定すると、結果が大きくなります。

あなたのコードは次のようになります。

QueryRequest queryRequest = QueryRequest 
            .newBuilder("......") 
            .setUseLegacySql(true) 
            .build(); 
QueryResponse response = bigquery.query(queryRequest); 
QueryResult result = response.getResult(); 
Integer c = 0; 

Iterator<List<FieldValue>> iter = result.iterateAll(); 
while(iter.hasNext()){ 
    iter.next(); 
    c++; 
}