spring jdbcテンプレートを使用して何百万ものレコードを持つテーブルからデータを取得する方法

Question

spring jdbcテンプレートを使用してデータを取得しようとしています。 テーブルには何百万ものレコードがあります。

以下のコードを使用して無限の時間を費やし、最後にコードを停止します。

private static final String CLIENTDATA_QUERY = "select logtime, clientip, clientagent, uri from client_data"; 
public List<ClientDataModel> readFromClientDataDB() { 
//  jdbcTemplate.setFetchSize(1000); 
     List<ClientDataModel> clientData = jdbcTemplate.query(CLIENTDATA_QUERY, new RowMapper<ClientDataModel>() { 

      @Override 
      public ClientDataModel mapRow(ResultSet rs, int rowNum) throws SQLException { 
       ClientDataModel model = new ClientDataModel(); 
       model.setLogtime(rs.getString("logtime")); 
       model.setClientIP(rs.getString("clientip")); 
       model.setClientAgent(rs.getString("clientagent")); 
//    model.setUri(rs.getString("uri")); 
       return model; 
      } 
     }); 

     System.out.println("Client Data Size :" + clientData.size()); 
     return clientData; 
    } 

誰かが、最も効率的な方法で巨大なテーブルからレコードを取得する方法を提案できますか？

すべてのレコードを取得する必要があり、さらにロジックのコードが開始されます。これはサーバー側です。

Answer 1

代わりにリストを返すメソッドを使用しないでください。RowCallBackHandler.クエリではページネーションを使用することもできます。

JDBCTemplateは、データベースから取得したすべてのデータをオブジェクトの形式で読み込む必要があり、大きな結果セットを保持するために多くのメモリを消費します。このようなシナリオでは、Spring Batchが優れたソリューションです。