Mongoose Populateで16MB BSON制限に達する

Question

ネストされた人口を持つMongooseコールを実行していて、データに対して何らかの処理を行っています。

しかし、ネストされたポピュレートコールのため、私はMongooseでBSONドキュメントの16MB制限に達しています。

この問題を解決する方法はありますか。

let allDocuments = await exampleModel.find({ 
    condition: true 
    }).populate({path: 'tvShows', populate: {path: 'views'}}); 

たぶん私は、複数の呼び出しにに破ることができますか？しかし、私はそれを行うための論理的な方法は不明です。ありがとう。

Answer 1

ページングを実装するには、skipとlimitクエリパラメータを使用します。

const query = yourModel.find({ /* your conditions here */ }); 
const batchSize = 100; 

function mergeAllReducer(accumulator, currentValue) { 
    return accumulator.concat(currentValue); 
} 

query.count().then(total => { 
    let skip = 0; 
    const allQueries = []; 
    while (skip < total) { 
    allQueries.push(query.find() 
     .skip(skip) 
     .limit(batchSize) 
     .populate({ path: 'tvShows', populate: { path: 'views' }}) 
    ); 
    skip += batchSize; 
    } 
    return Promise.all(allQueries); 
}) 
.then(arrayOfArrays => arrayOfArrays.reduce(mergeAllReducer, [])) 
.then(result => { 
    // do something with your populated result 
}); 

、あなたはまだこのすべてのメモリが使用されて対処する必要があります、あなたはおそらく、同様のバッチで処理して試みることができるので、あなたのjavascript配列のサイズはまだ、あなたVMが処理できるよりも大きくなる場合がございますのでご了承ください配列全体を操作する代わりに、