Ho riscontrato lo stesso problema durante il recupero di circa 35000 documenti. Per risolverlo, ho usato la funzione di aggregazione (sakulstra:aggregate
) e nel mio caso ha potenziato incredibilmente la richiesta. Il formato del risultato non è ovviamente lo stesso, ma è comunque facile da usare per calcolare tutto ciò di cui ho bisogno.
Prima (7000 ms):
const historicalAssetAttributes = HistoricalAssetAttributes.find({
date:{'$gte':startDate,'$lte':endDate},
assetId: {$in: assetIds}
}, {
fields:{
"date":1,
"assetId":1,
"close":1
}
}).fetch();
Dopo (300 ms):
const historicalAssetAttributes = HistoricalAssetAttributes.aggregate([
{
'$match': {
date: {'$gte': startDate, '$lte': endDate},
assetId: {$in: assetIds}
}
}, {
'$group':{
_id: {assetId: "$assetId"},
close: {
'$push': {
date: "$date",
value: "$close"
}
}
}
}
]);