Encontré el mismo problema cuando buscaba alrededor de 35000 documentos. Para resolverlo, utilicé la función de agregado (sakulstra:aggregate
) y en mi caso ha potenciado increíblemente la petición. El formato del resultado obviamente no es el mismo, pero sigue siendo fácil de usar para calcular todo lo que necesito.
Antes (7000ms) :
const historicalAssetAttributes = HistoricalAssetAttributes.find({
date:{'$gte':startDate,'$lte':endDate},
assetId: {$in: assetIds}
}, {
fields:{
"date":1,
"assetId":1,
"close":1
}
}).fetch();
Después (300ms):
const historicalAssetAttributes = HistoricalAssetAttributes.aggregate([
{
'$match': {
date: {'$gte': startDate, '$lte': endDate},
assetId: {$in: assetIds}
}
}, {
'$group':{
_id: {assetId: "$assetId"},
close: {
'$push': {
date: "$date",
value: "$close"
}
}
}
}
]);