sql >> Base de Datos >  >> NoSQL >> MongoDB

MongoDB:mongoimport pierde la conexión al importar archivos grandes

Supongo que el problema es sobre el rendimiento, cualquier forma que puedas resolver usa:

puede usar mongoimport opción -j . Intente incrementar si no funciona con 4. Es decir, 4,8,16, dependiendo de la cantidad de núcleos que tenga en su CPU.

mongoimport --ayuda

-j, --numInsertionWorkers=número de operaciones de inserción para ejecutar simultáneamente (predeterminado en 1)

mongoimport -d mietscraping -c correos -j 4

o puede dividir el archivo e importar todos los archivos.

Espero que esto te ayude.

buscando un poco más, hay un error en alguna versiónhttps://jira.mongodb.org/browse/TOOLS-939aquí otra solución puede cambiar el tamaño del lote, por defecto es 10000, reduzca el valor y pruebe:

mongoimport -d mietscraping -c correos