sql >> Database teknologi >  >> NoSQL >> MongoDB

MongoDB:mongoimport mister forbindelsen ved import af store filer

Jeg gætter på, at problemet handler om ydeevne, uanset hvordan du kan løse det på:

du kan bruge mongoimport option -j . Prøv at øge, hvis det ikke virker med 4. dvs. 4,8,16, afhænger af antallet af kerne du har i din cpu.

mongoimport --hjælp

-j, --numInsertionWorkers=antal indsættelsesoperationer, der skal køres samtidigt (standard til 1)

mongoimport -d mietscraping -c mails -j 4

eller du kan opdele filen og importere alle filer.

Jeg håber, at dette hjælper dig.

ser lidt mere ud, er der en fejl i en eller anden version https://jira.mongodb.org/browse/TOOLS-939her en anden løsning kan du ændre batchSize, for standard er 10000, reducer værdien og test:

mongoimport -d mietscraping -c mails



  1. 2 Helm Charts med delt Redis-afhængighed

  2. Hvorfor har vi brug for en 'arbiter' i MongoDB-replikering?

  3. MongoDB-adgangskode med @ i

  4. Voksende betydning af MongoDB inden for datavidenskab