sql >> Databasteknik >  >> NoSQL >> MongoDB

Hur man effektivt importerar många stora JSON-filer direkt från S3 till MongoDB

Du behöver inte lagra mellanliggande filer, du kan skicka utdata från s3-filen till stdout och du kan få indata till mongoimport från stdin.

Ditt fullständiga kommando skulle se ut ungefär så här:

s3cmd get s3://<yourFilename> - | mongoimport -d <dbName> -c <collectionName>

notera - som säger skicka filen till stdout snarare än till ett filnamn.



  1. Ska jag ändra värdet på mongo bean när jag distribuerar i produktionsservern?

  2. Redis pub sub max prenumeranter och förlag

  3. hur skickar man variabler $tid, $id till råfunktion?

  4. Fyll i saknade datum i register