sql >> Database teknologi >  >> NoSQL >> MongoDB

Hadoop HDFS MapReducer output til MongoDb

Du vil have «MongoDB Connector til Hadoop» . eksemplerne .

Det er fristende blot at tilføje kode i din Reducer, der som en bivirkning indsætter data i din database. Undgå denne fristelse. En grund til at bruge et stik i modsætning til blot at indsætte data som en bivirkning af din reducerklasse er spekulativ udførelse:Hadoop kan nogle gange køre to af de nøjagtigt samme reduceringsopgaver parallelt, hvilket kan føre til uvedkommende inserts og duplikerede data.



  1. Spring Data MongoDB aggregering - match efter beregnet værdi

  2. Omdøb ObjectId _id til id i jackson-deserialisering med Jongo og MongoDB

  3. Hvordan opdaterer man et enkelt objekt med RESTHeart patch?

  4. Konfiguration af MongoDB på Windows