sql >> Database >  >> NoSQL >> MongoDB

MongoDB Bulk Insert Dupliceren negeren

Een alternatief is om bulk.find().upsert().replaceOne() in plaats daarvan:

MongoClient.connect(mongoURL, function(err, db) {
    if(err) console.err(err)
    let col = db.collection('user_ids')
    let batch = col.initializeUnorderedBulkOp()

    ids.forEach(function(id) {        
        batch.find({ userid: id }).upsert().replaceOne({ 
            userid: id, 
            used: false,  
            group: argv.groupID 
        });
    });

    batch.execute(function(err, result) {
        if(err) {
            console.error(new Error(err))
            db.close()
        }

        // Do some work

        db.close()
    });
});

Met het bovenstaande, als een document overeenkomt met de zoekopdracht { userid: id } het zal worden vervangen door het nieuwe document, anders wordt het gemaakt en daarom worden er geen dubbele sleutelfouten gegenereerd.

Gebruik voor MongoDB-serverversies 3.2+ bulkWrite als:

MongoClient.connect(mongoURL, function(err, db) {

    if(err) console.err(err)

    let col = db.collection('user_ids')
    let ops = []
    let counter = 0

    ids.forEach(function(id) {
        ops.push({
            "replaceOne": {
                "filter": { "userid": id },
                "replacement": { 
                    userid: id, 
                    used: false,  
                    group: argv.groupID 
                },
                "upsert": true
            }
        })

        counter++

        if (counter % 500 === 0) {
            col.bulkWrite(ops, function(err, r) {
                // do something with result
                db.close()
            })
            ops = []
        }
    })

    if (counter % 500 !== 0) {
        col.bulkWrite(ops, function(err, r) {
            // do something with result
            db.close()
        }
    } 
})



  1. Is er een manier om met sessies te werken zonder de ASP.Net MVC-site te vergrendelen?

  2. MongoDB 2.2 - Array genest document bijwerken

  3. Wat is de beste manier om afbeeldingen op te slaan voor expressjs, mongodb-site?

  4. Een MongoDB-subdocument bijwerken wanneer het bovenliggende document mogelijk niet bestaat