sql >> Databasteknik >  >> NoSQL >> MongoDB

MongoDB:är det möjligt att fånga TTL-händelser med Change Stream för att emulera en schemaläggare (cronjob)?

Jag kunde använda Change Streams och TTL för att emulera en cronjob. Jag har publicerat ett inlägg som förklarar vad jag gjorde i detalj och gav krediter på:https://www. patreon.com/posts/17697287

Men i princip, när jag behöver schemalägga en "händelse" för ett dokument, när jag skapar dokumentet skapar jag också ett händelsedokument parallellt. Detta händelsedokument kommer att ha som sitt _id samma id som det första dokumentet.

Dessutom kommer jag att ställa in en TTL för detta evenemangsdokument.

När TTL löper ut kommer jag att fånga dess "delete"-ändring med Change Streams. Och sedan använder jag ändringens documentKey (eftersom det är samma id som dokumentet jag vill utlösa) för att hitta måldokumentet i den första samlingen och göra vad jag vill med dokumentet.

Jag använder Node.js med Express och Mongoose för att komma åt MongoDB. Här är den relevanta delen som ska läggas till i App.js:

const { ReplSet } = require('mongodb-topology-manager');

run().catch(error => console.error(error));

async function run() {
    console.log(new Date(), 'start');
    const bind_ip = 'localhost';
    // Starts a 3-node replica set on ports 31000, 31001, 31002, replica set
    // name is "rs0".
    const replSet = new ReplSet('mongod', [
        { options: { port: 31000, dbpath: `${__dirname}/data/db/31000`, bind_ip } },
        { options: { port: 31001, dbpath: `${__dirname}/data/db/31001`, bind_ip } },
        { options: { port: 31002, dbpath: `${__dirname}/data/db/31002`, bind_ip } }
    ], { replSet: 'rs0' });

    // Initialize the replica set
    await replSet.purge();
    await replSet.start();
    console.log(new Date(), 'Replica set started...');

    // Connect to the replica set
    const uri = 'mongodb://localhost:31000,localhost:31001,localhost:31002/' + 'test?replicaSet=rs0';
    await mongoose.connect(uri);
    var db = mongoose.connection;
    db.on('error', console.error.bind(console, 'connection error:'));
    db.once('open', function () {
        console.log("Connected correctly to server");
    });

    // To work around "MongoError: cannot open $changeStream for non-existent database: test" for this example
    await mongoose.connection.createCollection('test');

    // *** we will add our scheduler here *** //

    var Item = require('./models/item');
    var ItemExpiredEvent = require('./models/scheduledWithin');

    let deleteOps = {
      $match: {
          operationType: "delete" 
      }
    };

    ItemExpiredEvent.watch([deleteOps]).
        on('change', data => {
            // *** treat the event here *** //
            console.log(new Date(), data.documentKey);
            Item.findById(data.documentKey, function(err, item) {
                console.log(item);
            });
        });

    // The TTL set in ItemExpiredEvent will trigger the change stream handler above
    console.log(new Date(), 'Inserting item');
    Item.create({foo:"foo", bar: "bar"}, function(err, cupom) {
        ItemExpiredEvent.create({_id : item._id}, function(err, event) {
            if (err) console.log("error: " + err);
            console.log('event inserted');
        });
    });

}

Och här är koden för model/ScheduledWithin:

var mongoose = require('mongoose');
var Schema = mongoose.Schema;

var ScheduledWithin = new Schema({
    _id: mongoose.Schema.Types.ObjectId,
}, {timestamps: true}); 
// timestamps: true will automatically create a "createdAt" Date field

ScheduledWithin.index({createdAt: 1}, {expireAfterSeconds: 90});

module.exports = mongoose.model('ScheduledWithin', ScheduledWithin);


  1. Matcha ett arrayfält som innehåller valfri kombination av den tillhandahållna arrayen i MongoDB

  2. MongoDB $max

  3. Hur man installerar MongoDB på Ubuntu 18.04

  4. Hur kan jag sortera och begränsa med Mongoose