我们如何将超过200万条记录的大量数据从mongo expres发送到节点js

const MongoClient = require('mongodb').MongoClient;

// 连接URL和数据库名称
const url = 'mongodb://localhost:27017';
const dbName = 'yourDatabaseName';

// 使用MongoDB驱动程序连接到数据库
MongoClient.connect(url, (err, client) => {
  if (err) {
    console.error('Failed to connect to MongoDB:', err);
    return;
  }

  // 选择数据库
  const db = client.db(dbName);
  
  // 在这里执行导出数据的逻辑
});

const collection = db.collection('yourCollectionName');

// 查询条件（如果有）
const query = {};

// 游标选项
const options = {
  batchSize: 1000 // 每批加载的文档数量
};

// 获取游标
const cursor = collection.find(query, options);

// 处理每个文档
cursor.forEach(doc => {
  // 在这里执行处理文档的逻辑
}, err => {
  if (err) {
    console.error('Failed to export data:', err);
  } else {
    console.log('Data exported successfully!');
  }
  
  // 关闭连接
  client.close();
});

const fs = require('fs');

// 将文档转换为字符串
const docString = JSON.stringify(doc);

// 写入文件
fs.appendFile('exportedData.json', docString + '\n', err => {
  if (err) {
    console.error('Failed to write to file:', err);
  }
});