MongoDB:如何查找/删除两个或多个连续的重复项？

基础概念

MongoDB 是一个基于分布式文件存储的开源数据库系统，使用的数据结构是BSON（类似于JSON）格式。它支持丰富的查询语言，可以进行各种复杂的查询操作。

查找连续重复项

在MongoDB中查找两个或多个连续的重复项可以通过聚合管道（Aggregation Pipeline）来实现。以下是一个示例：

假设我们有一个集合 myCollection，其中有一个字段 value，我们希望查找连续重复的 value。

db.myCollection.aggregate([
  {
    $group: {
      _id: "$value",
      count: { $sum: 1 },
      docs: { $push: "$$ROOT" }
    }
  },
  {
    $match: {
      count: { $gt: 1 }
    }
  },
  {
    $unwind: "$docs"
  },
  {
    $sort: { "docs._id": 1 }
  },
  {
    $group: {
      _id: "$_id",
      docs: { $push: "$docs" }
    }
  },
  {
    $project: {
      _id: 0,
      value: "$_id",
      count: { $size: "$docs" },
      firstDoc: { $arrayElemAt: ["$docs", 0] }
    }
  }
])

删除连续重复项

删除连续重复项可以通过以下步骤实现：

使用聚合管道找到连续重复的文档。
删除多余的重复文档。

以下是一个示例：

db.myCollection.aggregate([
  {
    $group: {
      _id: "$value",
      count: { $sum: 1 },
      docs: { $push: "$$ROOT" }
    }
  },
  {
    $match: {
      count: { $gt: 1 }
    }
  },
  {
    $unwind: "$docs"
  },
  {
    $sort: { "docs._id": 1 }
  },
  {
    $group: {
      _id: "$_id",
      docs: { $push: "$docs" }
    }
  },
  {
    $project: {
      _id: 0,
      value: "$_id",
      count: { $size: "$docs" },
      firstDoc: { $arrayElemAt: ["$docs", 0] }
    }
  },
  {
    $unwind: "$docs"
  },
  {
    $match: {
      _id: { $ne: "$$ROOT._id" }
    }
  },
  {
    $replaceRoot: "$$ROOT.docs"
  }
]).forEach(function(doc) {
  db.myCollection.deleteOne({ _id: doc._id });
});