脚本能自动删除MongoDB旧数据吗？

本文目录导读：

1. 核心思路
2. 方法一：使用 TTL 索引（推荐，自动且高效）
3. 方法二：使用脚本 + 定时任务（适合复杂逻辑）
4. 方法三：直接使用 MongoDB 的 aggregate + $out（适合数据量极大）
5. 重要注意事项
6. 完整自动化脚本（Python 示例）

是的，可以通过脚本自动删除MongoDB中的旧数据，实现方式主要取决于你的具体需求（如删除频率、数据量、时间字段等）,以下是一些常见方案：

核心思路

• 定义“旧数据”：通常基于一个时间字段（如 createdAt、timestamp、date）。
• 计算阈值时间：比如删除30天前的数据。
• 执行删除：使用 deleteMany() 或 TTL索引。

方法一：使用 TTL 索引（推荐，自动且高效）

MongoDB 支持 TTL（Time To Live） 索引，可以自动删除过期文档，这是最优雅、性能最好的方式。

步骤：

1. 为集合中的时间字段创建 TTL 索引。
2. 文档过期后，MongoDB 后台线程会自动删除。

示例： 假设你的集合 logs 中有一个 createdAt 字段：

// 在 MongoDB Shell 或驱动中执行
db.logs.createIndex(
  { "createdAt": 1 },
  { expireAfterSeconds: 2592000 }  // 30天 = 30*24*60*60 秒
)

• 之后所有 createdAt 早于当前时间30天的文档会被自动删除。
• 优点：零脚本、零运维、不占用应用资源。
• 缺点：不灵活（基于文档时间、固定秒数）。

方法二：使用脚本 + 定时任务（适合复杂逻辑）

如果无法使用 TTL（比如需要根据多个条件判断、或删除整个集合历史），可以编写脚本并通过 cron（Linux）或 任务计划程序（Windows）定期执行。

1 Node.js 示例脚本

const { MongoClient } = require('mongodb');
async function deleteOldData() {
  const client = new MongoClient('mongodb://localhost:27017');
  try {
    await client.connect();
    const db = client.db('your_database');
    const collection = db.collection('your_collection');
    // 计算30天前的日期
    const cutoff = new Date(Date.now() - 30 * 24 * 60 * 60 * 1000);
    // 执行删除
    const result = await collection.deleteMany({
      createdAt: { $lt: cutoff }  // 删除早于 cutoff 的数据
    });
    console.log(`已删除 ${result.deletedCount} 条旧数据`);
  } finally {
    await client.close();
  }
}
deleteOldData().catch(console.error);

2 定时调度（Linux cron）

每小时执行一次删除脚本：

0 * * * * /usr/bin/node /path/to/deleteOldData.js >> /var/log/deleteMongo.log 2>&1

3 定时调度（Windows 任务计划程序）

使用 PowerShell 脚本 + 计划任务，或直接用 pm2 等进程管理工具。

方法三：直接使用 MongoDB 的 aggregate + $out（适合数据量极大）

如果数据量极大（千万级），直接用 deleteMany 可能阻塞性能,建议：

1. 先复制需要保留的数据到新集合。
2. 删除旧集合,重命名新集合。
3. 转换为脚本定期执行。

重要注意事项

完整自动化脚本（Python 示例）

from pymongo import MongoClient
from datetime import datetime, timedelta
def delete_old_data():
    client = MongoClient('mongodb://localhost:27017')
    db = client['your_database']
    collection = db['your_collection']
    cutoff = datetime.utcnow() - timedelta(days=30)
    # 可选：先查看受影响数量（dry run）
    # count = collection.count_documents({"createdAt": {"$lt": cutoff}})
    # print(f"将删除 {count} 条数据")
    result = collection.delete_many({"createdAt": {"$lt": cutoff}})
    print(f"已删除 {result.deleted_count} 条旧数据")
    client.close()
if __name__ == "__main__":
    delete_old_data()

定时运行：

# crontab -e
0 3 * * * /usr/bin/python3 /path/to/delete_old_data.py

• 首选 TTL 索引：最省事、最符合 MongoDB 设计哲学，90%的场景适用。
• 脚本方案：适合需要自定义逻辑（例如只删除特定类型的数据、或使用 aggregate 汇总统计后删除）。
• 数据量大：考虑分批删除 + 索引重建。

你可以根据业务需求选择上述方案，如果数据是日志类（如操作记录、API调用日志），强烈建议使用 TTL 索引。