MySql数据库归档工具pt-archiver

pt-archiver 是 Percona Toolkit（PT）系列中的一个强大工具，主要用于高效地从 MySQL 数据库中归档历史数据。它通过灵活的筛选条件、事务管理和错误处理机制，实现对大型表的增量归档，避免直接删除数据带来的锁表风险，适用于需要定期清理历史数据、优化数据库性能的场景。

二、核心功能与优势

• 事务安全归档：通过分批次处理数据，每个批次在独立事务中执行，减少对在线业务的影响。
• 灵活筛选条件：支持基于时间、主键或自定义 WHERE 条件筛选需要归档的数据。
• 数据迁移与删除：可将数据迁移到归档表、其他数据库或外部存储，同时安全删除原表数据。
• 断点续传机制：遇到错误或中断时，可从上次处理的位置继续，避免重复操作。
• 性能优化：通过批量操作和索引利用，降低对数据库服务器的资源消耗。

三、使用场景

• 历史数据清理：如订单表、日志表等随时间增长的大表，定期归档超过一定时间的数据。
• 数据库瘦身：减少主表数据量，提升查询性能和索引效率。
• 合规性存储：将数据归档到专用存储，满足数据保留政策或合规要求。
• 冷热数据分离：热数据保留在主表，冷数据归档到独立存储，优化资源分配。

pt-archiver \ --source="h=hostname,D=database,t=table,u=username,p=password" \ --dest="h=archive_host,D=archive_db,t=archive_table" \ --where="condition" \ --limit=1000 \ --commit-each=100 \ --progress=5 \ --no-delete # 仅归档不删除原数据（测试时使用）