当前位置: 首页 > news >正文

Python 实现日志备份守护进程

在这里插入图片描述

实训背景

假设你是一名运维工程师,需要为公司的监控系统开发一个简单的日志备份守护进程。该进程需满足以下需求:

  • 后台运行:脱离终端,长期监控指定目录(如 /var/log/app/)中的日志文件。
  • 自动备份:每隔 5 分钟将新增的日志文件压缩备份到 /backup/logs/ 目录。
  • 日志记录:记录守护进程自身的操作日志到 /var/log/backup_daemon.log。
  • 系统服务化:通过 systemd 管理进程的启动、停止和状态查看。

环境准备

  • 操作系统:Ubuntu/CentOS 等主流 Linux 发行版
  • Python 版本:Python 3.x
  • 依赖安装
    # 确保已安装 Python3 和 pip
    sudo apt install python3 python3-pip   # Ubuntu
    sudo yum install python3 python3-pip   # CentOS
    

实训步骤

任务1:编写 Python 守护进程代码

目标:用 Python 实现日志监控与备份逻辑,无需手动处理 fork()

  1. 创建脚本 backup_daemon.py
    import os
    import time
    import logging
    from datetime import datetime
    import subprocess# 配置日志
    logging.basicConfig(filename='/var/log/backup_daemon.log',level=logging.INFO,format='%(asctime)s - %(message)s',datefmt='%Y-%m-%d %H:%M:%S'
    )def backup_logs():log_dir = '/var/log/app'backup_dir = '/backup/logs'# 遍历日志目录for root, _, files in os.walk(log_dir):for file in files:src_path = os.path.join(root, file)dest_path = os.path.join(backup_dir, f"{file}.tar.gz")# 检查是否已备份if not os.path.exists(dest_path):logging.info(f"Backing up {file}...")# 使用 tar 压缩try:subprocess.run(['tar', '-czf', dest_path, src_path],check=True,stdout=subprocess.DEVNULL,stderr=subprocess.DEVNULL)except subprocess.CalledProcessError as e:logging.error(f"Failed to backup {file}: {e}")if __name__ == "__main__":logging.info("Daemon started.")while True:backup_logs()time.sleep(300)  # 5分钟执行一次
    

任务2:配置 systemd 服务

目标:让 Python 脚本以服务形式在后台运行,无需代码内守护进程逻辑。

  1. 创建服务文件

    sudo vim /etc/systemd/system/backup_daemon.service
    
  2. 编写服务配置

    [Unit]
    Description=Python Log Backup Daemon
    After=network.target[Service]
    Type=simple
    ExecStart=/usr/bin/python3 /path/to/backup_daemon.py  # 修改为实际脚本路径
    Restart=on-failure
    RestartSec=5s
    User=root
    WorkingDirectory=/  # 可选:设置工作目录[Install]
    WantedBy=multi-user.target
    
  3. 部署并启动服务

    sudo systemctl daemon-reload
    sudo systemctl start backup_daemon
    sudo systemctl enable backup_daemon
    

任务3:测试与验证

  1. 生成测试日志文件

    sudo touch /var/log/app/test.log
    
  2. 查看备份结果

    ls /backup/logs  # 5分钟后应生成 test.log.tar.gz
    
  3. 查看守护进程日志

    tail -f /var/log/backup_daemon.log
    

任务4:管理服务

  • 查看状态

    systemctl status backup_daemon
    
  • 停止服务

    sudo systemctl stop backup_daemon
    
  • 查看 systemd 日志

    journalctl -u backup_daemon -f  # 实时跟踪日志
    

实训总结

通过本案例,您将掌握:

  1. 使用 Python 实现守护进程逻辑(无需手动 fork())。
  2. 通过 systemd 管理 Python 脚本的后台运行。
  3. 利用 Python 的 logging 模块记录操作日志。

知识要点

  • Python 优势
    • 无需处理底层 fork()setsid(),代码更简洁。
    • 使用 subprocess 模块可轻松调用系统命令(如 tar)。
  • systemd 管理
    • 通过 Type=simple 直接运行前台程序,systemd 自动守护化。
    • 日志可通过 journalctl 统一查看。
  • 日志记录
    • Python 内置 logging 模块提供灵活的日志管理。

扩展优化建议

  1. 增量备份:记录已备份的文件名或时间戳,避免重复压缩。
  2. 异常处理:增加 try/except 捕获文件操作异常。
  3. 配置文件:使用 configparser 模块管理路径、间隔时间等参数。

相关文章:

  • JavaScript模块化开发:CommonJS、AMD到ES模块
  • AUTOSAR图解==>AUTOSAR_SWS_CryptoDriver
  • blender里面的材质列表
  • JavaEE——线程安全
  • Java工具类——实体类列表写入excel
  • Java 工厂设计模式详解:用统一入口打造灵活可扩展的登录系统----掌握 Spring 源码的基础第一步
  • 【Semantic Kernel核心组件】Plugin:连接AI与业务逻辑的桥梁
  • EmbeddingBag介绍与案例
  • Android问题整理
  • 数据加盐/加密
  • CentOS 中安装 vim
  • qt中关于思源雅黑字体的使用
  • OpenCV 图形API(43)颜色空间转换-----将 BGR 图像转换为 LUV 色彩空间函数BGR2LUV()
  • 《vue3学习手记4》
  • 《前端面试题之 Vue 篇(第二集)》
  • await 在多线程,子线程中的使用
  • 大模型赋能工业制造革新:10个显效可落地的应用场景
  • 字符设备驱动程序的另一种注册方法
  • IoT FEM射频前端模组芯片(2.4G PA)三伍微电子GSR2401 兼容替代RFX2401
  • 408数据结构绪论刷题001
  • 山西忻州市人大常委会副主任郭建平接受审查调查
  • 一生要出片的年轻人,买爆相机
  • 习近平会见缅甸领导人敏昂莱
  • 上海“世行对标改革”的税务样本:设立全国首个税务审判庭、制定首个税务行政复议简易程序
  • 心相印回应官方旗舰店客服辱骂消费者:正排查
  • OpenAI任命了一位新CEO