Promtail采集服务器本地日志存储到Loki
✅ 一、前提条件
-
已安装 Loki 服务
-
日志文件目录可访问(如 /var/log)
-
具备 sudo 权限
🧩 二、下载 Promtail 二进制文件
# 替换为你想要的版本
VERSION="3.5.1"# 创建目录
sudo mkdir -p /opt/promtail
cd /opt/promtail# 下载并解压
curl -LO "https://github.com/grafana/loki/releases/download/v${VERSION}/promtail-linux-amd64.zip"
unzip promtail-linux-amd64.zip
mv promtail-linux-amd64 promtail
chmod +x promtail
📦 三、配置 Promtail
创建配置文件 /etc/promtail/promtail.yaml ,示例内容如下:
server:http_listen_port: 9080grpc_listen_port: 0positions:filename: /opt/promtail/positions.yamlclients:- url: http://10.55.2.40:31000/loki/api/v1/pushscrape_configs:- job_name: yarn_logsstatic_configs:- targets:- localhostlabels:job: yarn_logs__path__: /data/yarn/logs/**/**/*.out- targets:- localhostlabels:job: yarn_logs__path__: /data/yarn/logs/**/**/*.err- targets:- localhostlabels:job: yarn_logs__path__: /data/yarn/logs/**/**/*.log
🛠 四、创建 systemd 服务
创建服务文件 /etc/systemd/system/promtail.service:
[Unit]
Description=Promtail service
After=network.target[Service]
Type=simple
ExecStart=/opt/promtail/promtail -config.file=/etc/promtail/promtail.yaml >> /var/log/promtail.log 2>> /var/log/promtail-error.log
Restart=on-failure[Install]
WantedBy=multi-user.target
🚀 五、启动服务
sudo systemctl daemon-reexec
sudo systemctl daemon-reload
sudo systemctl enable --now promtail
检查状态:
systemctl status promtail
📋 六、验证日志采集
-
访问 Loki,确认数据已经送达。
-
使用 Grafana 中的 Explore 功能查看日志(需要已连接 Loki 数据源)。
# 移动到日志采集的目录下
[root@uhadoop-1cef6n08gzqc-core1 ~]# cd /data/yarn/logs/application_1748242101840_0048/container_1748242101840_0048_01_000002
# 手动写入到sunwenbo.log 日志文件中
[root@uhadoop-1cef6n08gzqc-core1 container_1748242101840_0048_01_000002]# echo "sunwenbo test" > sunwenbo.log