PHP 日志系统的最佳搭档:一个 Go 写的远程日志收集服务

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: 为了不再 SSH 上去翻日志,我写了个 Go 小脚本,用来接收远程日志。PHP 负责记录日志,Go 负责存储和展示,按天存储、支持 API 访问、可远程管理,终于能第一时间知道项目炸了。

之前折腾了一个 PHP 日志系统,终于能让项目的错误信息乖乖地记录到日志里了。但问题又来了:日志是存了,可我怎么知道它什么时候爆炸了?

有些错误轻微到无关紧要,有些错误严重到能把整个系统送走,但如果我要知道这些错误,我得 SSH 进服务器,然后手动去翻日志,效率低得要死。而且,多个服务器运行着同样的代码,有的报错,有的没事,我根本不知道到底哪里出了问题。

于是,为了在 bug 出现的时候第一时间收到消息,而不是等老板过来吼我,我写了一个 Go 小脚本,它专门用来:

  • 接收远程日志(让 PHP 直接把 bug 抛过来)
  • 存储日志信息(按天存储,避免日志混乱)
  • 提供查看和管理接口(可以用浏览器访问日志)
  • 支持删除指定行日志(万一哪条日志看着不爽,删!)

这样,我就能一眼看到错误日志,而不是等到 bug 发酵成灾难级事故。

先把已经实现好的仓库地址贴出来:点击前往GitHub


这个 Go 脚本干了些什么?

它其实就是一个简单的 HTTP 服务器,提供了几个 API:

📥 /write(POST)—— 发送日志

任何项目出错了,可以 POST​ 一条日志过来,它会存入文件,每条一行,格式是 JSON。

示例

curl -X POST http://localhost:9999/write -d '{
    "time": "2025-03-15 12:00:00",
    "level": "ERROR",
    "message": "数据库连接失败",
    "context": {
        "project": "my-app",
        "ip": "192.168.1.10",
        "method": "GET",
        "full_url": "https://example.com/api",
        "trace": {
            "message": "SQLSTATE[HY000] General error",
            "file": "/var/www/html/index.php",
            "line": 42,
            "trace": [
                {
                    "file": "/var/www/html/index.php",
                    "line": 42,
                },
                {
                    "file": "/var/www/html/index.php",
                    "line": 42,
                }
            ]
        }
    }
}'
AI 代码解读

这样日志就会被存进 data/data_2025-03-15.txt​ 里,每天一个文件。


👀 /read(GET)—— 查看日志

浏览器访问 http://ip地址:端口/read​,就能看到当天的所有日志。
为了陌生人看到我们愚蠢的错误,加了 BasicAuth 认证,默认账号 admin​,密码 123123​(当然,你该改的)。

示例

访问:http://localhost:9999/read
AI 代码解读

返回内容:

未命名 5.png

是不是比翻 .log文件爽多了?


🗑 /delete(DELETE)—— 删除指定行

有时候日志堆积了太多无关紧要的内容,或者因为问题已经解决了,想删掉某些行,就可以用这个接口。在网页上也可以直接删除。

示例

curl -X DELETE "http://localhost:9999/delete?date=2025-03-15&line=2"
AI 代码解读

这样,2025-03-15 的日志第 2 行就会被删掉。


代码细节

  • 按天存储日志,每天一个 data_YYYY-MM-DD.txt​,方便管理。
  • 支持并发写入,用了 sync.RWMutex​ 解决并发冲突。
  • 支持清理过期日志,默认只保留 7 天,过期自动清理。
  • 加了 HTTP 认证,防止乱看日志。
  • 错误日志本身也会记录错误(比如写入失败,自己再打个日志)。

完整代码都在仓库里了,就不贴了,反正逻辑就是接收 JSON -> 写入文件 -> 读文件 -> 提供管理接口,没啥特别复杂的。


最后

终于,这个日志收集的活干完了,项目的日志总算有个统一的归宿
Go 有的时候还真的挺适合做这种完全独立的小型单功能网页服务,这样以后再有 bug,我不用 SSH 上去翻来翻去,而是直接打开个网页,就能看到错误信息,第一时间处理掉。

不过,光有日志收集还不够,下一步我可能会:

  • 加个 邮件通知(但我怕邮箱会爆)
  • 或者……就先摆烂吧 🙃

今天就这样,明天的 bug,就留给明天的自己吧。

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
目录
打赏
0
10
10
4
20
分享
相关文章
|
4月前
|
用 Zap 轻松搞定 Go 语言中的结构化日志
在现代应用程序开发中,日志记录至关重要。Go 语言中有许多日志库,而 Zap 因其高性能和灵活性脱颖而出。本文详细介绍如何在 Go 项目中使用 Zap 进行结构化日志记录,并展示如何定制日志输出,满足生产环境需求。通过基础示例、SugaredLogger 的便捷使用以及自定义日志配置,帮助你在实际开发中高效管理日志。
128 1
|
25天前
|
公司局域网管理系统里的 Go 语言 Bloom Filter 算法,太值得深挖了
本文探讨了如何利用 Go 语言中的 Bloom Filter 算法提升公司局域网管理系统的性能。Bloom Filter 是一种高效的空间节省型数据结构,适用于快速判断元素是否存在于集合中。文中通过具体代码示例展示了如何在 Go 中实现 Bloom Filter,并应用于局域网的 IP 访问控制,显著提高系统响应速度和安全性。随着网络规模扩大和技术进步,持续优化算法和结合其他安全技术将是企业维持网络竞争力的关键。
46 2
公司局域网管理系统里的 Go 语言 Bloom Filter 算法,太值得深挖了
|
2天前
|
基于责任链与策略模式的轻量级PHP日志库设计
项目日志乱成一团,bug 时好时坏,服务器问题难以复现?我写了个 PHP 日志系统,第一时间发现问题,避免跑路。实现了责任链模式+策略模式,让日志存储更灵活,支持多种输出方式。
|
26天前
|
开箱即用的GO后台管理系统 Kratos Admin - 前端权限
Kratos Admin 是一个开箱即用的 GO 后台管理系统,前端权限管理分为路由和按钮权限。路由权限支持后端动态生成和前端固定配置两种方式,通过 `.env` 文件配置 `VITE_ROUTER_ACCESS_MODE` 实现。按钮权限可通过权限码或角色控制,支持组件、API 和指令三种方式。项目代码托管于 Gitee 和 Github。
24 0
开箱即用的GO后台管理系统 Kratos Admin - 列表查询规则
Kratos Admin 是一个开箱即用的GO后台管理系统,支持通用列表查询请求。通过 `page`、`pageSize`、`query`(AND过滤)、`or`(OR过滤)、`orderBy`(排序)、`noPaging`(不分页)和 `fieldMask`(字段掩码)等参数,灵活配置查询条件。过滤规则遵循Python ORM风格,支持多种查找类型如 `in`、`gte`、`icontains` 等,适用于不同数据库。
26 0
内网监控系统之 Go 语言布隆过滤器算法深度剖析
在数字化时代,内网监控系统对企业和组织的信息安全至关重要。布隆过滤器(Bloom Filter)作为一种高效的数据结构,能够快速判断元素是否存在于集合中,适用于内网监控中的恶意IP和违规域名筛选。本文介绍其原理、优势及Go语言实现,提升系统性能与响应速度,保障信息安全。
37 5
【01】客户端服务端C语言-go语言-web端PHP语言整合内容发布-优雅草网络设备监控系统-硬件设备实时监控系统运营版发布-本产品基于企业级开源项目Zabbix深度二开-分步骤实现预计10篇合集-自营版
【01】客户端服务端C语言-go语言-web端PHP语言整合内容发布-优雅草网络设备监控系统-硬件设备实时监控系统运营版发布-本产品基于企业级开源项目Zabbix深度二开-分步骤实现预计10篇合集-自营版
34 0
在 Go 语言中实现 WebSocket 实时通信的应用,包括 WebSocket 的简介、Go 语言的优势、基本实现步骤、应用案例、注意事项及性能优化策略,旨在帮助开发者构建高效稳定的实时通信系统
本文深入探讨了在 Go 语言中实现 WebSocket 实时通信的应用,包括 WebSocket 的简介、Go 语言的优势、基本实现步骤、应用案例、注意事项及性能优化策略,旨在帮助开发者构建高效稳定的实时通信系统。
243 1
Go语言中的错误注入与防御编程。错误注入通过模拟网络故障、数据库错误等,测试系统稳定性
本文探讨了Go语言中的错误注入与防御编程。错误注入通过模拟网络故障、数据库错误等,测试系统稳定性;防御编程则强调在编码时考虑各种错误情况,确保程序健壮性。文章详细介绍了这两种技术在Go语言中的实现方法及其重要性,旨在提升软件质量和可靠性。
77 1
PHP与SOAP Web服务开发:基础与进阶教程
本文介绍了PHP与SOAP Web服务的基础和进阶知识,涵盖SOAP的基本概念、PHP中的SoapServer和SoapClient类的使用方法,以及服务端和客户端的开发示例。此外,还探讨了安全性、性能优化等高级主题,帮助开发者掌握更高效的Web服务开发技巧。

热门文章

最新文章

AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等