使用logrus或zap输出结构化日志，通过Fluent Bit采集至Loki或ES，配合Prometheus监控指标，Grafana统一展示，实现日志、指标、链路三者联动的可观测体系。
在云原生环境下，Golang服务的可观测性至关重要，而日志收集与监控是其中的核心环节。一套高效的日志采集与监控体系，不仅能帮助开发者快速定位问题，还能为系统性能优化和稳定性保障提供数据支撑。
统一日志格式与结构化输出
Go标准库的log包功能简单，难以满足生产环境需求。推荐使用logrus或zap等结构化日志库，输出JSON格式日志，便于后续解析与分析。
关键实践包括：
- 为每条日志添加关键字段，如level、timestamp、service_name、trace_id等
- 避免输出敏感信息，如密码、密钥
- 在HTTP服务中，为每个请求生成唯一request_id，贯穿整个调用链
- 使用Zap时开启生产模式以获得更高性能
日志采集与传输到集中式平台
在Kubernetes环境中，推荐通过DaemonSet方式部署Filebeat或Fluent Bit采集容器日志。
立即学习“go语言免费学习笔记（深入）”；
典型链路为：Go应用写日志到标准输出 → Docker将日志写入JSON文件 → Fluent Bit读取并转发 → Kafka或直接写入Elasticsearch/Loki。
配置要点：
- 在Pod中通过sidecar或主机级采集器收集stdout
- 使用Loki时，配合Promtail，支持基于标签的日志查询
- 设置合理的日志轮转策略，防止磁盘打满
- 在日志传输中启用TLS加密和认证
集成Prometheus实现指标监控
Go服务应暴露/metrics接口，供Prometheus抓取。可使用prometheus/client_golang库自定义指标。
常见监控指标包括：
- HTTP请求数（按路径、状态码、耗时打标）
- goroutine数量变化
- 内存分配与GC暂停时间
- 业务关键事件计数（如订单创建数）
在Kubernetes中通过ServiceMonitor声明抓取目标，Prometheus自动发现并拉取指标。
告警与可视化联动
使用Grafana对接Prometheus和Loki，构建统一监控大盘。可在一个面板中关联查看某时间段的指标突刺与对应日志内容。
告警策略建议：
- 基于QPS、延迟、错误率设置Red Rule告警
- 当日志中特定错误关键词频次突增时触发告警
- 使用Alertmanager实现告警去重、静默和多通道通知
基本上就这些。关键是把日志、指标、链路三者打通，在云原生体系中实现端到端的可观测性。不复杂但容易忽略的是日志上下文的一致性和标签的规范性。
