4 【王琼】容器监控架构演进 王琼 YY直播

• 语言: 中文（简体）
• 格式: .pdf
• 来源: ucan20211030.cn-bj.ufileos.com

摘要

文档介绍了容器监控架构的演进，重点阐述了在Kubernetes环境下监控系统的复杂性和解决方案。传统监控系统YYMS无法直接支持Kubernetes的监控采集，Kubernetes集群的监控维度更多，包括Pod、Deployment、Namespace等，监控对象动态变化频繁，难以预置。为解决这些问题，文档提出使用Prometheus和VictoriaMetrics的架构，通过Remote Write协议将数据写入Kafka，并通过Grafana进行可视化。同时，文档也提到了现有的问题，如数据聚合查询困难和维护成本高。

AI总结

以下是文档内容的简洁总结：

---

**容器监控架构演进**

1. **背景与挑战**
- Kubernetes环境复杂，监控对象（如容器、Pod、Namespace等）动态变化，频繁创建和销毁，难以预置。
- 容器规模爆炸式增长，监控指标ierce管理和可视化成为难题。
- 监控系统需具备动态扩缩能力。

2. **监控架构设计**
- **Prometheus**：作为开源监控工具，通过定期执行集群级别的告警规则，触发告警信息并通过Alertmanager发送至YYMS。
- **VictoriaMetrics**：通过Remote Write协议接收Prometheus数据，分布存储，并支持查询和聚合，解决Prometheus在大规模场景下的性能和资源使用问题。
- **Kafka**：用于处理容器基础监控数据，通过消费Kafka Topic完成数据传输。
- **YYMS**：公司内通用的监控报警系统，接收告警信息并通知相应负责人。
- **Grafana**：可视化监控数据，直观展示容器、Pod、Namespace等多维度信息。

3. **架构优化与实践**
- **存储与查询分离**：VictoriaMetrics通过分片存储（vmstorage）和分布式查询（vmselect）优化数据处理。
- **自动发现服务**：通过kubemnetes_sd_config动态发现Kubernetes服务，解决监控对象动态变化的问题。

4. **存在的问题**
- 监控系统维护成本较高。
- 多集群管理复杂，难以实现数据聚合查询。

---

总结：文档详细阐述了容器监控架构的演进过程，重点在于解决Kubernetes动态环境下的监控挑战，并通过Prometheus和VictoriaMetrics的结合优化数据处理和存储，提升系统扩展性和性能。同时，也指出了当前架构的不足之处，需进一步优化解决。