使用Rust与ClickHouse构建高效可靠的日志系统提供日志的搜索/报警/处理等功能 ## 系统介绍 • 为什么放弃 Loki • 资源占用过大 • 统计/计算能力比较弱 • 组件过多,排查问题比较困难 • 商业使用不友好的开源协议 • 为什么选择Mencius+ClickHouse • 存储计算与业务分离 • 计算/统计能力更强 • 资源占用更小,性能更好 • 更友好的开源协议 ## 系统介绍 - 多种接入方式 - Agent 多租户 - 自定义索引 - 多维度统计 - 鉴权 - ... ## 系统介绍 · 写入 • 每天 100G · 磁盘 • 压缩比 1:13 • 内存 • Mencius • 200M左右 • ClickHouse • 2G以下 formatReadableSize(sum(bytes_on_disk)), sum(data_uncompressed_bytes) ments/d/7/1/5/d715999d9871d1dbd517a52cd45edc32/p8_2.jpg) ## 整体架构 · 接入端 • API Gateway • 日志服务(Mencius) • 存储(ClickHouse) 0 码力 | 19 页 | 2.66 MB | 2 年前3
共 1 条
- 1













