五年C/C++使用经验，一年Golang ## 内容提要 ## CONTENTS • 程序开发的需求 • GoLang特性 - Go开发mysql中间件 - 整体方案 - 分表路由 - 故障切换 - 平滑扩容 - 系统运维 ## 程序开发的需求 • 语言特性精炼，容易入门 • 开发效率高，代码逻辑清晰 • 运行性能强，节省机器资源 • 部署维护方便 • 生态圈完善 ## Golang特性 整套系统致力于提供一套mysql分布式解决方案，上层应用就跟使用单机mysql一样接入本系统(部分SQL语句不支持)。 ## 系统整体方案 ## • 系统功能 • 读写分离。 • 平滑上下线Mysql。 • 主备自动切换(主-主模式)。 • 分表设计——按照Hash分表 • 分表设计——按照范围分表(年、月、日、整形) • 数据库表在多个mysql实例间平滑扩容 - 大表拆分为多个子表情况下的平滑扩容 ## sh方式不同，使得看起来有两种不同的数据组织方式。 ## 故障主备切换 ## • 故障情形 • 从节点挂掉：进行剔除下线处理 • 主节点挂掉，机器存活：通过binlog恢复数据，提升备为主 • 主节点挂掉，机器不存活：采用Relaylog恢复数据，提升备为主 ## • 部署模式 · 一主多从 • 双主多从 ## 故障主备切换 ## · 一主多从模式 ![Image](/uploa

在大容量场景下的问题 ## Redis 问题 - 恢复时间长 - 一主多从, 主从切换代价大 - 缓冲区写满问题 - 成本问题 ## Redis 问题 ## • 恢复时间长 – 50G redis 回复时间70分钟 – 同时开启aof 和 rdb ## Redis 问题 ## • 一主多从, 主从切换代价大 ## – 主库挂掉后升级从库, 所有的从库全部重传数据 ## Redis ## Pika 开发现状 • 双主支持 • Pika hub 提供多机房写入支持 • 支持sentinel • 支持codis ## Pika 总结 - 恢复时间长 - 一主多从, 主从切换代价大 - 缓冲区写满问题 - 内存昂贵问题 ## Pika vs redis ## • 劣势 ## – 由于Pika是基于内存和文件来存放数据, 所以性能肯定比Redis低一些 • 优势

syscalls and file descriptors can be mixed together - 系统调用：与内核交互的途径 • 内核：与硬件交互的途径 系统调用将会触发上下文切换 • 上下文切换将会消耗时间 系统调用和文件描述符可以连用 ## Basic socket operations 基础的 socket 操作 ![Image](/uploads/documents/6/

日 - 总是后于用户反馈发现故障 - 难以快速确认故障影响面 - 难以快速找到故障的直接原因 - 故障处理进度不透明 - 理解数据的成本太高  构建统一的 可观测体系 ## 工 构建智能的故障发现定位体系 ## 日 解决监控系统分散 维护成本高 数据无法串联打通的问题 ## 日 预置最佳实践 及时从业务侧发现异常 加速故障处理过程 ## Flashcat 构建了一个数据、平台、场景打通的一体化方案 ## ☀️ 北极星 ## 场景 实时量化业务层面的健康状态，第一时间发现真故障 ## 灭火图 实时量化 IT 层面的健康状态，快速故障定界 ## 可视化 多集群统一查询 ## 平台 ## 留事件墙 高性能可视化引擎 [Image](/uploads/documents/0/c/2/e/0c2ef9dbcb97940aa5479891c42cb1a1/p5_1.jpg) 兼容Grafana 实时分析生产环境中的所有关键事件，确定故障原因 一分钟创建大屏 ## 告警 值班on-call ## C ## 88 开箱即用的数据源 ## Categraf 采集器 ## 数据 ## 企业自有应用 / 基础设施 ## 资源