所以，单靠 redis 的方案是不行了. redis 的高可用、高可扩方案？ 主要是 redis cluster + 主从复制 (或者第三方 codis + 哨兵) redis cluster/codis 主要解决扩展性的问题，它会进行分片，每个 redis 实例保存分片的 key 主从复制主要解决高可用，一个分片实例挂 2 个从实例，当主节点挂掉时，cluster/哨兵会自动将从节点升为主节点 redis，初步评估了下，其工作量要比自己实现持久化的逻辑要大一些，改造主要是为了让 redis 提供单独 dump/load 一个 DB 的功能： 如果改造，dump/load 的逻辑都得动，而且会牵扯到一些其他逻辑（如主从复制，因为 redis 主从全量复制发送的就是一整个 RDB 文件，即使我们不需要这个功能，这部分代码也是有耦合的）© XXX Page 11 of 12 1. 2. 3. 如果自己实现，只是一个简单的 中的哈希实现很独立，单独的文件 t_hash.c，其性能表现也非常好） redis 哈希表实现主要优点参考以下 总的来说，我们只是参考 redis 持久化实现，而 redis 中的大头（各类数据结构、模块化、主从复制、集群等这些都是我们目前不需要的），因此去改造 redis 感觉不是很划算 redis 中哈希表实现的优点？ 主要是当哈希表需要扩桶的时候，rehash 过程中 redis 采用了均摊/渐进式的思想，把

//redis启动初始化以后占用内存 6) (integer) 9942928 7) "replication.backlog" //主从复制断开重连时会用到，默认10MB 8) (integer) 1048576 9) "clients.slaves" // 主从复制用到的内存 10) (integer) 16858 11) "clients.normal" //普通用户客户端的读写缓冲区 12) 切换系统，时时探测主节点的异常情况，可以有效解决磁盘 IO 故障，CPU 故障等问题导致的服务异常，及时进行主备切换从而保证服务高可用。 主备复制机制 阿里云针对 Redis 主从复制机制进行了定制修改，采用增量日志格式进行复制传输。当主备 复制中断后，对系统性能及稳定性影响极低，有效避免 Redis 原生复制的弊端。 Redis 原生复制弊端简要如下： Redis

ShardingSphere 提供数据库发现的能力，自动感知数据库主从 关系，并修正计算节点对数据库的连接。 目前支持的高可用方案 : • MySQL MGR 单主模式 • MySQL 主从复制模式 • openGauss 主从复制模式。 Apache ShardingSphere 高可用介绍 Apache ShardingSphere 高可用介绍 ShardingSphere 读写分离 Apache

Router Group Replication主-主复制 无共用支持写的高可用 MySQL Cluster 支持5个9的高可用 Clusterware为 基础的主备架构 支持无损失的故障移转 主从复制 写的 高可用 和负载均衡 主库 故障移转 读写分离 Router故障移转 8 4-7 3 1 写的 高可用 Connector/J Failover -支持负载均衡,高可用读写分离和数据分片 高可用读写分离和数据分片 MySQL Connector/J Java 應用端 Group Replication-主主複製 MySQL Cluster Clusterware为 基础的主备架构 主从复制 写的 高可用 负载均衡 故障移转 讀寫分離 故障移转 • JDBC URL format，第一个主机为master，第二个以后为backup: import com.mysql.jdbc.ReplicationDriver;

了了命令请求的执⾏行行速度和效率 • 丰富的附加功能：事务、Lua 脚本、键过期机制、键淘汰机制、多种持久化⽅方式（AOF、RDB、 RDB+AOF 混合） • 强⼤大的多机功能⽀支持：主从复制（单主多从）、Sentinel（⾼高可⽤用）、集群（基于 Raft 算法，多 主多从，内建⾼高可⽤用） 特点 • 具有多种不不同的数据结构可⽤用，其中包括：字符串串、散列列、列列表、集合、有序集合、位图 了了命令请求的执⾏行行速度和效率 • 丰富的附加功能：事务、Lua 脚本、键过期机制、键淘汰机制、多种持久化⽅方式（AOF、RDB、 RDB+AOF 混合） • 强⼤大的多机功能⽀支持：主从复制（单主多从）、Sentinel（⾼高可⽤用）、集群（基于 Raft 算法，多 主多从，内建⾼高可⽤用） • 拥有⽆无限可能性的扩展模块系统：神经⽹网络、全⽂文搜索、JSON 数据结构等等。

group）定时发送到， brokerAddrTable 集合中列出的 broker 上去 Producer 发送消息只发送到 master 的 broker 机器，在通过 broker 的主从复制机制拷贝到 broker 的 slave 上去 二：Producer 如何发送消息 Producer 轮询某 topic 下的所有队列的方式来实现发送方的负载均衡 //没有理解意图 long readOffset = this.byteBufferRead.getLong(pos - 8); this.processPostion = pos; 主从复制 从哪里开始复制：如果请求时 0 ，从最后一个文件开始复制 Slave 启动的时候 brokerController 开启定时任务定时拷贝 master 的配置信息 SlaveSynchronize

2 多主节点复制 前文介绍的主从复制模型中存在一个比较严重的弊端，就是所有写请求都需要经过主 后端 < 799 节点，因为只存在一个主节点，就很容易出现性能问题。虽然有从节点作为冗余应对 容错，但对于写入请求实际上这种复制方式是不具备扩展性的。 此外，如果客户端来源于多个地域，不同客户端所感知到的服务相应时间差距会非常 大。因此，有些系统顺着传统主从复制进行延伸，采用多个主节点同时承担写请求， 一般采用多主节点复制，都是为了做多数据中心容灾或让客户端就近访问（用一个高 800 > 2022年美团技术年货 大上的名词叫做异地多活），在同一个地域使用多主节点意义不大，在多个地域或者 数据中心部署相比主从复制模型有如下的优势： ● 性能提升：性能提升主要表现在两个核心指标上，首先从吞吐方面，传统的主 从模型所有写请求都会经过主节点，主节点如果无法采用数据分区的方式进行 负载均衡，可能存在性能 多个副本时，读到了 过期的数据，可以将数据写入到旧副本中，以便追赶上新副本。 2. 反熵查询，一些系统在副本启动后，后台会不断查找副本之间的数据 diff，将 diff 写到自己的副本中，与主从复制模式不同的是，此过程不保证写入的顺 序，并可能引发明显的复制滞后。 后端 < 809 读写 Quorum 上文中的实例我们可以看出，这种复制模式下，要想保证读到的是写入的新值，每次 只从

2019 2020 M eta Q v 2 .0 RocketM Q v 3 .0 Ap a che RocketM Q 4.x Lin ux Op en M essa gin g 主从复制架构升级，性能提升数倍 RAFT 存储生产可用 rocketm q-con n ect 进入孵化 2021 5.0 -p rev iew 发布 性能优化、PoP 消费，多存储目录， 轻量级队列

⽤户可以构建起⼀种乐观锁机制， 这种机制可以确保事务只会在指定键 没有发⽣任何变化的情况下执⾏。 18. 复制 Redis 的复制功能是 Redis 提供的多机功能中最基础的⼀个， 这个功能是通过主从复制（master-slave replication）模式实现的， 它允许⽤户为储存着⽬标数据库的服务器创建出多个拥有相同数据库副本的服务器， 其中储存⽬标数据库的服务器被称为主服务器（master 将会⾃动挑选⼀个从服务器作为新的主服务器， 以此来继 续为客户提供服务， 避免造成整个系统停机。 在本章接下来的内容中， 我们将会学到： 如何为主服务器创建从服务器， 从⽽开启 Redis 的主从复制功能； 如何查看服务器在复制中担当的⻆⾊以及相关数据； Redis 复制功能的实现原理； 如何在主服务器不创建 RDB ⽂件的情况下实现数据同步； 如何通过复制功能提升不同类型 Redis 命令的执⾏效率； 结果复制给各个从服务器。 18.9 重点回顾 Redis 的复制功能允许⽤户为⼀个服务器创建出多个副本， 其中被复制的服务器为主服务器， ⽽复制产⽣ 的副本则是从服务器。 Redis 提供的复制功能是通过主从复制模式实现的， ⼀个主服务器可以有多个从服务器， 但每个从服务器 只能有⼀个主服务器。 Redis 的复制功能可以从性能、安全性和可⽤性三个⽅⾯提升整个 Redis 系统。 Redis 主从服务器的

库和从库。高可用的数据源会动态的修正读 写分离的主从关系，并正确地疏导读写流量。 3.4.7 使用限制 支持项 • MySQL MGR 单主模式。 • MySQL 主从复制模式。 • openGauss 主从复制模式。 不支持项 • MySQL MGR 多主模式。 3.5 数据库网关 3.5.1 背景 随着数据库碎片化趋势的不可逆转，多种类型数据库的共存已渐成常态。使用一种 SQL 量和增量数据进行在线加密解密。 那么另一种相对安全的做法是：重新搭建一套和生产环境一模一样的预发环境，然后通过相关迁移洗数 工具把生产环境的存量原文数据加密后存储到预发环境，而新增数据则通过例如 MySQL 主从复制及业务 方自行开发的工具加密后存储到预发环境的数据库里，再把重构后可以进行加解密的代码部署到预发环 境。这样生产环境是一套以明文为核心的查询修改的环境；预发环境是一套以密文为核心加解密查询修