Conference China 2016 中国用户大会 实现PostgreSQL逻辑复制实战 王青松 神州飞象(北京)数据科技有限公司 Your Logo 2016Postgres中国用户大会 Postgres Conference China 2016 中国用户大会 简介 逻辑复制的功能是从PG的WAL日志中，读取数 据库更新信息，然后“翻译”（Decode）成逻 辑的形式，可发送到远程从库做数据同步。 辑的形式，可发送到远程从库做数据同步。 PG WAL Other DB 2016Postgres中国用户大会 Postgres Conference China 2016 中国用户大会 为什么要选择逻辑复制？ 2016Postgres中国用户大会 Postgres Conference China 2016 中国用户大会 数据库总体架构 PostgreSQL 主库 数据库中间件 逻辑复制 2016Postgres中国用户大会 Postgres Conference China 2016 中国用户大会 SQL语句 数据 MYSQL PG ORACLE LOGICAL Broker M1 M2 M3 Mn Master 逻辑解码 产生SQL+数据 MQ消息队列 DB重放语句 逻辑复制架构图

of WAL • WALInsertLock 此锁用于将事务日志记录内容插入事务日志内存缓冲区内。 首先，加锁，然后将包括整个缓冲区（full_page_writes打开状态）的内 容复制到日志缓冲区内。 在日志缓冲区刷新期间检查日志缓冲区是否有新内容添加，因为这 关系到设置日志缓冲区的刷新点。 确定检查点重做位置在联机备份期间强制执行完整页写入，直到备 份完成。 2016Postgres中国用户大会 Postgres Conference China 2016 中国用户大会  Write Ahead Log Files • 基于时间点恢复 • 流复制 • 逻辑复制 • 误操作恢复 2016Postgres中国用户大会 Postgres Conference China 2016 中国用户大会  Logminter • 利用多版本特性，尽可能恢复数据。

where c1=?; -- hash value -> idx • update tbl set c1=xx; -- 更新非常频繁 • HOT , fillfactor • 全球化、字符集的选择 • 线性相关、范围查询，索引AM的选择。 • 数据类型的选择。 • big table 问题(备份、恢复、创建索引、索引深度），分区 2016Postgres中国用户大会 LOCK，秒杀、消除并发数据冲突 • count(*) 是否存在数据? perform limit 1(FOUND) • 短连接，连接池 • 频繁创建、删除临时表(10.0 ROADMAP) • explain评估结果集, instead count(*)（分页数） • 分页优化cursor instead order by offset • statement_timeout 防止雪崩 • truncate

某金融信息平台 国内知名的某互联网金融信息服务平 台，致力为个人、企业、金融机构提供 金融资产交易信息服务，打造综合性互 联网金融服务平台。 AnalyticDB for PostgreSQL 集 群实例 BI 分析 RDS RDS RDS EMR 交易库 大数据平台 经营分析平台 批量同步 AnalyticDB for PostgreSQL 价值点 通过多种索引技术、复杂SQL自动优化 列存储有更高压缩比，节省存储 空间  进行分析操作时列存模型减少磁 盘遍历的IO，性能极大提升  行存储对于需要查询某行详细 信息的性能更好  对于需要进行update及delete 操作的数据集性能更好  通过Index索引可以优化查询 性能 同一张分区表，按行/列/OSS分别 存储不同温度数据 Dec 本地 Column-base 数据 本地 Row-base 数据 Aug Year

2018年PostgreSQL中国技术大会 目前服务器架构 2018年PostgreSQL中国技术大会 MySQL应用史 • 最开始做的站群系统WEB端使用MySQL： • copy简单快速，批量复制，替换修改简单； • 每个网站一个库，单体数据量小，数据类型固定； • 后来做SCRM系统，也首选MySQL： • 需求经常改动，每次改需求先改数据库； • 数据量越来越大，越来越不了解这只海豚；

postgresql操作手册 前言： 1.蓝色字体表示命令行命令，正式执行时不要复制前面的#号，#号只是提示应 该使用root权限操作 2.绿色字体表示注释，有时注释太多就不用绿色表示了 3.注意：本文档的所有操作请先在测试机里进行实践，请不要直接在真实的服 务器中操作！ 版权声明： 本文档以开源的形式发布，所有条款如下： （1）无担保：作者不保证文档内容的准确无误，亦不承担由于使用此文档所导致的任何后果