周正中-PostgreSQL内核优化及生产实践那些事.pdf

PostgreSQL 技术布道 阿里云PG 内核优化 digoal 9/7/2016 议题 • PostgreSQL 前世今生 • PostgreSQL 特性 • PostgreSQL 适应的场景 • 最佳实践 • 阿里云PostgreSQL内核优化 PostgreSQL发展历史 版本迭代 里程碑 7.2 2002年 • GIS PostGIS(覆盖民用、政界、军用、科研) • 类型 – 点 • 二维、三维（经纬度、海拔）、多维、地址类型 – 线 • 闭合线段、开放线段、多点线段 – 面 • 圆、椭圆、矩形、长方形、正方形、规则多边形、不规则多边形、曲面 – raster • GIS 图数据, jpegs, tiffs, pngs, digital elevation models • 测绘、航天、天文应用 – 拓扑 • 操作符 – 点面判断、距离、面积、体积、叠加、相减、长度、弧度、夹角、pixel相关运算、raster 相关运算 • 索引 – 距离运算、距离排序、包含判断、相交判断、 • 函数 – 区域内线段长度（城市道路长度）、路径成本(坡度、长度、权重)计算、最佳路径计算、 区域面积（城市面积） 里程碑 8.4 • SQL:2008 • 窗口查询 • 并行恢复 • 递归查询 窗口查询- 数据透视 • 数据结构 – 学号、省份、城市、学校、年级、班级、科目、分数 • 查询需求 – 学号、(窗口)、分数、并列名次、名次、与第一名的分 差、与前一名的分差、第一名到当前学生的平均分 （帧）、处于哪个分数区间（比如分了10个区间） • 语法 – window_func() over(partition by part_col? order by col?) • first_value() 、lead(n)、lag(n)、dense_rank()、ntile(bucket)、 avg(), 窗口查询- 数据透视 递归查询- 支持树形结构数据 递归查询 递归查询 递归查询- 优化count(distinct) 按层级收敛 减少数据块扫 并行恢复 • 逻辑备份集恢复 • 多表并行还原 • 多个索引并行创建 里程碑 9.0 • 异步流式 复制 • 快速大版 本升级 • online code 异步流复制 • 基于REDO，异步流式复制(不需要等到xlog 切换) • 延迟毫秒内 • 支持一主多备 • 备库read only时，不影响接收redo • 备库read only时，不影响恢复（除非恢复时 要擦除已对记录持锁的查询） • 主备物理块级别一致 快速大版本升级 • 元数据（1万张表- 约十几MB） • 元数据导出导入 • 不需要动用户的数据文件 • 统计信息需要重新收集 online code • 在线调试服务端代码 • do language plpgsql • $$ • declare • begin • -- logical code • end; • $$;