Postgresql Scale

• scale up
  • 堆硬件
• scale out replicas
  • 读写分离
  • pub/sub
• scale out sharding
  • 分片 - 多节点
  • 应用分片 - 逻辑映射
    • 可控性高、特殊场景
  • 服务分片 - cdb、citus
    • 使用简单、要求使用 patten 符合

• backup
  • pgbackrestGitHubpgbackrest/pgbackrest
    • MIT, perl & C
    • by Crunchy Data
  • wal-g笔记WAL-Gwal-g/wal-g 是什么？ · Apache 2.0, lzo 部分 GPL 3.0+ · PostgreSQL 备份、恢复工具 · WAL-E 后继 - Golang 重写 Python - 性能 x4 · 支持 PostgreSQL, MySQL/MariaDB, Mongo, FoundationDB, Redis, Greenplum打开：/notes/db/relational/postgresql/wal-g
    • by Citus Data, Apache-2.0, Go
  • Barman
    • 2ndQuadrant, GPL v 3.0, python
    • basebackup & rsync
  • pg_probackup
    • by Postgres Professional, PostgreSQL License, C
  • BART
• Advanced PostgreSQL backup & recovery methods

Story

• Gitlab 因为 License 问题放弃 Citus Sharding GitLab with CitusDB
• Gitlab PostgreSQL Partitioning with FDW
  • PostgreSQL 11 sharding with foreign data wrappers and partitioning
    • 问题
      • 需要为 foreign server 连接信息
      • 不好维护 schema
      • 只支持本地 foreign key
      • 可能不会 push down 问题
      • 性能降低
      • 执行和计划时间增加
      • 每个分片都需要 HA 集群
      • 没有 parallel scan
      • 更新性能问题
      • 没有全局事务

Logical Replication