PostgreSQL码农集散地

想撼动Oracle,PG系国产你还不配!吐槽你连最基本的空间分配都没做好

文中参考文档点击阅读原文打开, 同时推荐2个学习环境: 

1、懒人Docker镜像, 已打包200+插件:《最好的PostgreSQL学习镜像》

2、有web浏览器就能用的云起实验室: 《免费体验PolarDB开源数据库》

3、PolarDB开源数据库内核、最佳实践等学习图谱:  https://www.aliyun.com/database/openpolardb/activity 

关注公众号, 持续发布PostgreSQL、PolarDB、DuckDB等相关文章. 

第28期吐槽:PG 每次只扩展1个block

这个问题可能即将得到解决: 《PostgreSQL 16 preview - extend relation 优化, 扩展数据文件大幅度优化, 提升批量、高并发写入场景性能》

1、产品的问题点

  • PG 每次只扩展1个block

2、问题点背后涉及的技术原理

  • 当写入或更新数据时, 如果现有的数据文件无法放下新的tuple, 需要extend 数据文件, 但是PG只扩展1个数据块.

3、这个问题将影响哪些行业以及业务场景

  • 高速写入的业务场景, 例如IOT, 时序, feedlog类.

4、会导致什么问题?

  • 导致extend block exclusive锁竞争, 影响写入性能. PG 最近的很多个版本都在做写入优化, 其中也包含了extend block这块.

  • 由于每次扩展1个数据块, 对应的数据文件大小也会频繁发生变化, 而PG使用的是文件系统来存储数据文件, 意味着inode也会发生变化, 文件系统inode变更也会带来的一些锁竞争问题.

5、业务上应该如何避免这个坑

  • 编译时, 选择更大的block size, 只能弱化无法避免这个问题.

6、业务上避免这个坑牺牲了什么, 会引入什么新的问题

  • 管理更加复杂, 而且无法完全避免.

  • 由于目前PG的一个实例只能选择一种block size规格, 如果选择大的block size, 会导致某些需要小block size的表可能性能变差并浪费更多shared buffer. (例如偏TP的业务)

7、数据库未来产品迭代如何修复这个坑

  • 希望可以自定义扩展规则, 例如

    • 表级别可以设置, 每次扩展多少个block, 或者:

    • 根据数据表的大小, 阶梯性增加每次扩展多少个blocks, 直到封顶max extend blocks。业界领袖Oracle就是这么干的,不愧是领袖。

从近期的吐槽系列来观察, 即使是目前最先进的开源数据库PG离企业级标杆Oracle还有非常大距离, 虽然这一点不妨碍大量基于PG的国产数据库前赴后继的干O, 但如果你只是拿PG来改个名的话貌似还不配干O! 

国产厂商看到我下面吐槽的这些坑会不会后悔选择基于PG来造呢?  :

1 德哥邀你鞭策数据库第1期 - PG MVCC
2 Tom Lane老师, 求求你别挤牙膏了, 先解决xid回卷的问题吧
3 为什么增加只读实例不能提高单条SQL的执行速度?
4 德哥邀你鞭策数据库第4期-逻辑日志居然只有全局开关
5 第5期吐槽:经常OOM?吃内存元凶找到了:元数据缓存居然不能共享
6 第6期吐槽:2024了还没用上DIO,不浪费内存才怪呢!
7 第7期吐槽:今年才等来slot failover,附上海DBA招聘信息
8 第8期吐槽:高并发短连接性能怎么这么差?
9 第9期鞭策:“最先进”的开源数据库上万连接就扛不动了,怪研发咯?
10 第10期吐槽:说删库跑路的都是骗子,千万别信,他们有的宝贝你可能没有!
11 第11期吐槽:关闭FPW来提升性能,你想过后果吗! 本期彩蛋-老板提出变态的要求,你会答应吗?
12 第12期吐槽:SQL执行计划不对?能好就见鬼了!优化器还在用几十年前的参数模板,环境自适应能力几乎为零
13 第13期吐槽:十个中年人有九个发福的,数据库用久了也会变胖!这一期吐槽PG膨胀收缩之痛,tom lane啊您为啥不根治膨胀呢?
14 吐槽(鞭策)PG以来我掉了“一半流量”!老外听不得忠言逆耳吗? (本期抽奖-掌上游戏机)
15 第15期吐槽:没有全局临时表,除了难受还有哪些潜在危害?
16 空缺,因为这一期的吐槽PG社区已经落实了.
17 第17期吐槽:被DDL坑过的人不计其数!严重时引起雪崩,危害仅次于删库跑路!PG官方不支持online DDL确实后患无穷
18 第18期吐槽:都走索引了为什么还要回表访问?原来是索引里缺少了“灵魂”
19 第19期吐槽:从DuckDB导入到PG后膨胀了5倍,把存储销售乐坏了!什么情况?
20 第20期吐槽:PG17新版本这么香,为什么不升级呢?居然是因为这个
21 第21期吐槽:90%的性能抖动是缺少这个功能造成的!也是DBA害怕开发去线上跑SQL的魔咒
22 第22期吐槽:DB容灾节点延迟了,网络带宽瓶颈?用CPU换啊!该“魔法”PG还不支持!
25 第25期吐槽:PG的物理Standby无法Partial导致单元化架构/SaaS使用不灵活
26 第26期吐槽:开发者使用PG的第1件事-配置访问控制策略,体验有待加强
27 第27期吐槽:block size既大又小!谁把成年人惯成这样的?
99 第99期吐槽:SQL hang住锁阻塞性能暴跌!抓不到捣蛋SQL的DBA很尴尬。
吐槽还在继续, 请拭目以待... 
好消息是, 上次分析干掉O的并不是国产厂商, 而是...的文章已经超4万阅读. 感谢小伙伴们的支持: 
Oracle正遭降维打击!你猜对手是谁? 想破脑袋都猜不到

本期彩蛋-招商中,有需要的小伙伴可联系嵌入...

文章中的参考文档请点击阅读原文获得. 


欢迎关注我的github (https://github.com/digoal/blog) , 学习数据库不迷路.  

近期正在写公开课材料, 未来将通过视频号推出, 欢迎关注视频号:

Image