海量数据 1024 发布会观后感: 国产数据库行业正经历从"国产替代"到"AI原生"的蜕变
摘要:1024程序员节,海量数据开了场开发者日暨产品发布会。数据库老司机"digoal 德哥"带你划重点:AI原生数据库长什么样、向量数据库的路线之争、Vastbase 向量版的硬货,以及海量面向未来下的几盘棋。
我是德哥,一个在数据库圈子里泡了二十来年的老司机。10月24日,程序员节,海量数据办了场 1024 开发者日暨产品发布会,我蹲完整场,说几点真实感受。
先说结论:这场发布会最值得关注的是一个信号——国产数据库的叙事主线,正在从"国产替代"切换到"AI原生" 。
而承接这个切换的关键棋子,是什么呢? 请继续往下看。
一、738亿美元的大池子:AI数据基础设施成了新主战场
发布会上,IDC中国的研究经理王楠给了一组数据:2025至2030年,中国AI数据基础设施市场将以37.7%的复合增速增长,到2030年市场规模预计达738亿美元,比2025年增长超过10倍。
一个时代的底盘在换。AI竞争的上半场是"拼模型",下半场是"拼应用"——而应用要落地,绕不开数据底座。
为什么?两个绕不开的现实:
第一,大模型会一本正经地胡说八道。公开测试里,法律场景离线问答的幻觉率最高能到85%,医疗场景最高能到65%以上。不让模型接入企业自己的、可信的知识,AI进生产就是耍流氓。RAG要work,前提是有一个高性能、高召回的向量检索底座。
第二,Token就是钱。把企业私域知识向量化、检索后再精准喂给模型,本质是把"反复发生的高成本大模型阅读",前移成"一次建库、按需检索"。少用Token、少占算力、甚至可以让小模型答好业务问题——这笔账,企业CIO们算得比谁都清。
所以我的判断一直没变: 企业AI要落地,先过向量数据库这一关。
这场发布会的学术含量很高。清华大学教授、数据智能北京市重点实验室主任李国良老师,把AI与Agent原生数据库的核心特征概括成六条:多模态处理、智能自然语言交互、语义事务、细粒度弹性伸缩、长短期记忆、安全治理。
老司机给你翻译一下:数据库要从"存储和查询数据的系统",演变为"支撑智能体感知、记忆、推理与行动的数据底座"。李老师有句话我印象很深——这很可能是继分布式、云原生之后,数据库发展的下一个重要阶段。
作为一个从单机、集中式、分布式、云原生一路看过来的老司机,我非常认同这个判断。复盘数据库每一次范式切换,规律都一样: 应用变了,数据管理的核心矛盾就变了,最后一定逼着内核变。 AI应用变了,向量这种"AI 理解世界的通用数据语言"就必须进内核。
三、发布会的硬菜:向标联合 + 多模协同
海量数据产品经理黄薇发布了两项能力升级:向标联合、多模协同。
向标联合,解决的是企业级AI最真实的一道题:"先查向量,还是先查标量?"
真实业务查询从来不是单一的相似度搜索。"查找与当前故障最相似的案例,且限定xx区、保内、近90天、当前用户可见"——向量管"像什么",标量管"是什么",权限还得管"谁能看"。传统方案要么在检索前加静态过滤(条件太严丢候选),要么检索后过滤(在海量结果中捞针),很难兼顾召回和延迟。
海量的做法,是把向量算子和筛选、关联、排序、聚合塞进同一条SQL执行链路,执行路径交给数据库自己决定。
效果:某医院400万病例的复杂检索(病例语义匹配 + 诊断和术后阶段筛选 + 病史/检查/用药多表关联 + 排序),一条SQL搞定,查询延迟降低46%,精度保持99%以上,业务效率翻倍。
多模协同,解决的是"多类计算互相踩踏"的问题:自适应标量选择率,根据业务条件动态判断先过滤还是先检索;TopK结果趋于稳定就果断终止搜索,不做无效功;VectorBuffer与SharedBuffer双缓存动态分配,SIMD指令集加速,PQ、RabitQ量化压缩压降访存开销。结果是:关系与向量协同检索速度提升约40%;百万级混合检索QPS超1万,召回率99%以上,磁盘占用还降了约75%。
如果你被"应用层拼多套系统"折磨过,那你一定会认同海量的解决方案: 把复杂留给内核,把简单留给应用。 这话说起来容易,做起来是要动执行器和优化器的。
四、Vastbase向量版:刀刀都砍在成本上
发布会的重头戏,是海量数据库Vastbase向量版——由海量数据联合清华大学共同孵化的企业级向量数据库。我把它的核心技术拆开看了一遍,总结了我认为最重要的看点:
基于磁盘的向量图索引(GRAPH_INDEX) 。原生HNSW快但吃内存,DISKANN慢且调参复杂。海量的解法是图剪枝 + 双缓存分区 + 动态缓存分配 + 自适应指令集,并发吞吐是传统索引的2~20倍。亿级高维向量检索,成本可控才是正经事。 异步索引更新。新数据先进插入缓冲区、后台异步刷新、查询时主索引与缓冲区融合——写入吞吐最高提升10倍,数据新鲜度保持毫秒级。实时业务等不起"批量重建索引"。 图挂桶 + PQ/RabitQ量化压缩。桶级图结构让索引空间下降10倍以上,量化压缩让磁盘占用减少约75%,而且性能不降反升。 自适应搜索终止。动态阈值模型判断"足够好"就收手,检索速度提升40%,资源消耗降约20%。 并行建索引。多线程拆分数据、多索引并行查询,建索引提速3倍。
跑分我也帮你们看了:不同并发下,P99延迟较友商降低7.0%~96.5%;高并发场景QPS达到友商的1.09~9.65倍;60并发下CPU user占用低至9.4%,单位内存吞吐效率最高领先18倍以上;全场景召回率99%以上。对Milvus,同等召回下QPS领先56.5%~139.6%,索引构建快2.2~9.4倍,磁盘占用节省30.8%~67.6%。
数字归数字,我更看重的是路线选择。向量数据库的技术路线之争,本质是四选一: 插件路线(pgvector)、专用向量库(Milvus等)、搜索式数据库(Elasticsearch等)、内核原生路线(Vastbase、Oracle AI Vector Search)。
我的观点,武断一点说:插件路线适合验证,专用库适合纯向量场景,而企业级核心生产,终将收敛到内核原生。原因不复杂——企业检索既要算"像什么"(向量),也要算"是什么"(标量),还要算"谁能看"(权限)。权限不下推、事务不统一、两套系统各管一半,运维成本和一致性风险,最后都转嫁给了客户。向量,终究要长在内核里。
五、同场加映:数智引航的分布式,补上大规模拼图
这场发布会还有一支不能忽视的力量——源自清华大学的向量数据库攻关团队数智引航。首席专家孙佶重点讲解了面向大规模生产集群的向量数据库分布式版本VexDB:三节点20并发下QPS从约1300提升到3200(2.44倍),索引创建最高加速3.47倍,写入吞吐最高提升10倍;安防场景下单节点支持10亿以上数据规模,15分钟完成3000万以上数据写入,分布式查询延迟500毫秒以内。金融投研场景,统一底座相比原有的Milvus + ElasticSearch方案,综合成本降低30%。
轻量化的VexDB-Lite也值得一提:可以作为插件嵌入PostgreSQL、DuckDB、SQLite,图挂桶让索引大小下降约10倍,子图分割让核心内存占用降低约5倍。
作为一个PostgreSQL 数据库的老炮,最爱看"国产给 PostgreSQL 贡献更高级的向量插件". 这条路线被认真做成产品,我是欣慰的 —— 存量生态的平滑增强,比推倒重来更现实。
六、面向未来:海量的规划,写在这些细节里
最后聊聊"面向未来"这件事。海量数据的规划,散落在发布会的几个细节里:
第一,产学研的底座。 2025年,海量数据联合清华大学、清华工研院成立"数据智能北京市重点实验室",方向是AI数据库—AI数据科学—AI数据安全。李国良老师团队与海量的工程团队这个组合拳打的是"科研→产品→业务"的转化效率。
第二,产品的方向锚点。 李国良老师提炼的六大特征可以当 roadmap 看:多模态、自然语言交互、语义事务、弹性伸缩、长短期记忆、安全治理——海量已经在多模态(结构化、文本、向量、时序、空间统一存储)、向标联合(语义事务的一角)、统一资源调度上落了子。海量给自己的定位也很清楚:做从传统应用走向下一代AI原生应用的"桥"——用户不用推倒原有系统,也能把AI接进来,这正是"向标联合"背后的产品哲学。发布会上还秀了一把肌肉:基于海量数据库 Vastbase 的数据智能体,在国际权威多步推理基准DABStep和NL2SQL的Spider两个榜单上夺冠,是首个登顶DABStep的国产向量数据库。数据智能体是"数据库+AI"的终极形态之一,这个第一,含金量在"国产"二字。
第三,生态和人才。 累计服务4000多家客户,覆盖政务、制造、金融、通信、能源、医疗、交通;入围IDC《中国本地事务型数据库市场份额,2025》主要推动者之列;六地研发中心、覆盖38个城市的售后网络。基础软件的竞争是长跑,工程化和服务能力才是护城河。
肖枫总的话意味深长:做基础软件,很难。别人写了几十年的代码,我们要快速追赶;别人构建了几十年的生态,我们要快速搭建。一代人有一代人的长征。
我个人深以为然。AI 带来的范式变革,把过去几十年基础软件积累的壁垒重新归零——这是国产数据库离世界前沿最近的一次。而向量数据库,就是这轮牌局里最关键的一张牌。