ITPUB

很遗憾,ChatSQL,不会成功!

在投入了大量资源,并见证了初步成果和限制后,我现在可以大胆对ChatSQL的前景给出以下判断:

ChatSQL——至少是我们最初设想的那个,能够自主理解业务、实现全流程自动化数据提取的AI圣杯——它不会成功。

事情是这样的。

最近我们组织了一次项目复盘会,项目经理提到了一个让任何数据团队都欢欣鼓舞的数字:

“通过引入ChatSQL智能体,我们的自动化数据提取周期,效率飙升了30倍。”

这个数据,是我们设想的完美验证。它让我们相信,自己正走在一条正确的道路上:通过AI深度重塑数据工作流,彻底解放生产力。

我们解决了底层大模型的技术选型,将其无缝嵌入了业务流程,甚至启动了上千张核心表的元数据治理工程。我们以为已经铺平了通往成功的所有道路。

但这惊人的30倍效率,最终可能只是一个“幸存者偏差”。它只代表了那些最简单、最标准化的16%的取数请求。

因为项目经理马上报出了第二个数字:

“从这2个月的情况看,目前能够由ChatSQL独立、端到端完成的数据提取请求,覆盖率仅为16%。”

这失落的84%,像一座巨大的冰山,潜藏在成功的表象之下。

我原以为这失去的84%,源于元数据的尚未完善,因此确认了一下:“那些无法支撑的取数,是不是主要是表的元数据不完善所致?你们的元数据补充进度如何?”

项目经理的答复是:“元数据工作正在全力推进,核心表的梳理已近三分之一。”

但技术负责人又补了一句:“我们发现,即便所有元数据都达到五星标准,自动化覆盖率的提升,恐怕依然会非常有限。”

“为什么这么说?” 我追问。

“你看一下这些需求.......”,技术负责人发了我一个excel,里面是那些无法用ChatSQL实现的真实业务需求。

Image

事实比任何解释都有力量。

我发现,咱们面对的,根本不是一个当前机器可以独立解决的问题。当深入剖析那些被ChatSQL“拒绝服务”的真实需求时,我们看到的不是简单的技术障碍,而是一道道人类智慧与组织“惯性”共同构建的壁垒。

指令一:需要“读懂”报表的AI

“…取数格式需与某前台报表‘REPORT_AAAAAA1’一致,金额要跟其前X个月的合计数据保持一致…”

解读: 这要求AI进行“报表逆向工程”,这已经超出了Text-to-SQL的范畴。它需要理解一个视觉化的、经过聚合的最终产物,并反向推导出其背后的数据逻辑。

指令二:需要“通晓”历史的AI

“…本月口径变动如下,需要将附件某种类型收入明细(详见附件Excel)纳入…”

解读: 这里的核心逻辑,部分在Excel附件里,部分隐含在与“上月”的对比中。这要求AI具备人类分析师的上下文记忆和多源信息整合能力。

指令三:需要“跨越”边界的AI

“…基于某租户某表(TB_CCCC1)数据过滤特定用户…’”

解读: 这条指令直接指向了另一个应用系统的“数据半成品”,一个未经治理、随时可能变化的中间表。


这些案例揭示了一个真相:我们过去赖以成功的关于ChatSQL两大基石假设,在现实面前不堪一击。

  • 假设一:业务需求是逻辑自洽的。现实是:需求的完整逻辑链条,被割裂在报表、Excel、历史邮件和人的大脑里。
  • 假设二:数据源是标准且收敛的。现实是:业务总能找到最短路径,绕过数据中台,直奔那些最“新鲜”但也最混乱的应用数据。

至此,我们也许才会明白,ChatSQL之所以不会成功,并非是大模型技术本身有缺陷,而是因为它试图去解决一个它根本无法解决的问题。

我们一直以为我们需要构建一个先进的AI应用,但现在真正需要面对的,是企业长期以来积累的、根深蒂固的“数据债务”:不规范的需求流程、模糊的数据权责、割裂的系统生态,以及用户随心所欲的数据交互习惯。

ChatSQL就像一个被寄予厚望的超级跑车,但我们却要求它在泥泞、崎岖、没有路标的乡间小道上,跑出高速公路的水平。这注定是一项无法完成的任务。

“要想富,先修路”,道出了AI美好生活与现实的差距。

那么,该怎么办?放弃吗?

不。我们现在需要进行一场战略性的收缩,从追求一个完美的“自动化神话”,转向构建一个务实的“人机协作”体系。

从“万能模型”到“工具箱”

不能幻想一个模型解决所有问题,而是为特定场景(如报表解析、历史继承)打造专用的“微智能体”,将其作为分析师的辅助工具。

从“被动适应”到“主动引导”

要强化需求侧的管理,推行标准化模板,设立“需求翻译官”的角色,强迫模糊的需求在进入AI系统前变得清晰。

从“无限覆盖”到“价值聚焦”

需清晰地定义了自动化的边界,基于ROI,果断放弃那些投入产出比过低的复杂场景,将它们交还给更灵活的人类。


所以,当我断言“ChatSQL不会成功”时,我指的是那个试图替代人类分析师、自主理解一切复杂业务的“AI神话”的破灭。我们必须清醒地认识到,在还清我们沉重的“数据债务”之前,任何AI工具都无法独自跨越那条“语义鸿沟”。

我们可以改变自己,但改变不了体系,体系的改变需要时间,而这不是我们一只团队,一个企业,甚至一个行业所能改变的。

我们当前的目标,或许不是一个冰冷的、100%自动化的数据工厂,而是一个由AI赋能、但仍由人类智慧主导的、更高效、更精准的特定场景的数据分析作坊。

与大家共勉。

直播预告
9月25日,ITPUB携手行业专家围绕“ 开源AI实现技术平权化”这一主题开展线上直播分享,点击下方卡片预约直播:
Image