西湖大学的"发表级"科研论文插图制作AI agent来了!
前几天分享了👉北大&Google联手推出"发表级"科研论文插图制作AI agent!
本次分享西湖大大学的成果AUTOFIGURE,团队利用构建的基准测试集FigureBench进行了大量实验,将AUTOFIGURE与多种基线方法进行比较。结果表明,AUTOFIGURE始终优于所有基线方法,能够生成可直接用于发表的高质量科学插图。
AUTOFIGURE也使用多个agent协作完成:
Extract Concepts - 从科学文本中识别关键实体、关系及结构 Plan Layout - 根据内容类型确定最优视觉排列方案 Validate Structure - 确保内容完整性与逻辑一致性 Render Figure - 生成可直接用于发表的科学插图
相关论文已被2026 ICLR 接收,
同时,团队还构建了首个面向文本生成科学插图(First large-scale benchmark for text-to-scientific-illustration )的大规模基准数据集FigureBench,包含3300对高质量样本。
基于FigureBench,团队设计了一套以“VLM-as-a-judge”范式为基础的评价方案。该方案结合了参考评分与盲法成对比较,从美学质量、准确性等多个维度对AI生成的科学插图进行评估。
最终结果显示,AUTOFIGURE秀的一匹~
可以试试它的https://github.com/defalt-praxis/autofigure-demo demo
https://defalt-praxis.github.io/autofigure-demo/
(加入学习,备注:299)