首页 游戏 软件 资讯 排行榜 专题
首页
AI
西湖大学ICLR‘26:万字材料秒出SVG,绘图神器革新学术插图

西湖大学ICLR‘26:万字材料秒出SVG,绘图神器革新学术插图

热心网友
89
转载
2026-02-24

AutoFigure团队 投稿
量子位 | 公众号 QbitAI

免费影视、动漫、音乐、游戏、小说资源长期稳定更新! 👉 点此立即查看 👈

你是否也经历过这样的绝望:

论文截稿在即,面对大段的文字你抓耳挠腮,PPT画框画到手抽筋;

尝试用Nano banana生个图,颜值拉满但逻辑全错,甚至还自带“克苏鲁”风格的模糊字符;

^好不容易调好了Prompt,结果想改一个小图标,却发现AI给你的只是一张无从下手的“死图”。

这种“审美与逻辑不可兼得、生成与编辑彻底断层”的痛点,终于要被终结了。

现在,你可以把大段的文字材料直接塞给AutoFigure,西湖大学团队推出的全新智能体绘图框架。



它能够一键读懂上万字的论文、书籍、博客,自动化地吐出高质量的学术插图为你所用。

更重磅的是,其优化版本AutoFigure-Edit实现了从“像素”到“矢量”的跨越:生成的插图不再是死板的图片png,而是细节可编辑的SVG文件(现在你可以在PPT里直接编辑了)。

目前,该工作已入选ICLR 2026。代码、数据集、Web交互界面全部开源,并同步上线了可一键使用的在线 。



背景:为什么AI以前画不好科学插图?

在学术绘图界,一直存在两个极端:

1. End-to-end派(如GPT-Image):审美在线,但逻辑经常“蹦迪”,文字更是重灾区,充满了莫名其妙的幻觉字符。

2. Text-to-code派(如TikZ/SVG生成):逻辑倒是严密,但视觉效果往往丑得像上个世纪的教科书,缺乏现代论文的高级感。

AutoFigure提出了“推理式渲染”(Reasoned Rendering)范式:将“脑子(逻辑布局)”和“手(美化渲染)”彻底分开。

技术方案:模拟大牛设计师的“三步走”策略

AutoFigure的核心是一个分工明确的多智能体协作系统。



△AutoFigure架构图(由AutoFigure生成,未经修改)

第一步:Conceptual Grounding(构建逻辑骨架)

AI读入你长达万词的文字材料,自动提取实体和关系,生成一个粗糙但结构正确的布局(SVG/HTML代码)

第二步:Critique-and-Refine(Agent闭环迭代)

模拟人类设计师与甲方的反复拉锯,对图片布局进行反复修改:

AI Designer负责根据反馈修改布局。AI Critic则负责挑毛病(例如“这里箭头重叠了”、“布局重心不稳”),直到得到满意的绘图质量。

第三步:Aesthetic Rendering & “Erase-and-Correct”

在最终美化阶段,AutoFigure首先将布局渲染为一张精美的图片。随后,为了解决现在AIGC生图文字变形的问题,保证图片中文字的正确性,AutoFigure引入了专门的“擦除-修正”策略:用OCR识别模糊字符,把它们“抠掉”,再重新覆盖上清晰的矢量文本。

AutoFigure-Edit:把AI生成图装进PPT



△AutoFigure-Edit流程图(由AutoFigure-Edit生成)

在最新版本AutoFigure-Edit中,西湖大学团队更进一步,引入了SAM3自动抠图技术,包括:

利用Meta最新的SAM3技术识别图中的Icon。配合RMBG-2.0自动去除背景。矢量重组:将这些干净的图标重新塞进生成的SVG模板中。

最终,你得到的是一个可以在浏览器内置编辑器里直接拖拽、改字、换色的动态画布,能够按照你的想法对图片细节进行更改。



△基于AutoFigure-Edit的在线画布



△AutoFigure-Edit渲染过程示例图

人类实验结果:66.7%的专家觉得它达到了Camera-ready标准!

为了验证AutoFigure的效果,团队构建了全球首个大规模科学插图基准——FigureBench。

规模宏大:涵盖3,300高质量文本-图片对,跨越论文、综述、技术博客、教科书等四种科学文本。



△FigureBench数据集介绍

降维打击:在逻辑清晰度和准确度上,AutoFigure的优势极大,在教科书类任务中胜率甚至高达97.5%。



△在FigureBench上的实验结果

更具说服力的是人类专家盲测:10位论文一作对生成的图片进行评审,结果显示66.7%的专家认为AutoFigure生成的图已经达到了Camera-ready(出版级)标准。



△人类专家评价结果

接下来,我们看几个case,直观感受一下。

由AutoFigure-Edit产生的方法图:



由AutoFigure-Edit产生的方法图:



由AutoFigure-Edit产生的方法图:



方法图,左侧为第一阶段PNG形式,右侧为最终转换得到的SVG文件:



方法图,左侧为第一阶段PNG形式,右侧为最终转换得到的SVG文件:



由AutoFigure-Edit产生的生物机制图:



由AutoFigure-Edit产生的材料机制图:



由AutoFigure产生的综述图:



由AutoFigure产生的教科书图:



项目价值:AI Scientist的“最后一块拼图”

插图不仅是视觉补充,更是复杂科学概念的桥梁。AutoFigure的出现,意味着:

1. 赋能AI科学家:这是AI实现全流程自主研究(从文本到绘图)的关键一步。

2. 不只是架构图:无论是流程图、算法流程,还是复杂的教科书示意图,它都能手到擒来。

本项目提供了可一键使用的在线 。建议各位研究者先收藏,下次ddl前,起码画图应该不会那么仓促了。

GitHub:

https://github.com/ResearAI/AutoFigure-Edit
论文:

https://arxiv.org/abs/2602.03828v1
HuggingFace:

https://huggingface.co/datasets/WestlakeNLP/FigureBench

https://deepscientist.cc
彩蛋:

所有学者均可免费体验demo,有期刊投稿需求的朋友不用担心,Nature风格、Science风格等多样风格一键生成功能也将很快上线。

想要体验这款“绘图神器”吗?点击上方链接即可开始你的创作!

本项目由西湖大学张岳实验室全面开源。西湖大学自然语言处理实验室(WestlakeNLP)成立于2018年9月,由张岳教授领导。张岳教授毕业于牛津大学,获博士学位,现任西湖大学工程学院副院长。他著有剑桥大学出版社出版的《自然语言处理》一书,并担任过EMNLP 2024等多个顶级NLP会议的程序委员会主席。

本项目核心团队成员包括翁诣轩*、林圳、朱敏郡、谢秋婕、卢攀忠、孙启耀等人。实验室过往成果包括Cycle Researcher、DeepReview、DeepScientist(两个月刷新三个前沿任务SoTA的人工智能科学家项目)等工作。欢迎感兴趣的同学加入到自动化科学发现研究,有意向申请长期实习、博士生、研究助理者可联系张岳教授邮箱(zhangyue@westlake.edu.cn)。

来源:https://www.163.com/dy/article/KMD1QF5L0511DSSR.html
免责声明: 游乐网为非赢利性网站,所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系youleyoucom@outlook.com。

相关攻略

解析《诛仙》33位男性角色:谢征杀伐果断,齐昊疑心深重
娱乐
解析《诛仙》33位男性角色:谢征杀伐果断,齐昊疑心深重

解读《逐玉》33位男角色,谢征杀伐果断,李怀安反权斗,齐旻疑心很重,据已播出13集总结。1谢征(张凌赫 饰),谋略过人,胆识超群,重情重义,杀伐果断,城府很深,手下忠心,长得帅。2李怀安(任豪 饰)

热心网友
03.11
西湖大学ICLR‘26:万字材料秒出SVG,绘图神器革新学术插图
AI
西湖大学ICLR‘26:万字材料秒出SVG,绘图神器革新学术插图

AutoFigure团队 投稿量子位 | 公众号 QbitAI你是否也经历过这样的绝望:论文截稿在即,面对大段的文字你抓耳挠腮,PPT画框画到手抽筋;尝试用Nano banana生个图,颜值拉满但逻

热心网友
02.24

最新APP

暗黑之地
暗黑之地
角色扮演 03-28
你比我猜
你比我猜
休闲益智 03-26
锦绣商铺
锦绣商铺
模拟经营 03-26
儿童画画
儿童画画
休闲益智 03-25
疯狂猜词
疯狂猜词
休闲益智 03-25

热门推荐

明日方舟终末地主线后开启小陈剧情攻略
游戏攻略
明日方舟终末地主线后开启小陈剧情攻略

在明日方舟终末地中,小陈剧情的开启需要满足一定条件并完成特定任务。首先,要确保玩家已经达到一定的游戏进度。这包括推进主线剧情到一定阶段,解锁了相应的区域和功能。随着主线剧情的推进,

热心网友
03.28
逐玉与白日提灯对比解析:没有对比就没有伤害
娱乐
逐玉与白日提灯对比解析:没有对比就没有伤害

前言《逐玉》大结局落幕那晚,我盯着屏幕良久,胸口像压了块浸水的棉絮,沉闷得喘不过气。从首播时满怀热望地守在更新页面,到中期边看边叹气、反复暂停找逻辑漏洞,再到最后几集干脆调成倍速、只为“完成任务”式

热心网友
03.28
4月1日起俄罗斯拟禁汽油出口,全球油价或再迎上涨
业界动态
4月1日起俄罗斯拟禁汽油出口,全球油价或再迎上涨

3月28日消息 据新华社报道,俄罗斯政府日前宣布了一项重要的能源指令。俄副总理亚历山大·诺瓦克已指示能源部起草行政命令,计划从4月1日起全面禁止汽油出口。此举的核心目的是在中东战事引发全球能源市场动

热心网友
03.28
蓝海读书官方入口与在线阅读网址使用指南
电脑教程
蓝海读书官方入口与在线阅读网址使用指南

蓝海搜书最新可用网址是https: www lanhaizw com ,平台具备极简无广告界面、全球CDN加速、三类自适应阅读模式、四重语义检索、27个细分分类、跨设备同步及离线

热心网友
03.28
悟空浏览器网页正版入口在哪?下载与使用全指南
手机教程
悟空浏览器网页正版入口在哪?下载与使用全指南

在网络信息爆炸的时代,一款好用的浏览器能为我们带来便捷与丰富的体验。悟空浏览器网页版正式版入口,成为众多用户探索网络精彩的关键通道。悟空浏览器以其简洁界面和强大功能吸引着广大用户。

热心网友
03.28