网易首页 > 网易号 > 正文 申请入驻

论文秒变海报!开源框架PosterAgent一键生成顶会级学术Poster

0
分享至

鹭羽 发自 凹非寺
量子位 | 公众号 QbitAI

你好研究僧,听说刚刚中了顶会,却还在愁怎么做Poster(学术海报)

别急,容在下为你推荐一款新时代科研党神器——PosterAgent,帮你一键从paper.pdf跳转poster.pptx

相比GPT-4o,PosterAgent生成指标更优,同时token使用量减少87%,还只需要0.0045美元,就可将22页的论文转化为可编辑的 “.pptx” 终稿海报。

来自滑铁卢大学的联合研究团队,还精心构建了首个学术海报评估标准Paper2Poster,解决了长上下文、多模态压缩的评估空白。

话不多说,先给大家展示一波效果,以下面这篇CV论文为例。

先喂给GPT-4o-image,得到的是这样的:

显然学术海报三要素(吸睛标题、重点突出、色彩排版),GPT-4o-image通通都没有。

不妨交给PosterAgent试试:

视觉更连贯、信息还高效,难怪连已经毕业了的师兄师姐们都在X上哭诉,凭什么我们当年没有它

这下妈妈再也不用担心我做不好Poster,被老板在群里夺命call了(狗头)

下面来讲讲它为啥这么好用。

多模态海报自动生成

Poster在学术会议里的重要性不言而喻,需要让与会者在几分钟内就迅速从中掌握核心内容,这就很考验制作者的论文浓缩能力,以及文本和图形的排版功底。

为了帮大家解放双手,以及更一目了然地评估海报效果,研究团队提出了评估基准Paper2Poster以及基于此构建的多智能体框架PosterAgent

Paper2Poster:首个学术海报评估基准

Paper2Poster的数据包含100对AI领域论文和作者设计的海报,涵盖计算机视觉(19%)、自然语言处理(17%)和强化学习(10%)等子领域的280个不同主题,论文平均22页,生成海报的文本压缩比约为14.4倍,图形减少比约为2.6倍。

评估指标覆盖四个基本维度:

  1. 视觉质量:使用CLIP图像嵌入测量生成海报与作者设计海报之间的视觉相似度,再计算图像和文本的相关性,以确保图像属于有效整合。
  2. 文本连贯性:计算文本在Llama-2-7b-hf下的标准困惑度(PPL),衡量文字流畅度。
  3. 整体评估:选择一个VLM(如GPT-4o),从美学(元素质量、布局平衡、参与度)信息(清晰度、完整性、逻辑流)两个方面进行1到5分打分。
  4. PaperQuiz:这是团队专门设计的评估指标,以模拟作者和读者的交流。让代表不同专业水平(例如学生和教授)的VLMs阅读每张海报并回答测验,获得最高平均分的海报被认为在传达论文内容方面最有效。

PosterAgent:多阶段自动生成框架

根据Paper2Poster的要求,团队设计了一个采用自上而下设计理念的多智能体流程PosterAgent。

首先全局地将整个文档重组为简洁、连贯的章节,然后进行局部精炼,以实现颗粒度对齐。

具体包含三个关键组件:

  1. 解析器(Parser):将工具和基于LLM的摘要相结合,提取关键文本和视觉内容,生成结构化摘要库(如各章要点、重要图表)
  2. 规划器(Planner):匹配文本与图表,并用二叉树布局策略将其连贯排列,通过放大(zoom-in)机制迭代生成面板。
  3. 绘制器-评论器(Painter-Commenter):绘制器将内容转为简洁的要点列表和用于渲染的可执行代码,而VLM作为评论器提供布局反馈,确保整体连贯性和避免溢出。
超越GPT-4o?

眼见为实,为验证PosterAgent生成效果,研究人员用Paper2Poster评估了四类基线方法:

  • 理想化方法(Oracle methods):包含原始PDF和作者设计的海报GT Poster,作为最佳呈现基准。
  • 端到端方法(End-to-end methods):使用GPT-4o
  • 多智能体工作流(Multi-agent work flows):使用OWLPPTAgent
  • PosterAgent:框架变体分两种,PosterAgent-4o在内部LLM 和VLM评论器均使用GPT-4o,PosterAgent-Qwen的文本生成使用Qwen-2.5-7B,评论器则使用Qwen-2.5-VL-7B。

实验结果表明,在视觉质量和文本连贯性上,虽然4o-Image达到了最高的视觉相似度,但它也记录了最差的困惑度,说明生成的海报可能乍一看吸引人,但实际细看全是嘈杂或不连贯的文本。

PosterAgent则实现了最高的图形相关性,在视觉相似度上也紧随人类设计的海报。

当VLM评判时,PosterAgent-4o的平均得分为3.72,达到了与人类设计海报相当的水平,而PPTAgent因为经常生成无意义的文本或大片空白区域,因此得分都较低。

在PaperQuiz上,也能发现PosterAgent变体始终取得最佳分数。

值得注意的是,PosterAgent-4o虽然依据GPT-4o实现了冗长输出,但基于开源的Qwen-2.5系统变体在原始准确率上更胜一筹,说明PaperQuiz在评估时,内容量很重要,但呈现质量更重要

团队还计算了不同方法下的平均token成本,PosterAgent仅使用101.1K和47.6Ktoken,相较于OWL-4o成本降低了60%-87%,相当于每张海报只需要0.55美元(基于4o)0.0045美元(基于Qwen)

最后为了方便大家更直观地了解几种方法的海报生成效果,咱再举个例子。

这是论文作者自己做的,主题明确,重点突出,色彩搭配也和谐。

这张来自GPT-4o-image,看起来好像还行?但是仔细看文字,里面还是有不少乱码。

这张由GPT-4o-html生成,图片嵌入失败,文本也缺少排版。

这张出自PPTAgent,生成了大量空白区域。

下面这张来自OWL,同样缺少图像,甚至没有多余色彩填充。

最后是咱们的PostAgent,对比下来,海报结构清晰明了,图表与文字匹配度也相当高,在视觉效果上更接近作者设计的海报。

扩展一下思路,也许PosterAgent还可以用于制作课程学习资料。

公司里的PPT也未尝不能一试。

所以感兴趣的小伙伴们速速收藏起来这个海报神器~接下来的CVPR、ACL刚好都可以用上。

论文链接:https://arxiv.org/abs/2505.21497
代码链接:https://github.com/Paper2Poster/Paper2Poster
项目链接:https://paper2poster.github.io/

参考链接:
[1]https://x.com/real_weipang/status/1927797168171254006
[2]https://x.com/_akhaliq/status/1927721150584390129

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
发票中奖者全部姓蒲 和税务局长同姓?网传截图为按姓筛选 实际蒲姓中奖者仅1.5% 蒲某某也不是税务局长

发票中奖者全部姓蒲 和税务局长同姓?网传截图为按姓筛选 实际蒲姓中奖者仅1.5% 蒲某某也不是税务局长

闪电新闻
2026-07-10 16:28:45
《抓韩红》

《抓韩红》

智识漂流
2026-07-10 20:08:39
全场最烂!西班牙世界杯头号废柴!豪门水货灾难表现拖垮全队

全场最烂!西班牙世界杯头号废柴!豪门水货灾难表现拖垮全队

澜归序
2026-07-11 06:14:36
晋江鞋厂28死追踪!工人上班环境恶劣:跟蒸桑拿似的,电风扇吹出来的风都是热的

晋江鞋厂28死追踪!工人上班环境恶劣:跟蒸桑拿似的,电风扇吹出来的风都是热的

火山詩话
2026-07-10 14:55:37
伊朗一纸任免令通告全国,消失数月的内贾德等来东山再起的机会?

伊朗一纸任免令通告全国,消失数月的内贾德等来东山再起的机会?

全球风情大揭秘
2026-07-11 13:49:50
农村慢慢"消失"10种野果子,80年代很受欢迎,你老家那还有吗?

农村慢慢"消失"10种野果子,80年代很受欢迎,你老家那还有吗?

江江食研社
2026-07-10 11:30:08
这7种情况下,真的不建议有性生活,否则后果很严重!

这7种情况下,真的不建议有性生活,否则后果很严重!

医学原创故事会
2026-07-11 11:14:08
演员矢野浩二为广西捐款,称中国是自己第二个故乡

演员矢野浩二为广西捐款,称中国是自己第二个故乡

映射生活的身影
2026-07-09 09:09:14
油价大涨超0.47元/升,92汽油“3连跌”接近7.1元/升后,新周期“罕见反转”,7月17日调价或变涨!

油价大涨超0.47元/升,92汽油“3连跌”接近7.1元/升后,新周期“罕见反转”,7月17日调价或变涨!

猪友巴巴
2026-07-10 18:05:03
查尔斯三世“秘密接待”哈里的俩娃,祖孙时隔四年重逢,梅根也在场

查尔斯三世“秘密接待”哈里的俩娃,祖孙时隔四年重逢,梅根也在场

译言
2026-07-11 07:00:28
一周竟然7次,42岁男子心源性猝死,妻子:劝了很多次,就是不听

一周竟然7次,42岁男子心源性猝死,妻子:劝了很多次,就是不听

医学原创故事会
2026-07-08 23:34:05
彻底翻车!B 费赛后发文火速关评,全网怒喷坑哭 C 罗

彻底翻车!B 费赛后发文火速关评,全网怒喷坑哭 C 罗

一隅非生
2026-07-11 07:55:43
广州24岁准教师黄丽芬去世!名校毕业,喜欢吃辣,花光所有积蓄

广州24岁准教师黄丽芬去世!名校毕业,喜欢吃辣,花光所有积蓄

王楔晓
2026-07-11 08:36:56
挺进四强的亚马尔19岁生日前收获特殊礼物——内马尔签名球衣,被淘汰的内马尔则在奥兰多环球影城度假

挺进四强的亚马尔19岁生日前收获特殊礼物——内马尔签名球衣,被淘汰的内马尔则在奥兰多环球影城度假

红星新闻
2026-07-11 14:49:28
北京一家5口套现24亿全身而退,坑甘肃国资一把

北京一家5口套现24亿全身而退,坑甘肃国资一把

空谷幽幽蓝
2026-07-11 06:49:57
每场冲刺2.2次!39岁梅西世界杯散着步进8球 英媒:溜达足球之王

每场冲刺2.2次!39岁梅西世界杯散着步进8球 英媒:溜达足球之王

念洲
2026-07-11 11:32:33
非必要不做肠镜?医生:只要做过肠镜,患者一定多加关注这4点!

非必要不做肠镜?医生:只要做过肠镜,患者一定多加关注这4点!

芹姐说生活
2026-07-09 23:13:04
最高院:提供 “口交” “肛交”等进入式性服务,是否属卖淫行为?

最高院:提供 “口交” “肛交”等进入式性服务,是否属卖淫行为?

周军律师聊案子
2026-04-21 09:50:16
24小时警戒!多地宣布:停课、停工、停产、停运、停业

24小时警戒!多地宣布:停课、停工、停产、停运、停业

第一财经资讯
2026-07-11 01:40:04
范志毅:亚马尔必须尊重C罗!C罗18岁时 他爸妈还不知道认不认识

范志毅:亚马尔必须尊重C罗!C罗18岁时 他爸妈还不知道认不认识

念洲
2026-07-11 11:32:05
2026-07-11 15:31:00
量子位 incentive-icons
量子位
追踪人工智能动态
12931文章数 176513关注度
往期回顾 全部

科技要闻

苹果起诉OpenAI系统性窃密,挖超400前员工

头条要闻

哈兰德引爆挪威球衣抢购潮 多款球衣溢价超千元

头条要闻

哈兰德引爆挪威球衣抢购潮 多款球衣溢价超千元

体育要闻

燃尽的比利时黄金一代,逃不过厄运诅咒

娱乐要闻

IU被曝分手双方回应 年初互动早有预兆

财经要闻

一封举报信 引发小红书IPO合规考验

汽车要闻

行驶清爽智驾聪慧 奇瑞风云A9有颜更有趣

态度原创

数码
教育
亲子
旅游
军事航空

数码要闻

舞台狂跳也不掉 索尼发布入耳式专业监听耳机IER-M500

教育要闻

北京中考数学题,求√25的平方根,错的还不少

亲子要闻

6岁女孩脸上长有大面积咖啡斑,医生:早发现早介入

旅游要闻

南京玄武湖景区鸭子船、夫子庙景区画舫游船全部停运,南京长江传奇系列游轮停航

军事要闻

特朗普:1000枚导弹已瞄准伊朗

无障碍浏览 进入关怀版