找回密码
 立即注册
查看: 561|回复: 5

谷歌北大联手学术版Banana爆火,论文图表100%精确生成

[复制链接]

4072

主题

535

回帖

1万

积分

论坛元老

积分
13076
发表于 2026-2-16 17:37:05 | 显示全部楼层 |阅读模式
效果好到刷屏的Nano Banana,学术特供版热乎出炉!; m0 Z1 N& W" H7 a, X. a7 B  e( w
名字就是如此直观——PaperBanana,给你每天都在头痛的Paper用上Banana。(试图押韵skr)% u$ m+ C6 r, }2 E
而且这一次是由谷歌北大强强联手打造。
; u( f" [" k( \
6 ?" H$ N6 [% p
知道你想马上看效果,别急,三个官方案例这就给大家搬上桌。
. [/ _  l1 n; D! ^  s' a在相同输入下,人类绘制、原版Nano Banana与PaperBanana生成的论文插图对比如下:
% i9 c$ ?9 d$ ^1 S1 s  T$ r综合评估显示,PaperBanana在美观性、简洁性与逻辑清晰度上均全面优于原版。
7 T4 D5 Y; c; p0 \0 o

0 S' j: w2 }- u" y3 w8 f" |而且它还能直接优化人工绘制的插图,瞅瞅右边,是不是高级感一下就上去了。' g2 o7 X8 r+ h" i8 F$ O
: M; m- ]* {5 K8 f3 H) F7 u
此外,由于PaperBanana还提供代码出图功能 (即利用Gemini-3-Pro自动生成并执行Python可视化代码出图),所以它还能用来生成需要数值100%精准的各种图表。
, _, ^  M8 n( J) q* i1 U
0 B7 l0 T( X: m2 l
好好好,既能拿捏高级感,又不忘精准度,应该没有学术人不爱吧~9 ?; v+ k5 ?8 x) E
5 x2 r9 R  T1 }7 _. @
论文作者表示,PaperBanana为全自动生成可用于出版的插图铺平了道路。
$ M1 B$ A7 f( q5 \6 k& L% K
我们希望这个框架能成为连接复杂科学概念与高效视觉叙事的桥梁,赋能每一位研究者,用专业级的视觉语言清晰呈现其发现。
  j& i) o/ C: R; N5 Y! m) h
而在看到其效果之后,一众网友也纷纷感叹“学术插图”这个老大难总算是要被攻克了。/ x  O6 |: j; G/ D: G! P0 n
想想以前的日子,真真是要落泪了~
7 g# W; [0 F' ?/ i2 U
研究人员花费4个小时在Figma中绘制一张图,简直令人难以置信。% g- c+ z6 V+ I0 F/ {* w
" n- X/ `5 M) P6 @
那么,学术版PaperBanana是如何炼造的呢?
5 U; T5 C5 d( H, o! [! h9 r; z一个不够,那就5个!: S; k5 A# Z1 ?3 c
( n. v' M$ {1 g! B4 }. S% v' t
用一个模型生图怎么够,现在都是多智能体齐上阵了。
0 V+ p1 V1 z8 v7 L没错,PaperBanana背后就是5个分工明确的智能体在起作用。
, Y/ B+ Q7 t9 D# U9 T9 f/ i
    1 E. e) \( _3 }+ I, I
  • Retriever Agent(检索智能体):从顶会论文库中,找到与你要画的图领域、结构最相似的参考案例。& o" q6 d8 S/ h* n- G  M3 |, x
  • Planner Agent(规划智能体):把论文文字描述,转化为包含所有模块、逻辑的详细绘图说明书。2 R7 C8 N8 J' q
  • Stylist Agent(风格智能体):总结学术审美规范,给说明书加上配色、排版等“美颜”标准。
    " v5 w$ y9 r9 t* U
  • Visualizer Agent(可视化智能体):根据说明书,直接画图或写代码出图,产出初稿。: Z0 @- u& a5 \; s
  • Critic Agent(批判智能体):检查图的对错与美观度,提出修改意见,循环迭代3轮优化。
    + H, c" r; P+ ]+ x3 U
下面这张图清晰展示了它们的工作流程:$ F4 N* ~  j) G
划重点,连这张图也是PaperBanana自己生成的。) @; \0 M' _0 o& W$ E
) j; P$ u0 W- J' O
论文作者表示,这一过程参考了人类制作论文插图的流程。: x& {# b7 Q  J2 b2 g
以制作一个模型架构图为例,通常研究人员会先去看看顶会里类似工作的图是怎么画的,找找灵感和规范。
* ^: U3 E* X7 G$ T- m这一步就对应了检索智能体的工作。
, [8 S/ Q0 ~) u( t& h然后就需要根据参考来规划自己的图该怎么画,“我的方法有几个关键模块?”、“数据流和逻辑顺序是怎样的?”,在想清所有关键问题后,脑子里大概就有一幅架构蓝图了。
( x$ ^- `5 H: _5 P0 Q而到这一步还不是真正动笔的时候,因为还需要结合自己的图以及之前看过的“顶会审美”标准,来给蓝图加点设计感。
4 l9 U' k! o  T2 ?1 U* D' O有了这两样东西(蓝图+审美),现在就可以真正出图了。
+ q" ^9 K& U) _  _: k( Y  V并且出完之后,研究人员往往还需要检查一番,以确保出图正确无误。
4 [9 C; p: R* h  g$ N& P
9 c' i$ K0 r: C$ x2 e
怎么样?是不是一环扣一环、且全都一一对应上了。# U. V; B2 h7 G0 W& H0 V) p  ?6 l
而在了解完PaperBanana的工作方式后,接下来的问题在于:# d0 q# X  m, c
怎么评估PaperBanana的生图效果?! J& U4 L/ X# h4 x" \4 C# j
实验方法及结果
) m& B& Y- `! E  I5 U1 V
8 b" `( H3 J# U( {$ _对此,团队还专门构建了一个PaperBananaBench。该基准内容源自NeurIPS 2025——
( n% T% |: m/ P8 M2 E6 g& ~他们从5275篇论文中随机采样2000篇,经过滤、人工校验后,得到584个有效样本,然后将其均分为292个测试样本和292个参考样本。* `! h1 w8 H8 U5 K9 a$ c
这292个参考样本,每一个都提取了完整的(S, C, I)三元组:
4 z& R/ Y/ ?# d& [5 G' M
    $ x/ h+ `: L# |# U  z, v
  • S(源上下文):描述方法的文本,如论文方法论章节;
    7 J9 {& g9 T, p  m
  • C(传达意图):图的标题/说明,如“我们的框架概述”;+ V% m5 Q7 ]$ l" Q& T2 N
  • I(参考图像):论文中实际使用的、高质量的对应图表。- b$ M) W2 k7 Q- `7 n3 R
参考样本集构成了一个高质量的“学术插图数据库”,主要供检索智能体进行查询和匹配。/ d3 `' g+ G/ Q7 Y  p4 k" _5 |/ u0 R( L
而与之对应的292个测试样本,在评估时则仅提供S、C作为输入。其对应的I作为隐藏的标准答案,不参与生成过程,仅用于最终的质量比对与评分。
* h) J- T; }( E$ L9 i3 l准备到这里,接下来就是具体生成和评估了。
" s6 T. U+ b( [. h# E裁判方面,他们采用了“VLM-as-a-Judge”(大模型当裁判)的评估范式——/ d5 k8 v9 m4 I& V% _. N" f
让强大的视觉语言模型(如Gemini-3-Pro)作为评委,将PaperBanana生成的图与测试集中隐藏的标准答案I进行逐项对比。
6 f8 \6 _* |+ ?- u/ c1 Z对比的维度主要有四个:忠实性、简洁性、可读性、美观性
/ v7 J. S$ k2 K: b" S/ N$ E' t若PaperBanana表现优于标准图得100分,劣于得0分,持平得50分,最终计算总分。0 M0 I, j! s( e3 b4 k3 ^) Z4 t
而实验结果表明,PaperBanana在所有维度上全面超越了传统的单模型直接生成(Vanilla)等基线方法。6 ^5 E$ J+ O- T( H

- V  U& G3 |& U; J7 @2 i. }9 c4 A0 Q+ d
    $ B; w: u+ K" E  O- J; b; H+ q: L
  • 整体性能碾压:总分相对基线提升了17.0%。其中,简洁性提升最为显著,高达37.2%,说明它生成的图逻辑更干净、重点更突出;可读性(+12.9%)和美观性(+6.6%)也有大幅领先。% S6 B- `. M- f( r0 Y' w$ V4 L
  • 获得人类盲测认可:在匿名的人类盲测中,研究员有72.7%的情况认为PaperBanana生成的图比基线模型更好。1 W, l( h9 E2 G3 n; ]& ?+ r
  • 统计图表表现优异:在需要高精度的统计图表任务中,PaperBanana的“代码生成模式”在数值忠实性上与人类水平相当,而简洁性和美观性甚至略胜一筹。, a! m: G3 }9 G! y
1 [* t6 V# E" k7 c0 M. H
这里需要说明,在生成图表方面,PaperBanana有两种模式:
/ E6 E, ?9 d1 }一种是代码生成模式(默认)。让Gemini-3-Pro这类模型自动写Python可视化代码(如Matplotlib),再运行代码出图。优点是可以保证数值绝对准确,适合需要严格精度的场景。! |4 e5 ?% o' W) n" ]
另一种是直接生图模式(可选方式)。跳过代码,让图像生成模型直接根据文本描述生成图表。优点是视觉效果更顶,但数值容易出现幻觉问题。- c7 Q1 v0 w. u3 S$ x
左图直接生图模式下,红框圈选出来的就是一些错误问题,而右侧的代码生图模式明显无误,但美观度略逊。
# A2 z. W1 H0 K; V6 h0 N

3 y. O6 o% ~7 v5 X! l最后的消融实验证明,检索参考、风格优化、批判迭代这三个环节缺一不可,它们共同保证了最终图像的“准确”与“好看”。/ u% w8 ?# o. v6 B/ }7 R
不过也需要提醒,PaperBanana目前仍有一些局限性,比如它作为生图还无法编辑,同时在很多细节忠实度方面仍比不上人类手工作业。6 v& J1 s, w& i' Q
所以,更保险的做法或许是,让它帮你优化以前绘制过的图。. P5 f) W8 s( @! X
在下面这套“手图蜕变”流程下,很多图都能变得更美观、更高级……当然也更容易入顶会的眼(doge)。1 M6 p  z8 c* F% P3 l0 V
! ?2 {  e# H) ?" N/ ^! w
谷歌x北大联手打造
2 i* B( D* S3 a
9 g4 r6 _+ n2 d$ n  I/ v" {1 B最后介绍下PaperBanana背后的团队。
7 X" j( O4 x/ E- u+ W一共7人,可以清晰分成两拨——2 \% U7 x) U" E5 Z( a$ V  q8 ]$ ~
一拨来自北大,主要提供NLP与多模态理解的学术根基;另一拨来自Google Cloud AI Research,负责多模态系统与工业化视角。
6 S3 U' B, T$ _' g2 Y6 G
& |8 o) c) R# e5 N: i* J
署名第一的DawEI Zhu(兼通讯作者),本硕博均就读于北大,现为北大四年级博士生。% p' n) s# l8 |( A
他重点研究长上下文建模和多模态数据,之前在微软亚洲研究院实习过,目前是Google Cloud AI Research学生研究员,PaperBanana也是他在谷歌期间参与的项目。
5 J+ `. W! A  d" k0 J

( K  H3 Z" H, {! `, |借着北大这条线,另外两位来自北大的分别是Xiyu Wei和Sujian Li(兼通讯作者)。
2 I1 D0 t- q8 }' L* o3 |; }Sujian Li目前是北大计算机学院长聘副教授,也是Dawei Zhu的博导,主要研究自然语言处理、信息抽取等。
0 W4 Q( k5 e9 L  l! M: f而Xiyu Wei可能还是学生,目前只能看到TA和Dawei Zhu合作过一篇关于拓展上下文的论文。
7 b1 Y1 e( {$ T7 y# Z2 E# n

0 J$ x- {1 D" C/ b. v; e8 z0 }而其他几位来自Google Cloud AI Research的分别是:
* u. W' x1 v4 E2 Y负责人Tomas Pfister、高级研究科学家Yale Song、研究科学家Rui Meng和Jinsung Yoon(兼通讯作者)。
% D: ~; `  e5 F4 V. }" h截至目前,PaperBanana已在开源社区GitHub揽获上千star,感兴趣可以继续关注。. m! {& T* |  r6 F9 d2 o

1 @) A: ^; C- z! d- l, l项目主页:
2 ]" g. I( j; ]0 j" `https://dwzhu-pku.github.io/PaperBanana/, e2 K- x: h5 {; t) r% b
论文:1 M' W' i2 m' x2 S
https://arxiv.org/abs/2601.23265
. S  Y9 u, t$ @+ x; r, T6 MGitHub地址:- ?0 _+ v+ d3 k2 I2 n$ u  }
https://github.com/dwzhu-pku/PaperBanana
集群智慧云科服专利申请服务

74

主题

2196

回帖

6841

积分

论坛元老

积分
6841
发表于 2026-2-16 17:49:26 | 显示全部楼层
不支持后期编辑是唯一的短板,如果后续可以像 Figma 那样接入手动修改,就几乎完美
集群智慧云科服SCI/SSCI/EI期刊发表服务

74

主题

2196

回帖

6841

积分

论坛元老

积分
6841
发表于 2026-2-16 18:00:47 | 显示全部楼层
说好的100%精准呢,我瞅着那代码生图模式的美观度还是差了点,就像打印店赶工出来的图,细节处总差点意思

74

主题

2196

回帖

6841

积分

论坛元老

积分
6841
发表于 2026-2-16 18:13:21 | 显示全部楼层
学术插图神器来了,AI解放科研狗不是梦!

74

主题

2196

回帖

6841

积分

论坛元老

积分
6841
发表于 2026-2-16 18:25:03 | 显示全部楼层
不支持后期编辑是唯一的短板,如果后续可以像 Figma 那样接入手动修改,就几乎完美

74

主题

2196

回帖

6841

积分

论坛元老

积分
6841
发表于 2026-2-16 18:37:20 | 显示全部楼层
说好的100%精准呢,我瞅着那代码生图模式的美观度还是差了点,就像打印店赶工出来的图,细节处总差点意思
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则


快速回复 返回顶部 返回列表