|
|
新智元报道 % J* A0 B/ B1 ]+ Z
编辑:犀牛% ?& Y! n8 ~% @; Q8 \
【新智元导读】一个30B参数的开源模型,把「假设—证据—验证」的科研闭环跑通了,在多个科学研究榜单上击败了参数量大一个数量级的顶尖闭源模型。5 ?* O2 y+ x" u1 p e
去年底,OpenAI发布了FrontierSCIence基准,试图回答一个让整个AI界焦虑的问题:大模型到底能不能「做科研」?
) \+ f+ L B* m! L) q5 {6 D, g+ S/ c+ s结果令人清醒——GPT-5.2在奥赛级结构化题目上拿下77%,但面对真正开放式的科研任务,成绩骤降至25%。
4 p3 W7 C/ k5 i
6 a% O) P) B6 K; D6 U52个百分点的断崖,撕开了一个被精美demo掩盖已久的真相:今天绝大多数大模型擅长的是「科研表演」——引经据典、逻辑自洽、格式完美,但一旦需要真刀真枪地提出假设、收集证据、反复验证、修正结论,它们就露了馅。) C# }9 S# {/ S
会写论文和会做研究之间,隔着一整条科学方法的鸿沟。
x2 O, r9 v/ }8 J0 r, i9 t3 K6 X就在这条鸿沟面前,一个仅有30B参数的开源模型,做了一件让所有人意外的事——它在FrontierScience-Research上拿到了28.3分,把Claude Opus 4.5(17.5)、Gemini 3 Pro(12.4)甚至GPT-5.2的最高配置(25.2)都甩在了身后。
' R3 q: ~) g& ~9 \0 E( P/ Z# q }# l+ E5 M这个模型叫UniScientist,来自UniPat AI。% W& c( q' z3 c' z- O& d4 b
它参数更少,但更懂「做研究」。! z7 s! O8 p& I0 k3 k* F
此前发布了 BabyVision 多模态评测基准(已被多个近期发布的重磅模型纳入评测体系)的 UniPat AI在最新的 Blog《UniScientist: Advancing Universal Scientific Research Intelligence》中给出了一个清晰而系统的答案。# J9 h; y4 p5 C( s/ C6 D1 A! O
开源的 UniScientist 训练了一个 30B 参数的模型来闭合这一环路。
- W( r( W, |+ d7 h9 h' R) z在 FrontierScience-Research 和 ResearchRubrics 等科学研究榜单上,它匹敌甚至超越了参数量大一个数量级的顶尖闭源模型。% A% H2 @0 F. w0 R
开源地址:3 |3 j0 G3 w* ~! z3 q7 Q3 @* t
https://github.com/UniPat-AI/UniScientist. S% P4 M, G, Z) ~9 g1 [3 ~
Blog: https://unipat.ai/blog/UniScientist
x+ m# J8 K, e! S6 c) Q
3 e( D6 ~8 i8 u
" _5 g5 ?$ x# z4 J
8 @" m- v4 u( r' _; z: ] t* ?01|「会写报告」不等于「会做研究」:实现流程闭环才是能力& b$ t+ X0 h* b' @/ n
今天很多模型做「研究任务」,只是看起来像在做科研:引用一堆资料、写一堆逻辑、格式也像论文。
5 l6 ?0 [. u( T% U9 ]0 X3 k8 x但问题是:它们经常停在「叙事推理」、从「结论」出发的逻辑陷阱中——说得很像、验证很少、推导不稳、可复现性弱。% }; `' D$ V: n2 `& v, I$ d( T
UniPat AI在 UniScientist 中直接回应了这一缺口:仅有30B参数的 UniScientist 具备了「自主科学研究」的能力——在开放问题里不断提出、证伪、修正,直到证据状态稳定,再把全过程沉淀成结构化成果。7 C5 ]" Y2 k; J
这背后的潜台词很直白:
2 {* y; \: Y6 K m+ l真正的科研,不只是把报告写漂亮;更是把「假设-证据-验证」的循环跑通。
# ]: R- v# a/ a* x- ~- |! [3 b/ P
9 H, J. Y8 ]8 j3 J, L5 z: T3 S& e* A3 ^) A" E& |
3 g. y0 U( C5 Q1 b6 f A
02|数据瓶颈:人写得太慢,纯合成不够「真」
( |! f( w, n* z8 G5 b' w" \UniScientist 首先把矛头指向了数据:如何构建高质量科研训练数据一直是硬瓶颈。现有方案几乎只有两种极端:9 F) |0 U, l# m* m
- ~+ p) E* Z% A0 J+ X+ f6 Z) a+ @
- 纯人工:生态真实、判断精准,但昂贵、慢、还受限于单一专家的学科边界;" e+ Z+ R! T4 J9 a+ m! o3 t
- 纯合成:规模巨大、成本低,但常缺少可判别的精度和学科落地的真实性。
* x2 M: M8 l+ o+ P: s UniScientist 的关键洞察源于一个被广泛忽视的不对称性。" B* n6 I. T9 m1 h* m: H
' |& {7 p- ^1 h. b0 ^$ v- 大语言模型更擅长生成:能跨学科大规模地提出候选研究问题和解法草案。! X5 q" ]& H5 n0 N' J
- 人类专家更擅长验证:鉴别研究的真伪和质量,其成本和难度远低于从零创造,且能提供高精度的学科把关。
* B* l( z" z2 s& r+ u) Q1 a 这种不对称性指向了一种更高效的分工方式:模型负责规模与多样性,人类专家负责质量与可验证性。7 h% X3 K* O: z
这正是 UniScientist 数据引擎的核心原则——产出的训练实例既有广泛的专业覆盖面,又有严格的验证保障。
3 X$ n O" G* V. I- ~8 j! c5 F( Q5 j
8 f9 Z5 I) W. |3 t, C' ^! i* x
5 I" c/ d: D- G! H5 n! X# P/ G- r- G& z/ B! a5 ?, V3 }$ N
03|形式化科学研究:证据状态与溯因假设的动态系统
& a& l. |% e5 z/ j许多关于「科研智能」的讨论聚焦在更好的工具调用或更精准的检索上。
' O; ~3 K! g4 |6 ~4 c4 @; S7 ]UniScientist 则在更本质的层面展开工作。
% c9 s0 A8 }# V' q$ q团队将开放式科研过程建模为一个基于两个基本操作的动态系统:主动证据整合(Active Evidence Integration) 与 模型溯因(Model Abduction)。
- R4 w. Y$ _' `2 V4 V系统的核心是一个不断演化的「证据状态」,其中证据被分为两类。7 ~! {0 S1 ^- x+ E
; m3 l' X' A# M# E0 ]- Evidence-Grounded(可独立核验的证据):来自外部权威来源,或内部产出但经过明确检查验证;4 N" E5 K1 F! b( k! X# y; T
- Formally-Derivable(可形式化推导/复现的证据):通过符号推导、数值计算、仿真实验等可复现程序得到。& Z) W2 P5 y0 r( Y
然后系统循环执行三个动作:
, S; q! P5 N' V, [) v产生假说
8 U& B6 Y1 L7 I l! b2 j- i9 H获取外部权威信息证据、计算和推导证据% t' r$ l& v4 |) w9 D
做溯因更新:让假说更好解释当前证据状态
6 M6 x$ s8 [% B% ~6 y直到证据足够完整稳定,再把整个研究过程转化成一份严谨的科学成果。
+ t0 j: V4 B0 f! ^- [* O/ A/ d这一形式化具有重要意义:它把「科研智能」从一个远大理想,变成了可训练、可评估、可迭代的对象。
! Y: g! u$ Y4 I9 h+ J$ S4 a3 X
0 @' z& r% y+ `8 v: q2 k8 k( T
6 U$ H( }2 c+ W7 U
04|把开放的科学研究问题变成「可验证的单元测试」
# I# l/ r" x) P* Y8 H6 EUniScientist 提出了Evolving Polymathic Synthesis(进化式多学科合成),一个承担两项功能的数据引擎。5 M5 G2 l) [& `- X' N
从经过专家验证的科学 Claim 出发,将其扩展为研究级问题——跨越多个相互依赖的子问题,要求实验设计与推导协同7 l6 d {. p+ R2 X5 M. ]
同步合成评测 Rubrics。这些 Rubrics 不评估文风或格式等表面质量,而是评估具体的科学发现是否已被达成
8 g2 p$ X5 H! Q5 A这一设计中最具辨识度的特征是:5 k2 J9 A6 h/ n3 ~! @$ t
一份开放式科研成果被分解为 N 个封闭的、可独立验证的 Rubric 检查项。
$ B1 H+ a3 N) `% {每个 Rubric item 都尽量做到:原子化、客观、可证据落地或可形式化推导,并额外强调:
& V V" k; K0 D! v0 C' u' Q& n/ }( E5 Y5 T. X0 [
- 一致性(对相同科研成果,重复评测应稳定); E5 `% ?, ?0 @ h/ k) a( `2 y
- 区分度(能拉开不同完整度的差异)# W" f2 P9 s* l7 R( s0 e0 T! U+ J. A
- 原子性(单条 rubric 只校验一个知识点)$ E' {% ]. J, v% F
当前数据集仍在持续扩展中,已包含超过 4,700 个研究级实例,每个实例附有 20+ 条 Rubric 项,覆盖 50+ 学科和 400+ 研究方向。
" z# U4 w6 C+ q专家标注平均每条样本投入 1-2 小时。学科覆盖从量子物理和有机化学到社会文化人类学和计算语言学均有涉及。8 w9 V) x$ T3 R7 G* Y
' n2 z8 T4 J; I% t- O数据集中包含了具备真实科研质感的研究问题。下图展示的是一道生态学方向的示例,完整案例库可在 https://unipat.ai/blog/UniScientist 查阅。& I8 u) `! h/ j \/ L* [
这些问题的共同特征在于:没有任何一道可以通过匹配记忆中的既有答案来直接解决。
& p* d2 B% e! ^9 [9 g每一道都要求完整的科研链条——文献调研、假设形成、实验或推导设计、分析验证、以及最终成果的收敛。* Y- v/ O5 ^( o7 F) Q. h
2 n+ m3 C3 p* r) w
6 e" U9 s& d. T4 x" i7 U
8 ?: P( S! \, y+ C) I8 a( |
; U9 a2 J4 w ~# ]05|从单点生成到群体智慧
* \- V+ _$ V. c" w% j' ^6 tUniScientist 引入了一个额外的训练目标,成果聚合目标:
6 k) ^( V" [5 g( K# H3 [给定同一问题的 N 份候选科研成果,模型学会融合各家优点,产出一份更完整、更稳健的最终成果。通过 Rubric 阈值的 rejection sampling 来筛选高质量参考答案,聚合能力与科研生成能力一同被训入模型。
) U0 S5 W# o! b. N- S- ~2 ~这反映了科学研究中的一个现实:对于一个问题,一次尝试并不一定会带来最好的成果。
S2 U: A) g t这实际上是将「集体科研智能」写进了训练过程:
3 u6 B$ L! l/ f9 g6 L" N" e( e模型不仅学会了产出研究,还学会了比较、取舍、整合与自我进化。
* |) C" ]+ N! i2 R7 o9 \% w$ e8 C! W, I* e1 K$ x" J+ J H
- o( W) Z( X# ^+ z
6 }% w: {$ S7 D' y. l+ e! c7 U
06|30B 小模型比肩最大规模闭源系统8 ], g! N4 p$ g5 j
评测结果引人注目,尤其考虑到模型的规模。
0 @1 F2 l; e+ g$ FUniScientist-30B-A3B——一个仅有 3B 激活参数的小模型——在 FrontierScience-Research 上达到 28.3 分,超越 Claude Opus 4.5(17.5)、Gemini 3 Pro(12.4)和 GPT-5.2 xhigh completion mode(25.2)以及工具调用模式下的 DeepSeek V3.2(26.7)和 Seed 2.0 Pro(26.7)。在成果聚合模式下,得分达到 33.3。
0 H8 I3 m# |1 N5 O: D6 t在 FrontierScience-Olympiad 上,启用工具的 UniScientist 得分 71.0,匹配 Claude Opus 4.5,超越多个其他前沿模型。
4 }0 B( f, T: n) y; E0 b在多项分布外的基准——DeepResearch Bench、DeepResearch Bench II 和 ResearchRubrics 上——模型的表现与一系列顶级闭源系统相当。. S2 q1 ]2 J) S0 Q
一个尤为重要的发现:即使在无工具的评测条件下,性能仍有显著提升。3 q+ u* |6 g3 a# `" x4 ^8 ^
这表明增益并非单纯来自更频繁的工具使用,模型自身的研究推理能力确实通过训练得到了增强。
6 W! |# N3 D _" n' }! b所有基准上的结果指向同一结论:模型学会的不只是更好地检索,而是将检索、推导、验证和写作整合为连贯的研究工作流。
* ^' Q1 a8 O* J2 m4 @8 _' R* h
, p* q5 `! t- w* X5 {) X0 k! L5 b1 S L
# d) B! Y9 R8 c, o9 h, I
: p- l" ]3 s: C* I07|下一步:迈向现实世界实验
* O: h3 o4 w# c7 k/ j& E科学研究不止于形成一个合理的叙事。许多结论依赖于可执行、可复现的计算与仿真。2 B" k# D5 y' |& E2 c
UniScientist 集成了代码解释器,将研究流程从叙事式推理升级为「测试-修正」的循环:假设不仅被提出,还被实例化为计算实验——其结果可以确认、推翻或细化假设。" k4 U. \* @2 V
系统目前的能力主要集中在可复现推理与仿真计算范围内。对真实世界研究资源的编排——可靠地调度大规模 GPU 任务、协调湿实验流程——尚未实现。# n; z; `) P# s" e$ t
UniScientist 在 Blog 中也将下一步方向阐述得很清晰:- |& N. [5 p) [
将框架扩展到对真实实验与计算基础设施的受控编排与执行,目标是进一步加速科学发现、推动研究前沿。
( A8 x2 h8 P# x. v+ n以下展示一个UniScientist进行的完整科研推理链条,详细推理内容可以在Blog链接中查阅:https://unipat.ai/blog/UniScientist( I9 B$ @7 K3 B8 } Q
" g ?( D0 \# i& K7 P7 ^7 {
关于 UniPat AI
7 f$ _: N/ y0 H! KUniPat AI 此前发布过多模态评测基准 BabyVision,该基准已被部分近期模型纳入评测体系,并在一些技术报告中被引用。这次发布的 UniScientist,则把关注点转向解决科研任务,提出将全链条科研能力内化到模型的方案,让模型具备了自主推进科学研究的能力。
, C2 Q" P' D, }; W" B9 n参考资料:
. D# Y& O3 P' Q( ?$ |https://unipat.ai/
# e- Z3 k) h. i秒追ASI+ T: w$ f8 H3 m6 L: T
; G% ] ]0 m9 f5 o
- b/ w; ?; A' C3 } |
|