艾伦人工智能研究所(Ai2)开源了面向科学报告生成的8B模型 AstaBrief,并公布权重、训练数据与示例工作流。AstaBrief在Asta平台的“Fast mode”中可根据检索到的文献片段快速生成带引用的可核查报告,设计上强调引用一致性与证据范围控制,且在部分评测与产品使用中显示出速度与可接受的引用质量。
美国艾伦人工智能研究所(Ai2)宣布开源 AstaBrief,一款专门用于科学文献综合与带引用报告生成的8B模型。该模型已经接入 Ai2 的科学研究平台 Asta,在“Fast mode”中负责根据研究问题和检索到的文献片段生成报告;同时,Ai2还公开了模型权重、训练数据集合以及一个可从本地 PDF 生成报告的示例工作流。
Ai2在Hugging Face 官方文章中说,AstaBrief 的目标并不是成为一个面向所有任务的通用聊天模型,而是处理科学报告生成中的几个具体要求:回答要与证据保持一致,引用要能够支持相关论断,报告还应当保留原始研究结论的适用范围,避免把针对特定样本的发现扩展成对整个人群的普遍判断。
AstaBrief的重点不是“会写报告”,而是写出可核查的报告
Asta本身是 Ai2 面向科研人员构建的智能研究平台,结合论文检索、证据综合和数据分析。用户可以提出带有大量背景、方法限制和研究范围的问题,而不是只输入几个关键词。Ai2此前公开的 Asta Interaction Dataset 研究显示,研究人员使用科学 AI 工具时,往往会提交较长的上下文,并要求系统处理多个概念之间的关系。
这种使用方式决定了科学报告生成与普通问答有所不同。一份报告即使文字流畅、引用数量很多,也可能出现引用与论断不完全匹配、段落偏离问题、或者把描述性结果写成政策和临床建议等问题。AstaBrief的训练和评估,因此没有只看“答案是否像一篇完整文章”,还分别追踪内容覆盖、回答精确度、引用精确度和引用召回率。
Ai2称,AstaBrief从 Qwen3-8B 开始训练,主要工作集中在后训练数据、过滤方法、评测和报告生成系统,而不是从零开始预训练一个新的基础模型。它的报告生成流程也经过重新设计:模型直接根据用户问题和相关文献片段一次性生成完整报告,不再沿用 Claude 驱动的“先总结片段、再聚类、最后按章节写作”的多阶段路径。
这也是它获得速度优势的主要原因之一。按照 Ai2 的测量,在完整的 Asta 流程中,Fast mode 平均每份报告耗时51.1秒,而 Claude 驱动的 Thinking mode 平均耗时178.5秒,前者约快3.5倍。这个数字衡量的是整个产品流程,而不是单独比较两个模型在相同输入下的纯推理速度,因此不能直接理解为 AstaBrief 在所有部署环境中都能达到同样的倍数提升。
从9万条研究查询中筛选训练数据
Ai2表示,AstaBrief的训练数据来自真实科研用户的查询,而不是只依赖合成提示词或传统基准题。团队先从系统日志中筛选出约9万条研究导向的查询,去除过短、非科研、非英语、包含个人信息以及来自机器人和测试流量的内容。
随后,Ai2使用 ScholarQA 背后的多阶段流程生成带引用的完整报告,并从 Claude 3.5 Sonnet、Claude 3.7 Sonnet、o3、o4-mini 和 GPT-4.1 等系统中混合生成目标答案。经过质量过滤后,约4.7万条样本用于监督微调(SFT)。
在直接偏好优化(DPO)阶段,团队为同一问题构造两份报告,让 GPT-4.1 和 DeepSeek-R1 作为评审模型进行比较。只有当两个评审都选择同一份报告时,这组偏好数据才会被保留,最后形成约6000条 DPO 样本。Ai2称,这两个模型评审结果与人工偏好的吻合度为95%,但这仍然是训练数据构造过程中的一致性指标,并不意味着模型输出已经获得了普遍意义上的事实正确保证。
训练过程也显示,科学报告的质量很大程度上取决于数据过滤。Ai2测试了输入输出长度比例、引用论文的检索相关性、引用密度和引用多样性等信号,发现最明显的收益来自剔除引用密度偏低的合成报告。也就是说,一套相对简单的“报告是否持续为论断提供引用”指标,在这项实验中比更复杂的过滤组合更有用。
开源权重让敏感研究可以留在机构内部
Ai2公布的AstaBrief模型页面位于 Hugging Face 的 allenai/AstaBrief_8B,训练过程相关的数据和检查点则收录在 AstaBrief 数据集合中。研究人员还提供了一个基于 ScholarQA 的本地 PDF 报告生成示例。
对大学、企业研发部门和其他科研机构而言,开源权重的意义不仅是降低调用费用。研究问题可能涉及尚未发表的结果、专利布局、内部实验或受限制的研究资料。如果报告生成模型能够部署在机构自己的基础设施中,相关文献和问题就不必全部发送到外部模型 API。
不过,“可以本地运行”并不等同于部署成本很低。AstaBrief拥有80亿参数,实际运行仍取决于量化方案、显存、推理框架和上下文长度;本地部署也不能自动解决检索质量、文献版权、数据访问权限和引用验证等问题。模型只会处理输入系统提供的材料,检索范围和文献解析能力仍是最终报告质量的重要限制。
评测结果应被看作工程验证,而非当前模型排名
Ai2主要使用包含200个计算机科学研究问题的 SQABench-CS2 评估 AstaBrief,并以 DeepScholarBench 的63个长篇研究综合问题以及人工和模型评审作为补充。Ai2称,经过 SFT 和 DPO 后,AstaBrief在回答质量和引用质量上接近 Asta 中由 Claude 驱动的报告流程,在部分引用准确度比较中也表现出竞争力。
在一项规模较小的人工研究中,3名科研人员各自贡献4至5个问题,并从总体偏好、完整性、相关性、组织结构和引用准确度等维度对报告进行排序。Ai2表示,DR Tulu 在总体偏好上占优,但其中两名研究人员在引用准确度维度上更偏好 AstaBrief。
Ai2同时特别提醒,文章中描述的大部分训练和评估工作在2025年完成,比较时使用的专有模型也反映当时的前沿水平,团队没有针对2026年的最新模型重新运行完整评估。因此,这些结果更适合被理解为对特定训练数据、归因过滤和系统设计的工程验证,而不是 AstaBrief 相对于今天所有前沿模型的最终排名。
这一点与 Ai2近期关于评测方法的工作形成呼应。AIFlux此前报道的 BenchMIRT:大型语言模型基准测试到底在测量什么?指出,一个基准的平均分可能混合多种能力信号。对于科学报告模型而言,单一总分同样不足以说明模型是否真正保留了来源证据的范围、强度和限制。
科学报告模型的下一步:从“有引用”走向“不过度推断”
AstaBrief在 Asta 中的早期使用数据提供了一个产品层面的观察窗口。在尝试 Fast mode 的374名用户中,29.1%至少在两个不同日期使用过该模式,平均生成3.67个报告线程;23%的用户之后继续使用 Fast mode,未再切换回 Thinking mode,另有18%根据任务目标在两种模式之间切换。Fast mode获得正面反馈的比例为84.2%,Thinking mode为85.2%。
这些数字来自早期、样本有限的产品使用情况,不能证明用户一定更喜欢更快的模型,也无法单独说明报告质量是否足以支持真实科研决策。但它们说明,科学研究工具可能需要同时提供速度和深度:研究人员可以用较快的模型先形成工作草稿,再在关键问题上使用更高计算量的模式复核。
Ai2下一步计划探索更细粒度的偏好学习、RAG与强化学习结合、多轮和多工具能力、更多科学数据源以及问题分解。团队也希望进一步评估模型是否保持了证据的“范围”,例如是否把特定样本的发现推广为普遍结论,或者把描述性研究结果改写成应该采取的行动建议。
这可能是AstaBrief最重要的实验价值。科学领域对 AI 报告的要求,不只是让模型更快地产出更多文字,而是让研究人员能够回到原始论文,逐条检查报告中的论断,并确认模型没有在引用和结论之间悄悄增加新的含义。开源权重、训练数据和评测流程,至少为这种检查提供了一个可以被研究、复现和改进的对象。
来源:Hugging Face:Open-sourcing AstaBrief;Asta 科研平台;Ai2 ScholarQA;Asta Interaction Dataset。