Research · 深度研究
1. 介绍
1.1 背景
深度研究是智能体最早实现大规模产品化的方向之一。自 2024 年底起,「Deep Research」从一个产品功能名称,迅速演变为一类独立的能力形态:给定一个问题,自动完成检索、阅读、交叉验证、综合与成文。
其产品化节奏极快:2024-12 Google 向消费者推出 Gemini Deep Research;2025-02-02 OpenAI 在 ChatGPT 发布 Deep Research,基于经端到端强化学习训练、面向浏览与推理任务的 o3 变体;2025-02-15 Perplexity 向所有用户免费开放;2025-06-26 OpenAI 通过 Responses API 把 Deep Research 变成可代码调用的模型;2025-07-16 LangChain 开源了三阶段管线的参考实现;2026-02-10 OpenAI 为其增加 MCP 与连接器支持,并允许用户限定搜索范围为可信站点。
这一演进路径本身就是 Harness 成熟的缩影:从「一个会搜索的模型」,到「一个可被编排、可被限定来源、可被外部工具接入的研究运行时」。
与此同时,开放科学与可复现性的行业基线也在同步抬升。据 Springer Nature 官方博客引述的十年调查:全球约 80% 的研究者听说过 FAIR 原则,「从未听说」的比例从约 60% 降至 20%;该调查自 2016 年起累计覆盖 212 个国家/地区、43,000 名以上研究者。有受访者的表述是:「开放数据已经从新鲜事变成主流」。这为深度研究的引用可核查要求提供了行业语境。
1.2 定义
深度研究方向的 AI Harness,是指围绕文献检索、证据综合、综述与调研报告自动化,为智能体提供来源治理、检索编排、证据表管理、引用可核查与成本控制的工程承载层。
它的产出物不是「一篇通顺的文章」,而是一份每个结论都能被追溯到可核查来源的证据集合。
边界澄清:
- 深度研究 Harness 不是「自动写报告的机器人」。通顺但不可核查的文本,在本方向视为不合格产出。
- 与数据分析(02-analytics)的关键差别在于 ground truth:数据分析有可执行结果集,深度研究没有。这一差别决定了两者 L5 评估层的形态完全不同。
1.3 在 AI Harness 体系中的定位
图 1-1|深度研究 Harness 六层定位(L1–L6)
数据来源:基于本文分析绘制的示意图。
| 层 | 侧重 | 深度研究方向的具体内容 |
|---|---|---|
| L1 上下文工程层 | ★★★★ | 上下文 = 来源与证据,而非全部检索结果;需做证据压缩、去重与冲突识别 |
| L2 工具与执行层 | ★★★★★ | 搜索与浏览 MCP、文献数据库、PDF 解析、引用管理;来源白名单在工具层强制 |
| L3 编排与控制层 | ★★★★★ | scope / research / write 三阶段管线;orchestrator-worker 多智能体 |
| L4 记忆与状态层 | ★★★ | 研究计划、引用库、中间笔记、失败检索记录 |
| L5 评估与观测层 | ★★ | 本方向最弱:缺乏 ground truth,只能靠引用可核查率、外部基准与人工审查 |
| L6 治理与安全层 | ★★★★ | 来源白名单、引用可核查、版权与许可、成本护栏 |
核心在 L1 与 L3(按任务指派),但真正的瓶颈在 L5。
L1 与 L3 是核心:
- L1:多智能体的本质价值之一是上下文隔离——每个子智能体拥有独立上下文窗口,避免单一窗口被海量检索结果污染。这是研究任务能扩展到数百个来源的前提。
- L3:scope / research / write 三阶段管线已成为事实标准;orchestrator-worker 是经过验证的胜出架构。
L5 是最突出的短板:本方向缺少 ground truth。一份综述没有标准答案,只有「是否可核查、是否覆盖了主要证据、是否存在系统性偏倚」。可行替代包括:引用可核查率、外部基准(如 DRACO、SealQA 类)、以及「每个结论必须有可点击来源」的硬性 DoD。
需要特别指出:这一短板使本方向成为幻觉放大风险最高的方向之一。数据分析方向算错了会有结果集比对拦截;深度研究方向编了一条看似合理的引用,如果没有逐条核查机制,会一路走到最终报告。
1.4 价值与瓶颈
价值:
- 把数小时压缩到数十分钟。通用描述是:深度研究智能体运行 5~30 分钟,产出人类分析师需半天完成的成果;有厂商自己的说法是「在数十分钟内完成人类需要数小时的工作」。
- 检索广度超过人工。数十次搜索、数百个来源、多轮精化,人工难以在同等时间内完成。
- 来源可限定。2026-02-10 起,用户可限定搜索范围为可信站点——这实质上是 Harness 层的来源白名单能力被产品化。
瓶颈:
- 无 ground truth:无法用自动指标判定一份综述「对不对」。
- 幻觉引用:模型生成的引用可能格式完整但指向不存在或不支持该论断的文献。
- 成本与时间:一次深度调研常耗 10~30 美元(按 2026 年中的定价,定价变动频繁);运行时间 5~30 分钟,交互式场景体验受限。
- 证据偏倚:检索排序与来源白名单会系统性影响结论;若不声明,读者无从判断。
2. 名词解释
| 术语 | 英文 / 缩写 | 释义 |
|---|---|---|
| 深度研究 | Deep Research | 由智能体自动完成检索、阅读、交叉验证与成文的一类任务形态 |
| 三阶段管线 | Scope / Research / Write | 先界定研究范围,再执行检索与阅读,最后综合成文的流程划分,已成事实标准 |
| 编排者-工作者架构 | Orchestrator-Worker | 由一个编排智能体分解任务并派发多个子智能体并行执行的架构 |
| 上下文隔离 | Context Isolation | 每个子智能体拥有独立上下文窗口,避免单一窗口被检索结果污染 |
| 终态评估 | End-state Evaluation | 不逐步评判过程,而只对最终产出的质量进行评估的方法 |
| 端到端强化学习 | End-to-End RL | 直接在浏览与推理任务上做端到端强化学习训练的方法 |
| 人类最后的考试 | Humanity's Last Exam, HLE | 覆盖大量学科的高难度问答基准,常用于衡量深度研究能力 |
| BrowseComp | BrowseComp | 考察智能体在真实网页环境中定位难以检索信息的基准 |
| GAIA | GAIA | 通用 AI 助手基准,考察多步推理与工具使用 |
| DRACO | DeepResearch-Bench | 面向深度研究任务的评测基准 |
| SealQA | SealQA | 面向检索与问答可靠性的评测基准 |
| DeepSearchQA | DeepSearchQA | 考察深度搜索能力的问答基准 |
| 来源白名单 | Source Allowlist | 限定检索范围的站点清单,在工具层强制生效 |
| 引用可核查率 | Citation Verifiability | 引用可被独立打开并支持对应论断的比例 |
| 证据表 | Evidence Table | 把每个结论与其来源、原文片段、可信度分列呈现的结构化产出 |
| 检索广度 | Retrieval Breadth | 一次研究所覆盖的独立来源数量与多样性 |
| 令牌放大 | Token Amplification | 多智能体研究相对普通聊天显著放大的 token 消耗 |
| MCP 连接器 | MCP Connector | 通过 MCP 协议接入外部数据源与工具的能力 |
| 系统综述 | Systematic Review | 遵循预设方案、可复现检索策略的文献综述方法 |
| 发表偏倚 | Publication Bias | 阳性结果更容易被发表,导致文献证据系统性倾斜 |
3. 案例
3.1 案例一:Deep Research 的产品化编年
3.1.1 背景
深度研究在两年内完成了从产品功能到能力品类的转变。理解这一编年,有助于判断哪些能力已经 commoditize(可直接使用),哪些仍需 Harness 自建。
| 日期 | 事件 | 关键数据 |
|---|---|---|
| 2024-12 | Google 向消费者推出 Gemini Deep Research(Gemini Advanced) | 首个以该名称命名该模式的主流产品 |
| 2025-02-02 | OpenAI 在 ChatGPT 发布 Deep Research | 基于经端到端强化学习训练的 o3 变体;HLE 26.6%;GAIA 验证集约 67% |
| 2025-02-04 | Hugging Face 发布开源 DeepResearch(24 小时复现,基于 smolagents) | GAIA 55.15%(此前开源 SOTA 为 Magentic-One 的 46%) |
| 2025-02-15 | Perplexity 向所有用户免费推出 Deep Research | 基于微调 DeepSeek-R1,迭代搜索 + 推理循环 |
| 2025-04-24 | OpenAI 新增 o4-mini 轻量版 Deep Research | Plus 25 次/月、Pro 250 次/月、免费 5 次/月 |
| 2025-06-26 | OpenAI 通过 Responses API 发布 o3-deep-research / o4-mini-deep-research | 首次使 Deep Research 成为可代码调用的模型 |
| 2025-07-16 | LangChain 开源 Open Deep Research(LangGraph 实现) | 三阶段 scope / research / write 管线,可插拔模型、搜索工具与 MCP 服务器 |
| 2025-12-11 | Google 发布 Gemini Deep Research 重大升级(Gemini 3 Pro)+ 开发者 API + Workspace 集成 | HLE 46.4% |
| 2026-02-10 | OpenAI 为 ChatGPT 中的 Deep Research 增加 MCP 与连接器支持、实时进度、追问精化 | 用户可限定搜索范围为可信站点 |
| 2026-07-07 | Google 通过 Gemini Interactions API 开放 Deep Research / Deep Research Max 公开预览 | 模型标识 deep-research-preview-04-2026 / deep-research-max-preview-04-2026 |
3.1.2 方案
从 Harness 视角看,这条编年线包含三次关键的架构跃迁:
- 可调用化(2025-06-26):Deep Research 从「产品里的一个按钮」变成「API 里的一个模型」。这一步使得研究能力可以被嵌入自有 Harness,而不是只能在厂商界面里使用。
- 开源参考实现(2025-07-16):三阶段 scope / research / write 管线开源,且模型、搜索工具与 MCP 服务器均可插拔。这为自建 Harness 提供了可直接复用的编排骨架。
- 来源受限与工具接入(2026-02-10):支持 MCP 连接器,并允许限定搜索范围为可信站点。这一步把 L6 治理能力(来源白名单)直接做进了产品。
3.1.3 效果
能力层面的提升是显著的:HLE 从 2025-02 的 26.6% 提升到 2025-12 的 46.4%(多来源提及,可信度较高,但建议核对官方发布);开源方案在 GAIA 上从 46% 提升到 55.15%,把开源与闭源的差距压缩到可追赶区间。
运行特征方面:Perplexity Deep Research 约 2~4 分钟产出一份报告,含数十次搜索、数百个来源、3~5 轮精化;ChatGPT Deep Research 约 5~30 分钟,处理数百页内容。
成本方面(2026 年中定价,变动频繁):OpenAI o3-deep-research API 为每百万输入 token 10 美元、每百万输出 token 40 美元,一次深度调研常耗 10~30 美元;ChatGPT Pro 为 200 美元/月;Google AI Pro 为 19.99 美元/月;Linkup 的 /research 为每次请求 0.25~2.50 美元。
对自建 Harness 的启示是:能力层已高度商品化,差异化的空间在治理与评估层——限定来源、核查引用、控制成本、沉淀证据表,这些是产品不会替你做的事。
3.2 案例二:多智能体架构与上下文隔离
3.2.1 背景
单智能体做深度研究有一个结构性矛盾:研究需要覆盖数百个来源,但单个上下文窗口无法容纳如此多的信息;强行塞入会导致上下文污染,后段推理被前段检索结果带偏。
3.2.2 方案
Anthropic 于 2025-06-13 发布的 Claude Research 工程博客披露了其多智能体研究系统的架构:
- orchestrator-worker 架构:由一个编排智能体分解任务、派发多个子智能体并行检索,再汇总结果。
- 上下文隔离:每个子智能体拥有独立上下文窗口,只处理自己的子问题,避免单一窗口被污染。
- 令牌放大:披露该系统的 token 用量约为普通聊天的 15 倍。
- 评估方法:采用 end-state evaluation(终态评估)——不逐步评判过程,只对最终产出评估。
Anthropic 内部评估称:以 Claude Opus 4 为 lead、Claude Sonnet 4 为 subagent 的多智能体研究系统,在相同任务上比单一 Claude Opus 4 智能体「领先 90.2%」。该表述原文语义含糊(可能是相对提升而非绝对差值),标注 ,建议核对 Anthropic 工程博客原文后引用。
另一条独立证据来自 Google 的基准表现:Gemini Deep Research 在 GPQA Diamond 上达 94.3%(Gemini 3.1 Pro 基座);BrowseComp 在带全工具访问时 Gemini 3.1 Pro 达 85.9%,相对上一代提升 45%。工具访问本身对结果的贡献可能超过模型代际差异——这与 Harness 主张的「工具与上下文决定上限」一致。
3.2.3 效果
本案例给出三条可迁移的 Harness 设计结论:
- 上下文隔离优于上下文压缩。与其费力把数百个来源压缩进一个窗口,不如把它们分给多个独立窗口,只在汇总层做压缩。
- 终态评估更适合研究任务。研究过程难以逐步打分,但最终产出的「是否回答了问题、每条结论是否可核查」是可判定的。
- 15 倍 token 放大是常态,必须纳入成本模型。多智能体研究的成本不能按单次对话估算;Harness 必须在 L6 提供预算护栏。
3.3 案例三:没有 ground truth 时如何评估
3.3.1 背景
深度研究是本组中 ground truth 最薄弱的方向。一份综述没有标准答案:无法用「结果集是否一致」这类可执行判据,也无法定义「正确答案」。
这一困境在商业化产品中直接体现为评测的不透明:据报道,只有 Linkup 发布了可复现准确率基准(SealQA-0 上 61%);Valyu 在 DRACO(DeepResearch-Bench)上以 53.1 领先;而 OpenAI 与 Gemini 均未发布其研究 API 的独立可复现准确率基准。
三家在公开基准上的部分对比(2025-12 时点):
| Benchmark | OpenAI Deep Research(2025-02) | Gemini Deep Research(2025-12) |
|---|---|---|
| HLE | 26.6% | 46.4% |
| BrowseComp | 68.9% | 59.2% |
| DeepResearch Bench | 46.5 pts | 48.9 pts |
| DeepSearchQA | — | 66.1% |
3.3.2 方案
在缺少 ground truth 的前提下,可行的替代评估方案有四层:
| 层次 | 方法 | 可自动化程度 |
|---|---|---|
| 引用可核查 | 每条引用必须可被独立打开,且原文片段确实支持对应论断 | 高:可自动抓取核验 |
| 覆盖率 | 关键子问题是否都被检索覆盖;是否遗漏主要反方观点 | 中:需人工定义子问题清单 |
| 外部基准 | 使用 DRACO、SealQA 类公开基准做横向对比 | 高:但基准本身的代表性有限 |
| 人工 + 评审智能体 | 由评审智能体分级,再由人工复核高影响结论 | 低:成本最高,但不可替代 |
其中引用可核查应作为硬性 DoD:每条结论必须有可点击来源,且来源原文支持该论断。这一条看似朴素,却拦截了本方向最常见的失败——格式完整但指向错误或不支持论断的幻觉引用。
3.3.3 效果
引用可核查率之所以能成为有效的替代指标,是因为它把一个「无法判定的正确性问题」转换成了一个「可判定的溯源问题」:我们无法自动判断一份综述的结论对错,但我们可以自动判断它的每条引用是否真实存在、是否支持对应论断。
这一转换的代价是:它只能保证来源真实,不能保证推论有效。因此本方向要求结论分「已验证 / 部分验证 / 未验证」三档,其中「引用可核查且推论直接来自原文」才算已验证,「引用可核查但需要跨源推论」为部分验证。
需要明确:本案例中涉及的评测数据(SealQA-0 61%、DRACO 53.1)含有厂商自评成分,标注 ,不作为能力对比的独立依据。
4. 实践标准
4.1 AGENTS.md 规范
标准来源声明:以下为本文提出的深度研究方向 AGENTS.md 标准建议稿。截至目前不存在官方或行业公认标准原文,AGENTS.md 属社区约定而非标准。本建议稿继承数据科学组级 AGENTS.md 全部条款。
# AGENTS.md —— 深度研究(Research / Deep Research)
> 继承数据科学组级 AGENTS.md 全部条款。本节为深度研究方向的收紧与扩展。
> 本文件为标准建议稿,业界尚无官方标准版本。
## 角色与边界
- 本 Agent 是**证据的搜集与综合者**,不是观点权威、不是事实来源。
- 可以做:检索、阅读、摘录、交叉验证、生成证据表、按证据成文、标注不确定性。
- 不可以做:生成未经检索的引用、把模型记忆当作事实、在证据不足时给出确定结论、代表组织对外发布观点。
- **引用只能来自检索结果,禁止由模型凭记忆生成。** 这一条没有例外。
## 环境假设
- 存在搜索与浏览工具(可带来源白名单),且返回内容附带可点击 URL。
- 存在文献数据库 / 内部知识库接入(如 MCP 连接器)。
- 存在引用管理结构:可记录 URL、标题、作者、发布时间、访问时间、原文片段。
- 存在成本可见性与预算上限。
- 研究范围(子问题清单)可被显式表达并随进度更新。
## 上下文加载顺序(Context Budget)
1. 研究问题与范围声明(必须)
2. 已确认的子问题清单与优先级(必须)
3. 已收集的证据表(去重后,按相关性排序)
4. 权威来源的原文片段(优先一手来源)
5. 冲突证据与反方观点(**必须显式保留,不得裁剪**)
6. 术语表与领域背景
7. 历史研究计划与既往结论
8. 用户偏好(详略、格式、语言)
- **上下文隔离优先于上下文压缩**:子问题分给独立子智能体处理,只在汇总层压缩。
- 冲突证据不得因「与主结论不符」而被剔除。
## 工具契约
| 工具 | 用途 | 模式 | 约束 |
|---|---|---|---|
| 搜索工具 | 检索公开信息 | 只读 | 支持来源白名单;记录查询词与返回条数 |
| 浏览 / 抓取 | 读取具体页面 | 只读 | 记录 URL 与抓取时间;超长页面分段读取 |
| 文献数据库 | 检索论文与预印本 | 只读 | 记录检索式与命中数 |
| 内部知识库 | 检索组织内部资料 | 只读 | 遵守内部分级与权限 |
| 引用管理 | 写入引用条目 | 受限写 | 每条引用必须含 URL 与原文片段 |
| MCP 连接器 | 接入外部数据源与工具 | 受限 | 仅启用已登记的连接器 |
- 工具调用记录:查询词、返回条数、被采纳条数、耗时、成本。
- **禁止使用来源白名单之外的站点**,除非用户显式授权并留痕。
## 数据源契约
- 每条证据必须记录:URL、标题、作者或机构、发布时间、访问时间、原文片段。
- 优先一手来源(原始论文、官方文件、一手报道);二手转述必须标注为转述。
- 证据必须标注可信度等级:一手 / 权威二手 / 一般二手 / 存疑。
- **缺失的字段必须显式写「未知」,禁止留空或编造**。
- 付费墙或不可访问来源不得被当作已核验来源。
## 任务执行流程(SOP)
1. **Scope(界定范围)**
复述问题;拆解为子问题清单;确定检索策略、来源白名单、预算与时间上限;列出待确认假设。
2. **计划卡点**
范围与预算经人确认后进入检索阶段。
3. **Research(检索与阅读)**
按子问题并行检索;每轮记录查询词与命中;优先抓取一手来源;持续更新证据表。
4. **交叉验证**
对关键结论寻找至少两个独立来源;记录冲突;不因与主结论不符而删除证据。
5. **缺口识别**
识别未覆盖的子问题与证据不足的结论;补充检索或标记为未验证。
6. **Write(综合成文)**
按证据表成文;每条结论附来源编号;区分事实、推论与判断。
7. **引用核验**
逐条打开引用,确认 URL 可达且原文片段支持对应论断;核验失败的引用必须删除或降级。
8. **分级与交付**
结论分「已验证 / 部分验证 / 未验证」三档;输出证据表、不确定性与建议。
9. **归档**
保存研究计划、证据表、引用库与成本记录,使研究可被复现与更新。
## 验证与证据要求
- **每条结论必须有可点击来源**,且来源原文支持该论断。
- **引用可核查率**作为硬性指标:核验失败的引用必须删除或降级,不得保留以充数。
- 关键结论需至少两个独立来源支持;单一来源的须标注。
- 必须主动呈现**反方观点与不利证据**,并设置独立章节。
- 必须区分「原文事实」「跨源推论」「模型判断」三类表述。
- 结论分「已验证 / 部分验证 / 未验证」三档列出,未验证结论只能列为假设。
- 数值、日期、人名、机构名必须与来源一致,禁止「顺手修正」。
## 失败与升级策略
- 同类检索无果重试不超过 2 次;第 3 次改变检索式或升级。
- **引用核验失败**:删除或降级该引用;若因此导致结论失去支撑,把结论降级为未验证。
- **来源不可访问**:标注为不可核验,不得当作已核验来源。
- **证据冲突**:并列呈现冲突双方与可能的解释,不得自行择一。
- **成本超预算**:暂停检索,报告已发生成本与已覆盖范围,申请追加或缩减范围。
- **领域超出能力**:明确说明缺乏领域判断力,建议人工专家复核。
- 升级时携带:研究问题、子问题覆盖情况、证据表、冲突点、成本、建议下一步。
## 安全与合规红线
- 不得生成未经检索的引用、文献、标准编号或链接。
- 不得把模型记忆当作事实来源。
- 不得删除或隐藏与主结论冲突的证据。
- 不得绕过来源白名单。
- 不得在证据不足时给出确定性结论。
- 不得侵犯版权:引用须注明出处,长篇原文摘录须限制篇幅并标注。
- 不得在未标注的情况下把他人观点表述为自己的分析结论。
- 涉及个人信息、未公开信息与受限内部资料的检索,须确认权限后方可进行。
## 禁止事项
- 禁止凭记忆写引用。
- 禁止用「有研究表明」「据统计」等无来源表述。
- 禁止只呈现支持性证据。
- 禁止把推论写成事实。
- 禁止在未核验的情况下保留引用以充数。
- 禁止用检索条数代替证据质量。
- 禁止跨方向复制通用模板;深度研究的引用核验要求与科学计算、HPC 有实质差异。
## 输出格式
- 结论先行 → 证据表 → 反方观点与冲突 → 不确定性 → 建议。
- 证据表列:结论、来源编号、URL、来源类型、可信度等级、原文片段、核验状态。
- 引用使用编号,正文标注如「见来源 [3]」。
- 数值带单位与来源;范围用「~」连接;百分比数值与 % 之间无空格。
- 每个输出必须包含:覆盖范围(检索了什么、没检索什么)、成本记录、核验状态统计。
## 评估与自检
- [ ] 研究范围与子问题清单已确认
- [ ] 每条引用都来自检索,无一由模型生成
- [ ] 引用可核查率已统计,核验失败的已删除或降级
- [ ] 关键结论有至少两个独立来源
- [ ] 反方观点与冲突证据已独立呈现
- [ ] 事实、推论、判断已区分标注
- [ ] 结论已分三档(已验证 / 部分验证 / 未验证)
- [ ] 覆盖范围与未覆盖的子问题已说明
- [ ] 成本在预算内,或已上报
- [ ] 研究计划、证据表与引用库已归档 4.2 SKILL.md 规范
标准来源声明:以下为本文提出的深度研究方向 SKILL.md 标准建议稿,同样不存在官方标准原文。
---
name: deep-research-report
description: 深度研究与调研报告的标准执行流程与验收基线。适用于文献综述、竞品与市场调研、技术选型论证、政策与标准梳理等需要可核查证据的任务。触发场景:任何需要产出带引用的研究结论的任务。
version: 1.0
created: 2026-09-12
---
# 深度研究标准流程
## 适用场景
- 文献综述与系统性梳理。
- 技术选型、竞品与市场调研。
- 政策、标准与法规梳理。
- 需要证据支撑的内部论证材料。
- 不适用场景:纯观点性写作、不依赖外部证据的创意内容、需要原创实验数据回答的问题。
## 前置条件
- 研究问题可拆解为有限的子问题清单。
- 搜索与浏览工具可用,且支持来源白名单。
- 引用管理结构可用(URL、标题、作者、发布时间、访问时间、原文片段)。
- 预算与时间上限已设定。
- 输出语言、详略与格式要求已明确。
## 输入
| 输入项 | 必需 | 说明 |
|---|---|---|
| 研究问题 | 是 | 需回答的核心问题 |
| 范围与边界 | 是 | 时间范围、地域范围、纳入与排除标准 |
| 来源白名单 | 否 | 限定可检索的站点或数据库 |
| 预算与时间上限 | 是 | 成本上限、最长运行时间 |
| 输出格式要求 | 是 | 篇幅、结构、语言 |
| 既有资料 | 否 | 已知的种子文献或内部资料 |
## 输出
| 输出项 | 必需 | 说明 |
|---|---|---|
| 结论摘要 | 是 | 直接回答研究问题,分三档标注验证状态 |
| 证据表 | 是 | 结论 × 来源 × 可信度 × 核验状态 |
| 报告正文 | 是 | 每条结论带来源编号 |
| 反方观点与冲突 | 是 | 独立章节,不得省略 |
| 覆盖范围说明 | 是 | 检索了什么、没检索什么、为何 |
| 引用库 | 是 | 全部引用的完整元数据与访问时间 |
| 成本记录 | 是 | token 或请求数、耗时、费用 |
## 执行步骤
1. **界定范围(Scope)**
复述问题并拆解子问题;定义纳入排除标准;确定来源白名单、预算与时间上限;输出研究计划。
2. **计划卡点确认**
研究计划经人确认后进入检索;未确认不启动大规模检索。
3. **并行检索(Research)**
按子问题分派检索;记录每轮查询词、命中数与采纳数;优先一手来源;持续更新证据表。
4. **阅读与摘录**
抓取并阅读关键来源;摘录支持结论的原文片段,记录 URL 与访问时间;超长来源分段处理。
5. **交叉验证**
对每条关键结论寻找至少两个独立来源;记录一致与冲突;冲突证据保留。
6. **缺口识别与补检**
列出未覆盖子问题与证据不足的结论;补充检索;仍不足的标记为未验证。
7. **综合成文(Write)**
按子问题组织结构;每条结论附来源编号;区分原文事实、跨源推论与模型判断。
8. **逐条引用核验**
逐条打开引用,确认 URL 可达且原文片段支持对应论断;失败的删除或降级;统计引用可核查率。
9. **分级与审阅**
结论分三档;由评审智能体或人工复核高影响结论与全部未验证结论。
10. **交付与归档**
输出报告、证据表、引用库、覆盖范围说明与成本记录;归档研究计划以便后续更新。
## 质量标准(DoD)
引用与证据:
- [ ] 每条引用均来自检索,且 URL 可达
- [ ] 引用可核查率已统计并达到组织设定阈值
- [ ] 每条关键结论有至少两个独立来源,或已标注为单一来源
- [ ] 来源可信度已分级(一手 / 权威二手 / 一般二手 / 存疑)
- [ ] 引用元数据完整,缺失项显式标注「未知」
覆盖与平衡:
- [ ] 子问题清单全部覆盖,未覆盖项已说明原因
- [ ] 反方观点与冲突证据已独立呈现
- [ ] 未出现只呈现支持性证据的选择性偏倚
- [ ] 检索策略与查询词已记录,可复现
表达与分级:
- [ ] 事实、推论、判断已区分标注
- [ ] 结论已分三档:已验证 / 部分验证 / 未验证
- [ ] 未验证结论只列为假设,未混入结论
- [ ] 数值、日期、人名、机构名与来源一致
治理与成本:
- [ ] 未使用来源白名单之外的站点,或已获授权并留痕
- [ ] 成本在预算内,或已上报
- [ ] 研究计划、证据表与引用库已归档
## 常见失败与处理
| 失败现象 | 根因 | 处理方式 |
|---|---|---|
| 引用看起来规范但打不开 | 引用由模型生成 | 删除;重新检索;建立「引用必须来自检索」的硬约束 |
| 引用能打开但不支持该论断 | 只核对了 URL 未核对内容 | 逐条核对原文片段;不支持则删除或改写结论 |
| 报告很通顺但没有新信息 | 检索深度不足或只用头部结果 | 扩展查询词;检索一手来源;检查是否被少数来源主导 |
| 结论一边倒 | 未检索反方观点 | 强制设置反方检索轮次;独立呈现冲突 |
| 成本远超预期 | 未设预算或多智能体放大未计入 | 设置预算护栏;按子问题分批放行;记录 token 放大倍数 |
| 不同来源数字打架 | 口径或时点不同 | 并列呈现并注明口径与时点差异,不自行择一 |
| 检索很久找不到答案 | 问题过窄或术语不当 | 回到 Scope 步骤修正术语;或判定为无公开证据并如实说明 |
| 同一研究两次结论不同 | 检索随机性与来源漂移 | 固定来源快照与访问时间;记录检索式以便复现 |
## 示例
**任务**:梳理「科学数据汇交」相关的中国国家政策与标准,输出一份可内部传阅的合规要点清单。
1. 界定范围:时间范围 2018-01 至 2026-09;地域范围中国大陆;纳入国务院、部委与国家标准化管理机构发布的文件;排除地方规范性文件与研究论文(论文仅作解读参考)。
2. 计划卡点:范围与预算经合规负责人确认。
3. 并行检索:子问题拆为「法律与行政法规」「国务院规范性文件」「国家标准」「部门规章与机构办法」四条线;来源白名单限定为政府门户与标准管理机构站点。
4. 阅读摘录:抓取政策原文页面,摘录关键条款原文片段,记录 URL 与访问时间。
5. 交叉验证:每项条款寻找官方发布页与至少一份官方解读;记录表述差异。
6. 缺口识别:某三项国家标准未检索到标准全文页面,仅获得期刊论文的框架转述 → 标记为「条款原文未获取」。
7. 综合成文:按「法律—行政法规—规范性文件—国家标准—机构办法」组织,每条附来源编号。
8. 引用核验:逐条打开 URL;发现一处转述性来源无法访问 → 删除该引用,相关结论降级为部分验证。
9. 分级审阅:「先汇交、后验收」机制有官方原文支持,列为已验证;某标准的 7 阶段流程仅有论文转述,列为部分验证并注明「条款原文未获取」。
10. 交付归档:输出合规要点清单 + 证据表 + 引用库 + 覆盖范围说明(含未获取条款原文的声明)+ 成本记录。 4.3 落地检查清单
4.3.1 上下文层(L1)
- [ ] 研究范围与子问题清单可被显式表达并随进度更新
- [ ] 采用上下文隔离:子问题分给独立子智能体,只在汇总层压缩
- [ ] 证据表按相关性排序并去重后进入上下文
- [ ] 冲突证据与反方观点不被裁剪,强制保留
- [ ] 术语表与领域背景可检索
4.3.2 工具与执行层(L2)
- [ ] 搜索与浏览工具支持来源白名单,白名单在工具层强制
- [ ] 每次检索记录查询词、命中数与采纳数
- [ ] 引用管理结构支持 URL、发布时间、访问时间与原文片段
- [ ] MCP 连接器仅启用已登记项
- [ ] 长页面支持分段读取
4.3.3 编排与控制层(L3)
- [ ] scope / research / write 三阶段管线已实现
- [ ] orchestrator-worker 架构可用,子智能体可并行
- [ ] 计划卡点在大规模检索前生效
- [ ] 支持缺口识别后的补充检索循环
- [ ] 支持分批放行以控制成本
4.3.4 记忆与状态层(L4)
- [ ] 研究计划可持久化并在中断后恢复
- [ ] 引用库可跨任务复用
- [ ] 失败的检索式被记录,避免重复无效检索
- [ ] 既往结论可被检索并标注时点
4.3.5 评估与观测层(L5)
- [ ] 引用可核查率自动统计,核验失败自动标记
- [ ] 关键结论的独立来源数可统计
- [ ] 冲突证据的呈现比例可检查
- [ ] 定期使用外部基准(DRACO、SealQA 类)做横向对比,结果仅作参考
- [ ] 高影响结论有人工复核通道
- [ ] 明确承认本方向缺 ground truth,不宣称「准确率 N%」
4.3.6 治理与安全层(L6)
- [ ] 来源白名单可配置且不可被智能体绕过
- [ ] 版权与引用规范已内化(篇幅限制、出处标注)
- [ ] 成本护栏已设置(token、请求数、金额上限)
- [ ] 受限内部资料的检索权限已隔离
- [ ] 对外发布前有人类复核卡点
5. 总结
深度研究方向呈现出一个鲜明的两面性:它是能力商品化最彻底的方向,也是 ground truth 最薄弱的方向。
能力商品化最彻底——从 2024-12 到 2026-07,深度研究在两年内完成了从产品按钮到可编程 API、从闭源到开源参考实现、从开放检索到受限来源白名单的完整演进。任何组织今天都可以直接调用这些能力,不必自建检索模型。
ground truth 最薄弱——一份综述没有标准答案。没有结果集可以比对,没有物理定律可以约束,没有实验可以复现。这使本方向成为幻觉放大风险最高的方向:一条编造的引用会带着完整的格式走进最终报告,而如果没有逐条核验机制,没有任何环节会拦截它。
因此本方向的 Harness 主张可以浓缩为三条:
- 引用只能来自检索,不能来自记忆。 这是唯一没有例外的红线。
- 把「无法判定的正确性」转化为「可判定的溯源问题」。 我们无法自动判断结论对错,但能自动判断每条引用是否真实存在、是否支持对应论断。引用可核查率因此成为本方向最有价值的替代指标。
- 冲突证据必须被呈现。 只呈现支持性证据的综述,比没有综述更危险——它有完整的引用格式,却没有科学的诚实。
最后需要重申:本方向不能宣称「准确率 N%」。既因为没有 ground truth,也因为主流厂商未发布其研究 API 的独立可复现准确率基准。任何此类数字都应标注来源并说明其局限性。
信息缺口声明
- 不存在深度研究方向 AGENTS.md / SKILL.md 的官方或行业公认标准原文。4.1 与 4.2 节均为本文提出的标准建议稿。
- Anthropic 多智能体研究系统「领先 90.2%」的表述语义含糊(原文为 "90.2% ahead of a single Claude Opus 4 agent",可能是相对提升而非绝对差值),标注 ,建议核对 Anthropic 工程博客原文后引用。
- HLE 26.6% 与 46.4% 为多来源提及、可信度较高的数字,但建议核对官方发布;BrowseComp 68.9% / 59.2%、DeepResearch Bench 46.5 / 48.9 pts、DeepSearchQA 66.1%、GPQA Diamond 94.3%、BrowseComp 带全工具 85.9%(+45%) 来自同源的二手转述,标注 。
- 定价数据变动频繁,本文引用的价格为 2026 年中的抓取时点:o3-deep-research 每百万输入 10 美元 / 输出 40 美元;ChatGPT Pro 200 美元/月;Google AI Pro 19.99 美元/月;Linkup 每次 0.25~2.50 美元;Perplexity Pro 20 美元/月、Max 200 美元/月。引用时须标注时点。
- SealQA-0 61% 与 DRACO 53.1 含厂商自评成分,标注 ,不作为能力对比的独立依据。
- OpenAI 与 Gemini 均未发布其研究 API 的独立可复现准确率基准——这是本方向评估困境的客观事实,非本文推断。
- FAIR 原则原始论文的卷期与页码未在本次检索中直接验证原文页面,本文只引用 FAIR 原则本身与 Springer Nature 官方博客中的调查数据与引语。
- 运行时间数据(2~4 分钟、5~30 分钟)来自厂商与媒体描述,为区间性描述而非精确测量。
- 4.2 节示例中的政策与标准梳理任务为示意性构造,其中「某三项国家标准条款原文未获取」对应本报告第 11.3 节的实际检索失败项。
6. 参考资料
- Deep Research Agents in Production 2026(产品编年与运行特征)— Reactify Solutions。https://www.reactify-solutions.com/articles/deep-research-agents-production-2026
- Best Deep Research API in 2026: OpenAI, Gemini and Linkup Compared(基准对比与定价)— Linkup。https://www.linkup.so/blog/best-deep-research-api-in-2026-openai-gemini-and-linkup-compared
- AI Search Deep Research Comparison(运行时间与定价)— Fello AI。https://felloai.com/ai-search-deep-research-comparison/
- Gemini Deep Research Agent vs OpenAI Deep Research(HLE、BrowseComp、DeepResearch Bench 数据)— Agent Market Cap。https://agentmarketcap.ai/blog/2026/04/05/gemini-deep-research-agent-vs-openai-deep-research-autonomous-research-product-category
- Gemini Deep Research Agent Preview(GPQA Diamond、BrowseComp 带全工具数据)— Agent Market Cap。https://agentmarketcap.ai/blog/2026/04/05/gemini-deep-research-agent-preview-google-vs-openai-autonomous-research
- Open Data: Progress, Challenges and Institutions(FAIR 十年调查数据与受访者引语)— Springer Nature。https://springernature.com/gp/librarians/the-link/open-science-blogpost/open-data-progress-challenges-institutions/52378334
- ACM Artifact Evaluation 术语定义 — arXiv 1908.05986。https://arxiv.org/pdf/1908.05986.pdf
- 《科学数据管理办法》(国办发〔2018〕17 号)— 国务院办公厅。https://www.gov.cn/zhengce/content/2018-04/02/content_5279272.htm
- MCP 科学研究实验室工具生态(文献与写作类 MCP Server)— 技术指南。https://chatforest.com/guides/mcp-scientific-research-laboratory/
- MCP for Data Scientists: Notebooks(Jupyter / Colab MCP)— MCPFind。https://mcpfind.org/blog/mcp-for-data-scientists-notebooks
- Agents for R&D Science(自主科学发现系统清单)— Orchestra Bio。https://orchestra.bio/blog/agents-for-r-d-science
- 中国科学院科学数据管理规范链条说明 — 国家基础学科公共科学数据中心。https://cms.casdc.cn/article/312
Research · Deep Research
1. Introduction
1.1 Background
Deep research is one of the first directions in which agents achieved productization at scale. Since late 2024, "Deep Research" has rapidly evolved from a product feature name into an independent capability category: given a question, automatically complete retrieval, reading, cross-validation, synthesis, and writing.
Its productization pace has been extremely fast: 2024-12 Google launched Gemini Deep Research for consumers; 2025-02-02 OpenAI released Deep Research in ChatGPT, based on a variant of o3 trained with end-to-end reinforcement learning for browsing and reasoning tasks; 2025-02-15 Perplexity opened it free to all users; 2025-06-26 OpenAI turned Deep Research into a code-callable model via the Responses API; 2025-07-16 LangChain open-sourced a reference implementation of the three-stage pipeline; 2026-02-10 OpenAI added MCP and connector support and allowed users to restrict the search scope to trusted sites.
This evolutionary path itself is a microcosm of Harness's maturation: from "a model that can search" to "a research runtime that can be orchestrated, source-restricted, and integrated with external tools".
At the same time, the industry baseline for open science and reproducibility is also rising in parallel. According to a ten-year survey cited by Springer Nature's official blog: about 80% of researchers worldwide have heard of the FAIR principles, and the proportion who have "never heard" of them fell from about 60% to 20%; the survey has cumulatively covered 212 countries/regions and more than 43,000 researchers since 2016. One respondent put it this way: "Open data has gone from novelty to mainstream." This provides the industry context for deep research's citation verifiability requirement.
1.2 Definition
An AI Harness for deep research refers to the engineering carrier layer that, around literature retrieval, evidence synthesis, reviews, and the automation of research reports, provides agents with source governance, retrieval orchestration, evidence-table management, citation verifiability, and cost control.
Its deliverable is not "a fluent article" but an evidence set in which every conclusion can be traced back to a verifiable source.
Boundary clarification:
- A deep research Harness is not an "automatic report-writing robot". Fluent but unverifiable text is considered a failed deliverable in this direction.
- The key difference from data analytics (02-analytics) lies in ground truth: data analytics has an executable result set, deep research does not. This difference determines that the forms of their L5 evaluation layers are entirely different.
1.3 Position in the AI Harness System
图 1-1|深度研究 Harness 六层定位(L1–L6)
数据来源:基于本文分析绘制的示意图。
| Layer | Emphasis | Specific content for the deep research direction |
|---|---|---|
| L1 Context Engineering Layer | ★★★★ | Context = sources and evidence, not all retrieval results; requires evidence compression, deduplication, and conflict identification |
| L2 Tool & Execution Layer | ★★★★★ | Search and browse MCP, literature databases, PDF parsing, citation management; source allowlist enforced at the tool layer |
| L3 Orchestration & Control Layer | ★★★★★ | scope / research / write three-stage pipeline; orchestrator-worker multi-agent |
| L4 Memory & State Layer | ★★★ | Research plan, citation library, intermediate notes, failed-retrieval records |
| L5 Evaluation & Observation Layer | ★★ | Weakest in this direction: lacks ground truth, so it can rely only on citation verifiability rate, external benchmarks, and human review |
| L6 Governance & Security Layer | ★★★★ | Source allowlist, citation verifiability, copyright and licensing, cost guardrails |
The core lies in L1 and L3 (assigned per task), but the real bottleneck is L5.
L1 and L3 are the core:
- L1: one of the essential values of multi-agent systems is context isolation — each sub-agent has an independent context window, preventing a single window from being polluted by a flood of retrieval results. This is the prerequisite for research tasks scaling to hundreds of sources.
- L3: the scope / research / write three-stage pipeline has become a de facto standard; orchestrator-worker is the proven winning architecture.
L5 is the most prominent shortcoming: this direction lacks ground truth. A review has no standard answer, only "whether it is verifiable, whether it covers the main evidence, and whether there is systematic bias". Feasible alternatives include: citation verifiability rate, external benchmarks (e.g., DRACO, SealQA-like), and a hard DoD that "every conclusion must have a clickable source".
It is worth calling out: this shortcoming makes this direction one of the highest hallucination-amplification risk directions. If the data analytics direction computes something wrong, there is a result-set comparison to catch it; in the deep research direction, a fabricated-looking citation, without a line-by-line verification mechanism, can travel all the way into the final report.
1.4 Value and Bottlenecks
Value:
- Compresses hours into tens of minutes. A common description: a deep research agent runs for 5–30 minutes and produces results that a human analyst would need half a day to complete; one vendor puts it as "completing in tens of minutes what would take humans hours".
- Retrieval breadth surpasses humans. Dozens of searches, hundreds of sources, and multiple rounds of refinement are hard for a human to complete in the same time.
- Sources can be restricted. Since 2026-02-10, users can restrict the search scope to trusted sites — this is essentially the Harness-layer source-allowlist capability being productized.
Bottlenecks:
- No ground truth: no automated metric can judge whether a review is "right".
- Hallucinated citations: model-generated citations may be complete in format but point to literature that does not exist or does not support the claim.
- Cost and time: a single deep research session often costs $10–30 (based on mid-2026 pricing, which changes frequently); runtimes of 5–30 minutes limit the interactive experience.
- Evidence bias: retrieval ranking and the source allowlist systematically affect conclusions; without disclosure, readers have no way to judge.
2. Glossary
| Term | English / Abbreviation | Definition |
|---|---|---|
| Deep Research | Deep Research | A class of task form in which an agent automatically completes retrieval, reading, cross-validation, and writing |
| Three-stage pipeline | Scope / Research / Write | A process division that first defines the research scope, then executes retrieval and reading, and finally synthesizes and writes; has become a de facto standard |
| Orchestrator-Worker architecture | Orchestrator-Worker | An architecture in which one orchestrating agent decomposes a task and dispatches multiple sub-agents to run in parallel |
| Context isolation | Context Isolation | Each sub-agent has an independent context window, preventing a single window from being polluted by retrieval results |
| End-state evaluation | End-state Evaluation | A method that does not judge the process step by step but only evaluates the quality of the final deliverable |
| End-to-end reinforcement learning | End-to-End RL | A method of training directly with end-to-end reinforcement learning on browsing and reasoning tasks |
| Humanity's Last Exam | Humanity's Last Exam, HLE | A high-difficulty Q&A benchmark covering many disciplines, often used to measure deep research capability |
| BrowseComp | BrowseComp | A benchmark that tests an agent's ability to locate hard-to-retrieve information in a real web environment |
| GAIA | GAIA | A general AI assistant benchmark that tests multi-step reasoning and tool use |
| DRACO | DeepResearch-Bench | An evaluation benchmark for deep research tasks |
| SealQA | SealQA | An evaluation benchmark for retrieval and Q&A reliability |
| DeepSearchQA | DeepSearchQA | A Q&A benchmark that tests deep search capability |
| Source allowlist | Source Allowlist | The list of sites that restrict the retrieval scope, enforced at the tool layer |
| Citation verifiability | Citation Verifiability | The proportion of citations that can be independently opened and support the corresponding claim |
| Evidence table | Evidence Table | A structured deliverable that lists each conclusion together with its source, original excerpt, and confidence level |
| Retrieval breadth | Retrieval Breadth | The number and diversity of independent sources covered by a single research session |
| Token amplification | Token Amplification | The significantly amplified token consumption of multi-agent research relative to ordinary chat |
| MCP connector | MCP Connector | The capability to connect external data sources and tools via the MCP protocol |
| Systematic review | Systematic Review | A literature review method that follows a preset protocol and a reproducible retrieval strategy |
| Publication bias | Publication Bias | Positive results are more likely to be published, causing a systematic skew in the literature evidence |
3. Case Studies
3.1 Case 1: The Productization Chronicle of Deep Research
3.1.1 Background
Deep research completed its transformation from a product feature to a capability category within two years. Understanding this chronicle helps judge which capabilities have already been commoditized (usable directly) and which still need to be built by Harness itself.
| Date | Event | Key data |
|---|---|---|
| 2024-12 | Google launched Gemini Deep Research for consumers (Gemini Advanced) | The first mainstream product to name the mode with this name |
| 2025-02-02 | OpenAI released Deep Research in ChatGPT | Based on an o3 variant trained with end-to-end RL; HLE 26.6%; ~67% on the GAIA validation set |
| 2025-02-04 | Hugging Face released open-source DeepResearch (24-hour reproduction, based on smolagents) | GAIA 55.15% (previous open-source SOTA was Magentic-One's 46%) |
| 2025-02-15 | Perplexity launched Deep Research free for all users | Based on fine-tuned DeepSeek-R1; an iterative search + reasoning loop |
| 2025-04-24 | OpenAI added the o4-mini lightweight Deep Research | 25/month for Plus, 250/month for Pro, 5/month free |
| 2025-06-26 | OpenAI released o3-deep-research / o4-mini-deep-research via the Responses API | First made Deep Research a code-callable model |
| 2025-07-16 | LangChain open-sourced Open Deep Research (LangGraph implementation) | A three-stage scope / research / write pipeline with pluggable models, search tools, and MCP servers |
| 2025-12-11 | Google released a major upgrade to Gemini Deep Research (Gemini 3 Pro) + developer API + Workspace integration | HLE 46.4% |
| 2026-02-10 | OpenAI added MCP and connector support, real-time progress, and follow-up refinement to Deep Research in ChatGPT | Users can restrict the search scope to trusted sites |
| 2026-07-07 | Google opened public previews of Deep Research / Deep Research Max via the Gemini Interactions API | Model identifiers deep-research-preview-04-2026 / deep-research-max-preview-04-2026 |
3.1.2 Approach
From a Harness perspective, this chronicle contains three key architectural leaps:
- Callability (2025-06-26): Deep Research went from "a button in a product" to "a model in an API". This step made it possible to embed research capability into one's own Harness rather than use it only within a vendor's interface.
- Open-source reference implementation (2025-07-16): the three-stage scope / research / write pipeline was open-sourced, and the model, search tools, and MCP servers are all pluggable. This gave self-built Harnesses a directly reusable orchestration skeleton.
- Source restriction and tool integration (2026-02-10): supports MCP connectors and allows restricting the search scope to trusted sites. This step built L6 governance capability (source allowlist) directly into the product.
3.1.3 Results
The capability-level improvement is significant: HLE rose from 26.6% in 2025-02 to 46.4% in 2025-12 (mentioned by multiple sources, fairly high confidence, but it is advisable to verify against official releases); on GAIA, open-source solutions rose from 46% to 55.15%, compressing the gap between open and closed source into a catchable range.
As for runtime characteristics: Perplexity Deep Research produces a report in about 2–4 minutes, involving dozens of searches, hundreds of sources, and 3–5 refinement rounds; ChatGPT Deep Research takes about 5–30 minutes and processes hundreds of pages.
As for cost (mid-2026 pricing, which changes frequently): the OpenAI o3-deep-research API is $10 per million input tokens and $40 per million output tokens, and a single deep research session often costs $10–30; ChatGPT Pro is $200/month; Google AI Pro is $19.99/month; Linkup's /research is $0.25–2.50 per request.
The lesson for self-built Harnesses is: the capability layer is already highly commoditized, and the room for differentiation lies in the governance and evaluation layers — restricting sources, verifying citations, controlling cost, and curating evidence tables are things the product will not do for you.
3.2 Case 2: Multi-Agent Architecture and Context Isolation
3.2.1 Background
A single agent doing deep research faces a structural contradiction: research needs to cover hundreds of sources, but a single context window cannot hold that much information; force-filling it causes context pollution, and later-stage reasoning gets skewed by earlier retrieval results.
3.2.2 Approach
Anthropic's Claude Research engineering blog, published 2025-06-13, disclosed the architecture of its multi-agent research system:
- orchestrator-worker architecture: one orchestrating agent decomposes the task, dispatches multiple sub-agents to retrieve in parallel, and then aggregates the results.
- Context isolation: each sub-agent has an independent context window and handles only its own sub-question, preventing a single window from being polluted.
- Token amplification: the system's disclosed token usage is roughly 15× that of ordinary chat.
- Evaluation method: it adopts end-state evaluation — it does not judge the process step by step but only evaluates the final deliverable.
Anthropic's internal evaluation states: a multi-agent research system with Claude Opus 4 as lead and Claude Sonnet 4 as subagents was "90.2% ahead" of a single Claude Opus 4 agent on the same task. The original phrasing is semantically ambiguous (likely a relative improvement rather than an absolute difference), marked [To be verified], and should be cited only after checking the original Anthropic engineering blog.
Another independent piece of evidence comes from Google's benchmark performance: Gemini Deep Research reached 94.3% on GPQA Diamond (Gemini 3.1 Pro base); on BrowseComp with full tool access, Gemini 3.1 Pro reached 85.9%, a 45% improvement over the previous generation. Tool access itself may contribute more to results than model generational differences — consistent with Harness's claim that "tools and context determine the ceiling".
3.2.3 Results
This case yields three transferable Harness design conclusions:
- Context isolation is better than context compression. Rather than laboriously compressing hundreds of sources into a single window, distribute them across multiple independent windows and compress only at the aggregation layer.
- End-state evaluation suits research tasks better. The research process is hard to score step by step, but whether the final deliverable "answers the question and whether every conclusion is verifiable" is decidable.
- A 15× token amplification is the norm and must be included in the cost model. The cost of multi-agent research cannot be estimated as a single conversation; Harness must provide budget guardrails at L6.
3.3 Case 3: How to Evaluate When There Is No Ground Truth
3.3.1 Background
Deep research is the direction with the weakest ground truth in this group. A review has no standard answer: neither an executable criterion like "whether the result sets match" nor a "correct answer" can be defined.
This predicament shows up directly in commercial products as evaluation opacity: reportedly, only Linkup has published a reproducible accuracy benchmark (61% on SealQA-0); Valyu leads on DRACO (DeepResearch-Bench) with 53.1; and OpenAI and Gemini have both refrained from publishing independent reproducible accuracy benchmarks for their research APIs.
Partial comparison of the three vendors on public benchmarks (as of 2025-12):
| Benchmark | OpenAI Deep Research (2025-02) | Gemini Deep Research (2025-12) |
|---|---|---|
| HLE | 26.6% | 46.4% |
| BrowseComp | 68.9% | 59.2% |
| DeepResearch Bench | 46.5 pts | 48.9 pts |
| DeepSearchQA | — | 66.1% |
3.3.2 Approach
In the absence of ground truth, the feasible alternative evaluation approaches have four tiers:
| Tier | Method | Degree of automation |
|---|---|---|
| Citation verifiability | Every citation must be independently openable, and the original excerpt must actually support the corresponding claim | High: can be automatically fetched and verified |
| Coverage | Whether all key sub-questions are covered by retrieval; whether major opposing viewpoints are missed | Medium: requires a human-defined list of sub-questions |
| External benchmarks | Using public benchmarks like DRACO and SealQA for horizontal comparison | High: but the representativeness of the benchmarks themselves is limited |
| Human + review agent | A review agent grades, then humans re-verify high-impact conclusions | Low: highest cost, but irreplaceable |
Among these, citation verifiability should be a hard DoD: every conclusion must have a clickable source, and the source's original text must support the claim. This rule looks simple, yet it intercepts this direction's most common failure — hallucinated citations that are complete in format but point to the wrong thing or do not support the claim.
3.3.3 Results
Citation verifiability rate can become an effective substitute metric because it converts an "undecidable correctness question" into a "decidable provenance question": we cannot automatically judge whether a review's conclusions are right, but we can automatically judge whether each of its citations actually exists and supports the corresponding claim.
The cost of this conversion is that it can only guarantee that sources are real, not that inferences are valid. Hence this direction requires conclusions to be graded into three tiers — "Verified / Partially verified / Not verified" — where only "citation verifiable and inference directly derived from the original text" counts as Verified, and "citation verifiable but requiring cross-source inference" counts as Partially verified.
It should be clarified: the evaluation data involved in this case (SealQA-0 61%, DRACO 53.1) contains vendor self-reported components, is marked [To be verified], and is not an independent basis for capability comparison.
4. Practice Standards
4.1 AGENTS.md Specification
Standard source statement: the following is the proposed standard draft of the deep research direction's AGENTS.md of this article. To date, there is no official or industry-recognized standard original text; AGENTS.md is a community convention rather than a standard. This draft inherits all clauses of the data science group-level AGENTS.md.
# AGENTS.md —— 深度研究(Research / Deep Research)
> 继承数据科学组级 AGENTS.md 全部条款。本节为深度研究方向的收紧与扩展。
> 本文件为标准建议稿,业界尚无官方标准版本。
## 角色与边界
- 本 Agent 是**证据的搜集与综合者**,不是观点权威、不是事实来源。
- 可以做:检索、阅读、摘录、交叉验证、生成证据表、按证据成文、标注不确定性。
- 不可以做:生成未经检索的引用、把模型记忆当作事实、在证据不足时给出确定结论、代表组织对外发布观点。
- **引用只能来自检索结果,禁止由模型凭记忆生成。** 这一条没有例外。
## 环境假设
- 存在搜索与浏览工具(可带来源白名单),且返回内容附带可点击 URL。
- 存在文献数据库 / 内部知识库接入(如 MCP 连接器)。
- 存在引用管理结构:可记录 URL、标题、作者、发布时间、访问时间、原文片段。
- 存在成本可见性与预算上限。
- 研究范围(子问题清单)可被显式表达并随进度更新。
## 上下文加载顺序(Context Budget)
1. 研究问题与范围声明(必须)
2. 已确认的子问题清单与优先级(必须)
3. 已收集的证据表(去重后,按相关性排序)
4. 权威来源的原文片段(优先一手来源)
5. 冲突证据与反方观点(**必须显式保留,不得裁剪**)
6. 术语表与领域背景
7. 历史研究计划与既往结论
8. 用户偏好(详略、格式、语言)
- **上下文隔离优先于上下文压缩**:子问题分给独立子智能体处理,只在汇总层压缩。
- 冲突证据不得因「与主结论不符」而被剔除。
## 工具契约
| 工具 | 用途 | 模式 | 约束 |
|---|---|---|---|
| 搜索工具 | 检索公开信息 | 只读 | 支持来源白名单;记录查询词与返回条数 |
| 浏览 / 抓取 | 读取具体页面 | 只读 | 记录 URL 与抓取时间;超长页面分段读取 |
| 文献数据库 | 检索论文与预印本 | 只读 | 记录检索式与命中数 |
| 内部知识库 | 检索组织内部资料 | 只读 | 遵守内部分级与权限 |
| 引用管理 | 写入引用条目 | 受限写 | 每条引用必须含 URL 与原文片段 |
| MCP 连接器 | 接入外部数据源与工具 | 受限 | 仅启用已登记的连接器 |
- 工具调用记录:查询词、返回条数、被采纳条数、耗时、成本。
- **禁止使用来源白名单之外的站点**,除非用户显式授权并留痕。
## 数据源契约
- 每条证据必须记录:URL、标题、作者或机构、发布时间、访问时间、原文片段。
- 优先一手来源(原始论文、官方文件、一手报道);二手转述必须标注为转述。
- 证据必须标注可信度等级:一手 / 权威二手 / 一般二手 / 存疑。
- **缺失的字段必须显式写「未知」,禁止留空或编造**。
- 付费墙或不可访问来源不得被当作已核验来源。
## 任务执行流程(SOP)
1. **Scope(界定范围)**
复述问题;拆解为子问题清单;确定检索策略、来源白名单、预算与时间上限;列出待确认假设。
2. **计划卡点**
范围与预算经人确认后进入检索阶段。
3. **Research(检索与阅读)**
按子问题并行检索;每轮记录查询词与命中;优先抓取一手来源;持续更新证据表。
4. **交叉验证**
对关键结论寻找至少两个独立来源;记录冲突;不因与主结论不符而删除证据。
5. **缺口识别**
识别未覆盖的子问题与证据不足的结论;补充检索或标记为未验证。
6. **Write(综合成文)**
按证据表成文;每条结论附来源编号;区分事实、推论与判断。
7. **引用核验**
逐条打开引用,确认 URL 可达且原文片段支持对应论断;核验失败的引用必须删除或降级。
8. **分级与交付**
结论分「已验证 / 部分验证 / 未验证」三档;输出证据表、不确定性与建议。
9. **归档**
保存研究计划、证据表、引用库与成本记录,使研究可被复现与更新。
## 验证与证据要求
- **每条结论必须有可点击来源**,且来源原文支持该论断。
- **引用可核查率**作为硬性指标:核验失败的引用必须删除或降级,不得保留以充数。
- 关键结论需至少两个独立来源支持;单一来源的须标注。
- 必须主动呈现**反方观点与不利证据**,并设置独立章节。
- 必须区分「原文事实」「跨源推论」「模型判断」三类表述。
- 结论分「已验证 / 部分验证 / 未验证」三档列出,未验证结论只能列为假设。
- 数值、日期、人名、机构名必须与来源一致,禁止「顺手修正」。
## 失败与升级策略
- 同类检索无果重试不超过 2 次;第 3 次改变检索式或升级。
- **引用核验失败**:删除或降级该引用;若因此导致结论失去支撑,把结论降级为未验证。
- **来源不可访问**:标注为不可核验,不得当作已核验来源。
- **证据冲突**:并列呈现冲突双方与可能的解释,不得自行择一。
- **成本超预算**:暂停检索,报告已发生成本与已覆盖范围,申请追加或缩减范围。
- **领域超出能力**:明确说明缺乏领域判断力,建议人工专家复核。
- 升级时携带:研究问题、子问题覆盖情况、证据表、冲突点、成本、建议下一步。
## 安全与合规红线
- 不得生成未经检索的引用、文献、标准编号或链接。
- 不得把模型记忆当作事实来源。
- 不得删除或隐藏与主结论冲突的证据。
- 不得绕过来源白名单。
- 不得在证据不足时给出确定性结论。
- 不得侵犯版权:引用须注明出处,长篇原文摘录须限制篇幅并标注。
- 不得在未标注的情况下把他人观点表述为自己的分析结论。
- 涉及个人信息、未公开信息与受限内部资料的检索,须确认权限后方可进行。
## 禁止事项
- 禁止凭记忆写引用。
- 禁止用「有研究表明」「据统计」等无来源表述。
- 禁止只呈现支持性证据。
- 禁止把推论写成事实。
- 禁止在未核验的情况下保留引用以充数。
- 禁止用检索条数代替证据质量。
- 禁止跨方向复制通用模板;深度研究的引用核验要求与科学计算、HPC 有实质差异。
## 输出格式
- 结论先行 → 证据表 → 反方观点与冲突 → 不确定性 → 建议。
- 证据表列:结论、来源编号、URL、来源类型、可信度等级、原文片段、核验状态。
- 引用使用编号,正文标注如「见来源 [3]」。
- 数值带单位与来源;范围用「~」连接;百分比数值与 % 之间无空格。
- 每个输出必须包含:覆盖范围(检索了什么、没检索什么)、成本记录、核验状态统计。
## 评估与自检
- [ ] 研究范围与子问题清单已确认
- [ ] 每条引用都来自检索,无一由模型生成
- [ ] 引用可核查率已统计,核验失败的已删除或降级
- [ ] 关键结论有至少两个独立来源
- [ ] 反方观点与冲突证据已独立呈现
- [ ] 事实、推论、判断已区分标注
- [ ] 结论已分三档(已验证 / 部分验证 / 未验证)
- [ ] 覆盖范围与未覆盖的子问题已说明
- [ ] 成本在预算内,或已上报
- [ ] 研究计划、证据表与引用库已归档 4.2 SKILL.md Specification
Standard source statement: the following is the proposed standard draft of the deep research direction's SKILL.md of this article, for which likewise no official standard original text exists.
---
name: deep-research-report
description: 深度研究与调研报告的标准执行流程与验收基线。适用于文献综述、竞品与市场调研、技术选型论证、政策与标准梳理等需要可核查证据的任务。触发场景:任何需要产出带引用的研究结论的任务。
version: 1.0
created: 2026-09-12
---
# 深度研究标准流程
## 适用场景
- 文献综述与系统性梳理。
- 技术选型、竞品与市场调研。
- 政策、标准与法规梳理。
- 需要证据支撑的内部论证材料。
- 不适用场景:纯观点性写作、不依赖外部证据的创意内容、需要原创实验数据回答的问题。
## 前置条件
- 研究问题可拆解为有限的子问题清单。
- 搜索与浏览工具可用,且支持来源白名单。
- 引用管理结构可用(URL、标题、作者、发布时间、访问时间、原文片段)。
- 预算与时间上限已设定。
- 输出语言、详略与格式要求已明确。
## 输入
| 输入项 | 必需 | 说明 |
|---|---|---|
| 研究问题 | 是 | 需回答的核心问题 |
| 范围与边界 | 是 | 时间范围、地域范围、纳入与排除标准 |
| 来源白名单 | 否 | 限定可检索的站点或数据库 |
| 预算与时间上限 | 是 | 成本上限、最长运行时间 |
| 输出格式要求 | 是 | 篇幅、结构、语言 |
| 既有资料 | 否 | 已知的种子文献或内部资料 |
## 输出
| 输出项 | 必需 | 说明 |
|---|---|---|
| 结论摘要 | 是 | 直接回答研究问题,分三档标注验证状态 |
| 证据表 | 是 | 结论 × 来源 × 可信度 × 核验状态 |
| 报告正文 | 是 | 每条结论带来源编号 |
| 反方观点与冲突 | 是 | 独立章节,不得省略 |
| 覆盖范围说明 | 是 | 检索了什么、没检索什么、为何 |
| 引用库 | 是 | 全部引用的完整元数据与访问时间 |
| 成本记录 | 是 | token 或请求数、耗时、费用 |
## 执行步骤
1. **界定范围(Scope)**
复述问题并拆解子问题;定义纳入排除标准;确定来源白名单、预算与时间上限;输出研究计划。
2. **计划卡点确认**
研究计划经人确认后进入检索;未确认不启动大规模检索。
3. **并行检索(Research)**
按子问题分派检索;记录每轮查询词、命中数与采纳数;优先一手来源;持续更新证据表。
4. **阅读与摘录**
抓取并阅读关键来源;摘录支持结论的原文片段,记录 URL 与访问时间;超长来源分段处理。
5. **交叉验证**
对每条关键结论寻找至少两个独立来源;记录一致与冲突;冲突证据保留。
6. **缺口识别与补检**
列出未覆盖子问题与证据不足的结论;补充检索;仍不足的标记为未验证。
7. **综合成文(Write)**
按子问题组织结构;每条结论附来源编号;区分原文事实、跨源推论与模型判断。
8. **逐条引用核验**
逐条打开引用,确认 URL 可达且原文片段支持对应论断;失败的删除或降级;统计引用可核查率。
9. **分级与审阅**
结论分三档;由评审智能体或人工复核高影响结论与全部未验证结论。
10. **交付与归档**
输出报告、证据表、引用库、覆盖范围说明与成本记录;归档研究计划以便后续更新。
## 质量标准(DoD)
引用与证据:
- [ ] 每条引用均来自检索,且 URL 可达
- [ ] 引用可核查率已统计并达到组织设定阈值
- [ ] 每条关键结论有至少两个独立来源,或已标注为单一来源
- [ ] 来源可信度已分级(一手 / 权威二手 / 一般二手 / 存疑)
- [ ] 引用元数据完整,缺失项显式标注「未知」
覆盖与平衡:
- [ ] 子问题清单全部覆盖,未覆盖项已说明原因
- [ ] 反方观点与冲突证据已独立呈现
- [ ] 未出现只呈现支持性证据的选择性偏倚
- [ ] 检索策略与查询词已记录,可复现
表达与分级:
- [ ] 事实、推论、判断已区分标注
- [ ] 结论已分三档:已验证 / 部分验证 / 未验证
- [ ] 未验证结论只列为假设,未混入结论
- [ ] 数值、日期、人名、机构名与来源一致
治理与成本:
- [ ] 未使用来源白名单之外的站点,或已获授权并留痕
- [ ] 成本在预算内,或已上报
- [ ] 研究计划、证据表与引用库已归档
## 常见失败与处理
| 失败现象 | 根因 | 处理方式 |
|---|---|---|
| 引用看起来规范但打不开 | 引用由模型生成 | 删除;重新检索;建立「引用必须来自检索」的硬约束 |
| 引用能打开但不支持该论断 | 只核对了 URL 未核对内容 | 逐条核对原文片段;不支持则删除或改写结论 |
| 报告很通顺但没有新信息 | 检索深度不足或只用头部结果 | 扩展查询词;检索一手来源;检查是否被少数来源主导 |
| 结论一边倒 | 未检索反方观点 | 强制设置反方检索轮次;独立呈现冲突 |
| 成本远超预期 | 未设预算或多智能体放大未计入 | 设置预算护栏;按子问题分批放行;记录 token 放大倍数 |
| 不同来源数字打架 | 口径或时点不同 | 并列呈现并注明口径与时点差异,不自行择一 |
| 检索很久找不到答案 | 问题过窄或术语不当 | 回到 Scope 步骤修正术语;或判定为无公开证据并如实说明 |
| 同一研究两次结论不同 | 检索随机性与来源漂移 | 固定来源快照与访问时间;记录检索式以便复现 |
## 示例
**任务**:梳理「科学数据汇交」相关的中国国家政策与标准,输出一份可内部传阅的合规要点清单。
1. 界定范围:时间范围 2018-01 至 2026-09;地域范围中国大陆;纳入国务院、部委与国家标准化管理机构发布的文件;排除地方规范性文件与研究论文(论文仅作解读参考)。
2. 计划卡点:范围与预算经合规负责人确认。
3. 并行检索:子问题拆为「法律与行政法规」「国务院规范性文件」「国家标准」「部门规章与机构办法」四条线;来源白名单限定为政府门户与标准管理机构站点。
4. 阅读摘录:抓取政策原文页面,摘录关键条款原文片段,记录 URL 与访问时间。
5. 交叉验证:每项条款寻找官方发布页与至少一份官方解读;记录表述差异。
6. 缺口识别:某三项国家标准未检索到标准全文页面,仅获得期刊论文的框架转述 → 标记为「条款原文未获取」。
7. 综合成文:按「法律—行政法规—规范性文件—国家标准—机构办法」组织,每条附来源编号。
8. 引用核验:逐条打开 URL;发现一处转述性来源无法访问 → 删除该引用,相关结论降级为部分验证。
9. 分级审阅:「先汇交、后验收」机制有官方原文支持,列为已验证;某标准的 7 阶段流程仅有论文转述,列为部分验证并注明「条款原文未获取」。
10. 交付归档:输出合规要点清单 + 证据表 + 引用库 + 覆盖范围说明(含未获取条款原文的声明)+ 成本记录。 4.3 Landing Checklist
4.3.1 Context Layer (L1)
- [ ] The research scope and sub-question list can be explicitly expressed and updated as progress is made
- [ ] Context isolation is adopted: sub-questions are assigned to independent sub-agents, compressed only at the aggregation layer
- [ ] The evidence table enters the context after sorting by relevance and deduplication
- [ ] Conflicting evidence and opposing viewpoints are not trimmed and are forcibly retained
- [ ] The glossary and domain background are retrievable
4.3.2 Tool & Execution Layer (L2)
- [ ] Search and browse tools support a source allowlist, enforced at the tool layer
- [ ] Every retrieval records the query, hit count, and adopted count
- [ ] The citation management structure supports URL, publication time, access time, and original excerpt
- [ ] Only registered MCP connectors are enabled
- [ ] Long pages support segmented reading
4.3.3 Orchestration & Control Layer (L3)
- [ ] The scope / research / write three-stage pipeline is implemented
- [ ] The orchestrator-worker architecture is available, and sub-agents can run in parallel
- [ ] The plan checkpoint takes effect before large-scale retrieval
- [ ] A supplementary retrieval loop after gap identification is supported
- [ ] Batched release is supported to control cost
4.3.4 Memory & State Layer (L4)
- [ ] The research plan can be persisted and resumed after interruption
- [ ] The citation library can be reused across tasks
- [ ] Failed search queries are recorded to avoid repeating ineffective retrievals
- [ ] Previous conclusions can be retrieved and timestamped
4.3.5 Evaluation & Observation Layer (L5)
- [ ] Citation verifiability rate is automatically tallied, and verification failures are automatically flagged
- [ ] The number of independent sources per key conclusion can be counted
- [ ] The presentation ratio of conflicting evidence can be checked
- [ ] External benchmarks (DRACO, SealQA-like) are used periodically for horizontal comparison, with results taken only as reference
- [ ] High-impact conclusions have a human review channel
- [ ] It is explicitly acknowledged that this direction lacks ground truth, and "accuracy N%" is not claimed
4.3.6 Governance & Security Layer (L6)
- [ ] The source allowlist is configurable and cannot be bypassed by agents
- [ ] Copyright and citation norms are internalized (length limits, source attribution)
- [ ] Cost guardrails are set (token, request-count, and amount caps)
- [ ] Permissions for retrieving restricted internal materials are isolated
- [ ] A human review checkpoint exists before external publication
5. Summary
The deep research direction shows a sharp two-sidedness: it is the direction where capability has been most thoroughly commoditized, and also the direction where ground truth is weakest.
Capability has been most thoroughly commoditized — from 2024-12 to 2026-07, within two years deep research completed the full evolution from a product button to a programmable API, from closed source to an open-source reference implementation, and from open retrieval to a restricted source allowlist. Any organization can call these capabilities directly today without building its own retrieval models.
Ground truth is weakest — a review has no standard answer. There is no result set to compare against, no physical law to constrain it, and no experiment to reproduce. This makes this direction the one with the highest hallucination-amplification risk: a fabricated citation enters the final report with full formatting, and without a line-by-line verification mechanism, no step intercepts it.
Therefore, the Harness proposition for this direction can be condensed into three points:
- Citations can only come from retrieval, never from memory. This is the one red line with no exceptions.
- Turn "undecidable correctness" into a "decidable provenance problem". We cannot automatically judge whether a conclusion is right, but we can automatically judge whether each citation actually exists and supports the corresponding claim. Citation verifiability rate thereby becomes the most valuable substitute metric in this direction.
- Conflicting evidence must be presented. A review that presents only supportive evidence is more dangerous than having no review at all — it has complete citation formatting but no scientific honesty.
Finally, it bears repeating: this direction cannot claim an "accuracy N%" — both because there is no ground truth and because the mainstream vendors have not published independent reproducible accuracy benchmarks for their research APIs. Any such figure should be attributed to its source and have its limitations explained.
Information Gap Statement
- There is no official or industry-recognized standard original text for the deep research direction's AGENTS.md / SKILL.md. Sections 4.1 and 4.2 are both standard drafts proposed in this article.
- The phrasing "lead by 90.2%" for Anthropic's multi-agent research system is semantically ambiguous (the original is "90.2% ahead of a single Claude Opus 4 agent", likely a relative improvement rather than an absolute difference), marked
[To be verified], and it is advisable to check the original Anthropic engineering blog before citing. - HLE 26.6% and 46.4% are figures mentioned by multiple sources with fairly high confidence, but official releases should be verified; BrowseComp 68.9% / 59.2%, DeepResearch Bench 46.5 / 48.9 pts, DeepSearchQA 66.1%, GPQA Diamond 94.3%, BrowseComp with full tools 85.9% (+45%) come from same-source secondary reporting and are marked
[To be verified]. - Pricing data changes frequently; the prices cited in this article are from the mid-2026 capture point: o3-deep-research is $10 per million input / $40 per million output tokens; ChatGPT Pro is $200/month; Google AI Pro is $19.99/month; Linkup is $0.25–2.50 each time; Perplexity Pro is $20/month and Max $200/month. The time point must be noted when citing.
- SealQA-0 61% and DRACO 53.1 contain vendor self-reported components, are marked
[To be verified], and are not an independent basis for capability comparison. - Neither OpenAI nor Gemini has published an independent reproducible accuracy benchmark for its research API — this is an objective fact of this direction's evaluation predicament, not an inference of this article.
- The volume and page numbers of the original FAIR principles paper were not directly verified against the original page in this retrieval; this article only cites the FAIR principles themselves and the survey data and quotes in Springer Nature's official blog.
- The runtime data (2–4 minutes, 5–30 minutes) comes from vendor and media descriptions and is a range description rather than precise measurement.
- The policy and standards-sorting task in the Section 4.2 example is an illustrative construct, in which "the original text of certain three national standard clauses was not obtained" corresponds to the actual retrieval failure item in Section 11.3 of this report.
6. References
- Deep Research Agents in Production 2026 (product chronicle and runtime characteristics) — Reactify Solutions. https://www.reactify-solutions.com/articles/deep-research-agents-production-2026
- Best Deep Research API in 2026: OpenAI, Gemini and Linkup Compared (benchmark comparison and pricing) — Linkup. https://www.linkup.so/blog/best-deep-research-api-in-2026-openai-gemini-and-linkup-compared
- AI Search Deep Research Comparison (runtime and pricing) — Fello AI. https://felloai.com/ai-search-deep-research-comparison/
- Gemini Deep Research Agent vs OpenAI Deep Research (HLE, BrowseComp, DeepResearch Bench data, to be verified) — Agent Market Cap. https://agentmarketcap.ai/blog/2026/04/05/gemini-deep-research-agent-vs-openai-deep-research-autonomous-research-product-category
- Gemini Deep Research Agent Preview (GPQA Diamond, BrowseComp with full tools data, to be verified) — Agent Market Cap. https://agentmarketcap.ai/blog/2026/04/05/gemini-deep-research-agent-preview-google-vs-openai-autonomous-research
- Open Data: Progress, Challenges and Institutions (FAIR ten-year survey data and respondent quotes) — Springer Nature. https://springernature.com/gp/librarians/the-link/open-science-blogpost/open-data-progress-challenges-institutions/52378334
- ACM Artifact Evaluation terminology definitions — arXiv 1908.05986. https://arxiv.org/pdf/1908.05986.pdf
- Scientific Data Management Measures (Guo Ban Fa [2018] No. 17) — General Office of the State Council. https://www.gov.cn/zhengce/content/2018-04/02/content_5279272.htm
- MCP scientific research laboratory tool ecosystem (literature and writing MCP Servers) — technical guide. https://chatforest.com/guides/mcp-scientific-research-laboratory/
- MCP for Data Scientists: Notebooks (Jupyter / Colab MCP) — MCPFind. https://mcpfind.org/blog/mcp-for-data-scientists-notebooks
- Agents for R&D Science (list of autonomous scientific discovery systems) — Orchestra Bio. https://orchestra.bio/blog/agents-for-r-d-science
- Chinese Academy of Sciences scientific data management specification chain explanation — National Basic Disciplines Public Science Data Center. https://cms.casdc.cn/article/312