ASAGENT SCIENCE · BENCHMARKS
科学评测手册 · 2026.10
本页目录
检索与证据 · 基准

BrowseComp

OpenAI提出的通用浏览检索基准,要求持续查找难以定位、相互纠缠的网页信息并给出简短可核验答案;并非科学专属。

返回目录与筛选本条目暂无迁入的成绩表。

基本情况与使用条件

提出机构
OpenAI
时间
2025-04-10(官方发布)
引用数
2 · OpenAlex · 2026-10-12[3]OpenAlex所收录引用数,统计于2026-10-12;不代表所有数据库的总引用数。0仅表示该库当前计数为0,不能证明无人引用。
是否有知名大模型厂商引用 / 采用
OpenAI 提出提出方身份与外部厂商采用分开。
数据集 / 项目链接
见原文与项目来源
涉及学科
网页检索、多步浏览、信息查证
数据规模
1,266 个问题以官方发布页的原始BrowseComp为准,不混入后续变体。
是否允许 train · Agent 权重训练
防止测试题进入训练语料[1]官方要求不要在线公开题目明文或图像,并提供canary以便从训练语料中滤除benchmark、避免浏览时直接检索答案。此处保留结构示意而不传播原题。
任务内模型拟合 / 训练
任务内浏览和证据整理,不等于agent权重训练。
单个样本评测所需时间预估
没有统一单题耗时[1]尚无统一时长;官方讨论增加推理/浏览预算带来的变化;必须固定模型、浏览工具、时间或token预算、尝试次数后比较。

输入格式与样例

需要多步网络检索的自然语言问题[1]

输入样例

格式示意,非原题与标准答案
根据若干跨网页线索定位一个人物、事件或作品。(结构示意,非数据集原题。)

输出格式与样例

简短、尽可能唯一且可核验的最终答案[1]

输出样例

格式示意,非原题与标准答案
<准确的实体名或短事实答案>(结构示意)。

厂商引用 / 采用证据

  • OpenAI · 提出并发布:OpenAI官方发布BrowseComp与simple-evals实现。 证据来源

评分、版本与阅读边界

  • 保留原始BrowseComp名称;中文、扩展检索集或其他变体须另报版本。
  • 官方指出短答案成绩与真实用户开放式deep research质量的相关程度仍不确定。

原文与依据

  1. OpenAI BrowseComp 发布页2025-04-10;1,266问题;短答案设计;Footnotes污染提醒 · 本次在线读取:2026-10-12
  2. BrowseComp 论文论文入口,本文未单独读取 · 供稿 / 既有材料来源;本次未重新在线核验
  3. OpenAlex 引用统计BrowseComp: A Simple Yet Challenging Benchmark for Browsing Agents;https://doi.org/10.48550/arxiv.2504.12516;cited_by_count=2 · 本次在线读取:2026-10-12

汇总来源:survey/子玲/科学智能体相关的benchmark.md。本页未运行 benchmark;样例不是本次模型生成或实测结果。