跳到正文
热点事件持续更新

港科大(广州)等发布OpenDS-World评测基准

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

香港科技大学(广州)、复旦大学、华盛顿大学等机构的研究团队在论文《Deep Search in Real-World Web Environments》中提出 OpenDS 深度搜索任务范式,并构建评测基准 OpenDS-World。测试中,GPT-6 Astra、Claude Opus 5.5、Gemini 3.8 Flash、Qwen3.8 Max、GLM-5.3 Flash、DeepSeek V4.1-Flash、Kimi K3 等 12 个前沿模型获得同一套搜索、浏览器和视频工具,每题限 1 小时、100 次工具调用,自行决定搜索过程并给出答案,最高准确率为 39%。 人类对照组的条件不同:参与者只能拿到原始视频和题目,不能使用 LLM 工具,只能使用常规浏览器与搜索,且不能互相交流;人类作答不设统一单题时间上限,可在认为无法继续取得有效进展时结束尝试,而模型被限制最多 3,600 秒搜索时间和 100 次工具调用。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月30日
  1. WeChatRSS:机器之心
    港科大(广州)等发布 OpenDS-World:12 个模型最高准确率 39%

    香港科技大学(广州)、复旦大学、华盛顿大学等机构在论文《Deep Search in Real-World Web Environments》中提出 OpenDS 深度搜索任务范式,并构建评测基准 OpenDS-World。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。