停止一致不等于答案质量
manifest 协议明确不评分最终答案质量;与另一模型在相近时间停止,不能证明答案正确或完整。
查看对应来源 ↗Deep Searcher 含固定查询集上的 Jev 搜索停止判断实验,与完整研究 Agent 分开。
Jev 根据主查询及累积中间上下文判断 enough_information,代码按有界轮数协议比较停止决策。
让停止行为与调用轨迹可检查;协议明确不评分最终答案质量。
2026-10-24 核对固定版本的说明与实现材料。本站未执行百题实验或在线 API。evaluation 目录不能证明主应用默认启用此路径。
评估研究搜索循环何时已经有足够信息可以停止。
资料分析日期:
manifest 协议明确不评分最终答案质量;与另一模型在相近时间停止,不能证明答案正确或完整。
查看对应来源 ↗full100_core.py 对 URL/请求体做哈希,保存调用、失败响应并分开限速;缓存命中不应被当作新测延迟。
查看对应来源 ↗应当作停止策略实验,而非 Deep Searcher 整个研究 Agent 的替代。上线阈值前仍须测下游答案质量。
阅读 run_full100.py 的 make_manifest 与 full100_core.py 的 DurableAPI.request,核对冻结题目、七轮上限和缓存标记,区分判断轨迹与最终答案评分。