WebSailor – 阿里通义实验室开源的网络智能体

WebSailor是什么

WebSailor的主要功能

• 复杂任务数据合成：WebSailor 使用 SailorFog-QA 方法生成高不确定性的复杂任务数据，模拟真实世界中信息搜索的复杂场景。
• 多轮工具调用与推理重构：借助开源推理模型，WebSailor 能进行多轮工具调用，重构推理过程，高效处理复杂问题。
• 强化学习算法：采用 DUPO 算法，通过动态采样策略优化训练效率，显著提升模型的决策能力。
• 信息检索与分析：WebSailor 能主动搜索、访问多个网页，分析信息之间的关联，提供完整准确的答案。

WebSailor的技术原理

• 数据合成（SailorFog-QA）：WebSailor 首先通过 SailorFog-QA 方法生成高不确定性的复杂任务数据。采用“知识图谱随机游走”技术，从维基数据等知识库中选取冷门实体作为起点，随机扩展知识图谱，构建复杂的非线性关系网络。通过模糊化问题描述（如将具体年份改为时间段、隐去部分信息等），进一步增加任务的初始不确定性。
• 模型训练（RFT 冷启动）：在训练阶段，WebSailor 使用拒绝采样微调（RFT）进行冷启动。RFT 通过挑选高质量的解题轨迹对模型进行初步对齐，帮助模型掌握基本的推理和工具调用习惯。
• 强化学习（DUPO 算法）：完成冷启动后，WebSailor 进入强化学习阶段，采用 DUPO（重复采样策略优化）算法。DUPO 的核心在于动态采样策略：训练前过滤掉过于简单的样本，训练中重复采样具有挑战性的轨迹。大幅提高了训练效率，使模型在复杂任务中快速迭代。

WebSailor的项目地址

• Github仓库：https://github.com/Alibaba-NLP/WebAgent

WebSailor的应用场景

• 复杂信息检索：WebSailor 能处理模糊和复杂的查询问题，通过多步推理和交叉验证，在海量信息中快速定位并验证答案。
• 多跳问答任务：在多跳问答场景中，WebSailor 能通过多轮工具调用和推理，逐步拆解复杂问题并找到答案。
• 科研与数据分析：WebSailor 可以帮助科研人员和分析师快速梳理复杂的信息网络，从多个来源综合信息，提供完整且准确的结论。
• 高难度任务训练与优化：WebSailor 的训练数据集 SailorFog-QA 模拟了复杂的现实世界信息搜索场景，通过高不确定性和复杂关系网络的构建，能应对没有预设解决路径的复杂任务。