SOURCE // NEWS

模型非企业护城河!衔远科技发布企业级 Agent 评测基准

模型非企业护城河!衔远科技发布企业级 Agent 评测基准

“为什么模型每个月都在变强,但我的企业好像没有一起变强?”这是很多企业决策者共同的困惑。过去两年,企业接入 AI Agent 的路径高度相似:从 Copilot 到知识库再到部署 OpenClaw 类工具,让 AI 从“会说”变成“会干”。演示虽然惊艳,但这些使用痕迹并未真正沉淀为企业的核心资产,也未带来实质性的竞争壁垒。

在大模型热潮初期,衔远科技创始人周伯文教授就曾指出:AI 发展的正确路径是在充分泛化的基础上,具备对任何领域的深度专业化能力。通用模型解决的是“会做”,而企业的护城河在于“比别人做得更准确、更快、更符合自身业务逻辑”。单纯接入外部模型,相当于所有人坐上了同一趟高铁,竞争优势无从建立。

微软 CEO 纳德拉也曾提出 Human Capital(人力资本)与 Token Capital(词元资本)的概念。如果企业将专业判断和专家经验全部交由外部通用模型吸纳,而没有形成自己的学习系统,将面临认知能力被“外包”的空心化风险。因此,企业需要将专业化能力和 know-how 锁在自己的平台上。

针对这一痛点,衔远科技大观研究院团队近日发布了名为 EnterpriseClawBench 的企业 Agent 评测基准,论文登上了 Hugging Face Daily Papers 日榜第二名。该基准从真实的企业工作会话中抽取了 2026 年 3 月到 5 月的 Agent 使用记录,构建了 852 个可复现任务(及 120 个 Lite 任务子集),涵盖研发、HR、财务、运营等真实岗位。

与传统只考问答的 benchmark 不同,EnterpriseClawBench 模拟了“真实办公室”环境,测试 Agent 处理异构文件、恢复上下文、调用工具和生成高质交付物的能力。评测维度包括硬性规则(如文件格式、数量、能否打开)和语义评分(准确性、深度、实用性),并将 ROI(成本与耗时) 纳入考量。更重要的是,该基准开放了评测协议与构造方法,帮助企业在不泄露内部核心资产的前提下,建立起专属的“护城河”。

AgentUpdate 深度解析

随着底层大模型(如 GPT-4、Claude 3.5)的 API 价格和性能逐渐趋同,企业依靠单一模型的“模型红利”已消耗殆尽。真正的护城河不再是基础模型的参数量,而是企业如何将专有的业务流与 AI 深度耦合。衔远科技推出的 EnterpriseClawBench 恰逢其时,它将评估尺度从学术界虚无缥缈的“MMLU 刷分”拉回到了真实的企业级多模态工作流。这种基于“真实会话”的评测方法,不仅能帮助企业量化 AI Agent 的投资回报率,更指明了未来 AI 时代的组织竞争力演进方向:企业必须构建自主受控的评测与数据闭环。通过解耦评测协议与敏感数据,它打破了数据隐私与模型优化之间的零和博弈。这对于整个 AI Agent 生态来说,意味着 Agent 建设正从无序的“尝鲜阶段”正式迈入可量化、可工程化的“智能主权时代”。