跳到主要内容
返回时间线
langchain.com来源发表:

LangSmith把智能体变成核心对象:跨框架、跨运行时的智能体有了统一归属与治理

核心概要

LangSmith 被重新组织为以“智能体记录”为核心的产品,把构建、运行、改进和治理四个阶段挂到同一个智能体身份下。此前追踪数据按扁平项目层级存放,同一智能体在不同环境中的轨迹彼此没有关联,平台团队也难以回答有哪些智能体、归谁负责、成本与表现如何。新数据模型为每个智能体记录所有者、全局唯一且不可变的 ID 和类型,并通过 OpenTelemetry Protocol 接入其他平台上的智能体,使其与自建智能体按同一方式登记和度量。

Source-provided article image: We rebuilt LangSmith around the agent
langchain.com

深度剖析

LangSmith 现在把智能体当作贯穿产品的基本对象,构建、运行、改进、治理四个环节都围绕同一条智能体记录展开。 此前发送到 LangSmith 的追踪数据使用扁平的项目层级,不与任何特定智能体关联,同一智能体在不同环境中的轨迹之间也没有关联。 打开一条智能体记录,其追踪、评估、Agent Server 和 Engine 问题可一键访问;同一智能体 ID 下汇集本地、开发、预发布和生产环境,便于比较改动前后的表现。

每个智能体记录带所有者、全局唯一且不可变的 ID 和类型三项属性,类型决定仪表盘呈现哪些信息、连接哪些数据以及采用什么评估标准。 过去平台团队难以回答哪些智能体存在、各自归谁所有、成本多少、表现如何,成本飙升时也常找不到可询问的人。 编码智能体以代码是否被合并、token 成本和完成的工作类型来衡量,通用智能体则展示描述、近期活动、在线监控、常用模型与工具以及 Engine 暴露的失败;编码类型还可连接 GitHub 仓库追踪下游结果。

治理范围扩展到不在 LangSmith 上运行的智能体,任何支持 OpenTelemetry Protocol 的平台上的智能体都可接入并登记。 智能体分散来自三个方向:工程团队自建、业务部门采购厂商平台(如 IT 的 ServiceNow、企业搜索的 Glean)、员工自行选用编码与生产力智能体,而要求所有团队统一到一个平台并不现实。 接入后的智能体与工程师自建的智能体一同登记,按同样方式度量,成本与质量指标按智能体跨环境汇总,成本异常时有具名所有者可联系并附追踪细节。

启示与展望

已展示的范围是 LangSmith 云端、BYOC 和自托管环境中的产品能力,目前提供通用智能体和编码智能体两种类型,工作区级仪表盘已可用。

语音智能体类型、组织级仪表盘以及在身份提供方中登记智能体仍在路线图上;文中对 Engine 红队、标注应用和微调数据流的描述属于正在推进的方向,而非已交付的完整闭环。