跳到主要内容
返回时间线
langchain.com来源发表:

LangSmith给生产轨迹加了三道访问闸:工程师看得到运行树,看不到客户姓名与支付信息

核心概要

LangSmith 面向企业版新增三项轨迹数据访问控制:管理员可隐藏轨迹的输入与输出,按用户组分配权限,并用根运行元数据设定轨迹级访问策略。此前团队要么搭建带重复轨迹和多工作区的自定义可观测方案,要么干脆不把轨迹送进可观测平台,前者维护成本高,后者让智能体工程师失去可见性。三项控制可叠加使用,使工程师查看运行树、延迟与成本等数据来排查问题,而敏感输入输出只对确有需要的人开放。

Source-provided article image: Protect sensitive data in your traces: new controls in LangSmith
langchain.com

深度剖析

LangSmith 企业版新增三项控制,用来限制谁能看到生产轨迹中的敏感内容:输入与输出访问控制、按用户组管理的权限,以及基于根运行元数据的轨迹级访问策略。 此前团队只有两条路:自建可观测方案,复制轨迹并开多个工作区,平台团队要配置和维护更多东西;或者不把轨迹送进可观测平台,智能体工程师因此看不到生产行为,产品迭代变慢。 三项控制面向企业版客户开放,官方给出的用法是轨迹以完整数据保真度送入 LangSmith,再由这些控制决定每个团队能看到什么。

做法是把敏感内容与调试所需的结构信息分开授权:运行树、延迟、成本、令牌用量和元数据仍可供工程师排查问题,输入与输出则单独设限。 输入与输出是敏感用户数据最常出现的位置,而运行树、性能统计和元数据对改进智能体同样关键、敏感度却低得多。 官方举的例子是,智能体工程师所在的组只能看运行树、延迟和令牌用量,临床人员所在的组可以看输入与输出以便准确标注轨迹。

最细的一层是轨迹级属性访问策略:管理员用根运行元数据上的条件决定某条轨迹对谁可见,例如按客户 ID 只开放该客户的支持轨迹,或按用户 ID 只开放开发者自己的编码智能体轨迹。 用户组权限按工作区定义,叠加在组织已有的基于角色的访问控制和基于属性的访问控制之上,区域等既有访问限制继续保留。 官方给出的组合场景是,支持团队只看所服务客户的输入与输出,智能体工程师看全部轨迹的运行树和性能数据但输入输出被隐藏;支持团队接手新客户时只改元数据策略,不必改动输入输出权限或工程团队的访问。

启示与展望

这些控制目前在企业版计划中提供,官方给出的适用场景是把完整轨迹送入 LangSmith 后按团队划分可见范围;文中未说明其他计划是否提供,也未给出部署规模或效果数据。

官方把这三项控制定位为可单独使用、也可叠加使用,但未报告实际部署中的权限配置效果或审计结果;元数据策略的前提是相关属性已被采集进根运行元数据。