Original post · AI translation
从生产环境的使用记录中整理测试数据集变得更容易,听起来相当实用。
人们会提出各种各样事先没人想到要记录下来的需求。要是能把更多这样的需求纳入测试就好了。
今天,@JudgmentLabs 向所有人开放使用。
我们相信,长期运行的智能体系统将产生比目前全世界所能处理的还要多的附带数据。
智能体的运行轨迹中蕴藏着丰富的记录,揭示了如何改进这些系统:用户提出什么需求、智能体何时遇到困难,以及智能体如何与外部世界互动。
Judgment 是面向长周期智能体、性能最出色的监控与改进层。
我们很期待看到你们打造出什么!
Original
Today, @JudgmentLabs opens for general access. We believe long running agent systems will generate more exhaust data than the world can currently process. Hidden within agent traces are rich records of how to make these systems better: what users ask for, when agents stumble, and how agents interact with the external world. Judgment is the most performant monitoring and improvement layer for long-horizon agents. We’re excited to see what you build!