Inside Clay's Eval Stack: 300M Agent Runs, One LangSmith Pipeline
Clay의 조사·엔지니어링 에이전트에서 로컬·CI·A/B 평가를 운영 피드백과 연결하고 데이터 레이크로 에이전트의 데이터 접근을 확장한 사례다. 설명은 대규모 문맥이 운영 데이터 활용의 변화를 가져왔다고 소개한다.
핵심 내용
- 설명은 대규모 문맥이 운영 데이터 활용의 변화를 가져왔다고 소개한다.
따라 하기 순서
- 개발 단계부터 CI까지 평가 기준을 적용한다.
- 운영 A/B 지표와 오프라인 평가를 연결한다.
- 데이터 레이크 기반으로 에이전트의 데이터 활용을 확장한다.
나오는 도구
- Claygent
- Sculptor
- LangSmith
- Fable
- 채널
- LangChain
- 분류
- 개발 자동화 · 운영·오프라인 평가 연결
- 언어
- 영어
- 영상일
- 2026.08.29