Building Engine v2: How LangChain approaches agent improvement
LangSmith Engine이 운영 트레이스의 문제를 찾고 수정·회귀 평가를 만드는 방식과 여러 실행에 걸친 추세·비효율 경로를 탐지하는 v2 기능이다. IssueBench 오류 식별 2배 개선은 발표자의 벤치마크 주장이다. 검증된 수정과 레드팀은 설명 시점에 특정 고객 대상 비공개 베타다.
핵심 내용
- IssueBench 오류 식별 2배 개선은 발표자의 벤치마크 주장이다.
- 검증된 수정과 레드팀은 설명 시점에 특정 고객 대상 비공개 베타다.
따라 하기 순서
- 과제별 벤치마크와 내부 에이전트로 개선을 확인한다.
- 트레이스 간 추세와 비효율을 찾는다.
- 문제를 재현하고 수정안을 검사하는 흐름을 다룬다.
나오는 도구
- LangSmith Engine
- LangSmith Deployment
- IssueBench
- 채널
- LangChain
- 분류
- 개발 자동화 · 자동 개선·레드팀
- 언어
- 영어
- 영상일
- 2026.10.07