프로덕션 실패를 회귀 테스트로 전환하는 AI 에이전트 ... 노트

프로덕션 실패를 회귀 테스트로 전환하는 AI 에이전트 구축

생산 실패는 종종 무엇이 잘못되었는지 설명하기에 충분한 증거를 포함하지만, 실행 가능한 테스트가 되기에는 충분한 구조를 갖추지 못합니다. 트레이스는 실패한 요청 경로를 노출할 수 있고, 로그는 예외를 포함할 수 있으며, 다운스트림 스팬은 결함을 유발한 종속성 응답을 드러낼 수 있습니다. 유용한 엔지니어링 단계는 해당 증거를 또 다른 사고 요약이 아닌 결정론적 회귀 테스트로 변환하는 것입니다.최근 버그 재현 시스템은 유용한 재현기는 보고된 이유로 버그가 있는 수정본에서 실패하고 결함이 수정된 후 통과하는 증거가 되어야 한다는 동일한 원칙을 따릅니다. Issue2Test와 ReProAgent 모두 테스트 생성을 단일 프롬프트-응답 작업으로 취급하는 대신 실행 피드백을 사용합니다.