기사: LLM 신뢰성 계층 테스트 중: 정확도, 수율 ... 노트
InfoQ 한국어

기사: LLM 신뢰성 계층 테스트 중: 정확도, 수율 및 검증의 한계

검증 계층은 오류를 수정하기보다는 신뢰도에 따라 출력을 정렬합니다. 여섯 가지 신뢰도 계층에 대한 벤치마크에서 투표 및 자체 수정은 정확도를 복구하지 못했으며, 의심스러운 기록만 보류했습니다. 프로덕션 시스템은 생성 대신 결정론적 조회로 대체하고, 원시 정확도보다 수율을 추적하며, 검사를 쌓기 전에 추출 병목 현상을 해결함으로써 더 높은 신뢰도를 얻습니다. Pushpdeep Mishra, Wejdan Bagais 작성
CdXz5zHNQW_GsZ46ud08z.jpeg