InfoQ 한국어
팔로우
JioHotstar, AI 코딩 에이전트용 지식 기반 벤치마킹
JioHotstar는 SWE, CodeScale Bench 및 내부 질의응답 하네스를 사용하여 AI 코딩 에이전트의 코드 검색에 대한 6가지 접근 방식을 평가했습니다. 구조적 검색은 구체적인 작업에서 좋은 성능을 보였으며, 의미론적 검색은 모호한 요구 사항에 도움이 되었습니다. 이러한 결과는 정확도, 토큰 사용 및 도구 설계의 절충점을 강조하며, 검색 도구를 작업 유형에 맞게 조정할 필요성을 강조합니다. Leela Kumili 작성