에이전트의 스킬을 평가하는 다섯 가지 규칙: 컨텍스트 창이 부풀어 오르기 전에
SKILL.md 파일을 효과적으로 테스트하는 것은 노트북에서의 단순한 합격/불합격 이상의 것을 요구합니다. 과도한 트리거링 또는 형제 하이재킹은 복잡한 워크스페이스에서 에이전트가 스킬을 로드하는 것을 방해할 수 있습니다. skill-reach 및 SkillSpector와 같은 도구는 프론트매터 충돌 및 보안 위험을 조기에 식별하는 데 도움이 됩니다. 주변 상태가 기준 결과를 오염시키기 때문에 개발자 노트북에서 스킬 벤치마크를 실행하는 것을 피하는 것이 중요합니다. 여러 번의 반복에 걸친 페어드 제거 테스트(WITH vs. WITHOUT)는 스킬 개선 및 효율성 향상을 보다 정확하게 측정할 수 있습니다. 이 접근 방식은 스킬이 실제로 도움이 되는지 또는 기본 모델이 이미 해당 기능을 가지고 있는지 밝혀냅니다. 최적화를 자동화할 때 평가 하네스가 올바름, 효율성 및 보안 메트릭을 분리하고 채점 구성 요소를 격리하여 보상 해킹에 대해 강화되었는지 확인하십시오. 마지막으로, 효과적인 SKILL.md 파일은 광범위한 문서를 단순히 덤프하는 대신 운영 습관과 검증 반사를 인코딩합니다. 프론티어 모델은 사전 훈련에 공개 문서가 있는 경우가 많으므로 간결하고 실행 가능한 제약 조건이 더 가치 있습니다. 새로운 모델로 스킬을 정기적으로 재평가하고 델타가 없는 스킬을 삭제하면 효율적이고 최신 상태의 스킬 세트를 보장할 수 있습니다.