왜 스킬이 졌을까?(feat. agent.md 의 비밀)
Summary
버셀 실험을 근거로 스킬보다 항상 문맥 안에 노출되는 agent.md가 더 높은 정확도를 보였다는 설명이다. 핵심은 정보의 품질보다도 AI가 그 정보를 실제로 “보게” 만드는 배치 방식이라는 점이다.
Key Takeaways
- 버셀 실험에서 무지시 상태와 “스킬만 제공” 상태는 동일한 53점으로 효과가 거의 없었다고 설명한다.
- 스킬을 강제로 보게 했을 때 79점으로 개선됐지만, 눈앞에 놓인 agent.md 방식은 100점을 기록했다고 소개한다.
- 문제는 스킬 자체의 지식 품질보다 AI가 필요 시점에 문서를 꺼내 보지 않는 회수율에 있다는 해석이다.
- 새 기능을 다루는 프로젝트일수록 항상 보이는 현재 문맥 지침이 유리하다고 주장한다.