Issue 01X 다이제스트
AC POST
X 다이제스트 목록
xdigest2026년 9월 19일 08:55

[X] Pi는 read, write, edit, bash라는 네 가지 도구만으로 두 벤치마크 모두에서 파레토 프런티어에 도달합니다.

Pi가 read, write, edit, bash 네 가지 도구만으로 두 벤치마크 모두에서 파레토 프런티어에 올랐다는 결과는 에이전트 성능이 도구를 많이 붙이는 데서만 나오지 않음을 보여준다. 해당 Harness Tax 분석은 하네스 설계가 비용에 미치는 영향을 완료된 시도 수, 기록된 턴 수, 초기 컨텍스트별로 나눠 본다. 모델 선택뿐 아니라 도구 구성과 호출 구조를 함께 최적화해야 같은 성능을 더 적은 지출로 얻을 수 있다. 점수만으로는 놓치기 쉬운 실행 과정의 비용까지 봐야 실제 배포 효율을 판단할 수 있다는 뜻이다.

Pi는 read, write, edit, bash라는 네 가지 도구만으로 두 벤치마크 모두에서 파레토 프런티어에 도달합니다. 하네스 설계가 지출에 미치는 영향을 이해하기 위해, 완료된 시도 수와 기록된 턴 수, 초기 컨텍스트에 따른 비용을 분석합니다. @MelissaPan 등 연구진의 Harness Tax 분석을 공유합니다. https://t.co/1gA77p8Xgj