← 장부로 돌아가기

Build-A-Chip-Bench — 과제당 최대 72시간에도 최고 종합 16.6%

날짜2026-10-14
분류벤치마크
판정반박
게이지 가중치2 / 3
출처ChipAgents and NVIDIA Build-A-Chip-Bench (BusinessWire, 2026-10-14), recorded in AGI watch evening run

요약

스펙에서 GDS까지 전 공정을 재는 Build-A-Chip-Bench에서 최고 종합 점수는 Claude Fable 5.1의 16.6%였다. GPT-6 Astra는 기능과 GDS 통과가 85%였으나 PPA 10.2%로 종합 8.7%에 그쳤다.

A/B 영향 분석

물리 게이트가 있어 게임을 할 수 없는 과제에서 순수 역량 격차가 드러났다는 점이 시나리오 B의 반박 근거다. 검증된 동작을 최적화 과정에서 파괴하고 초기 결정으로 되짚는 속도가 느리다는 실패 양상은 장기 자율성의 병목을 구체적으로 보여준다. A의 입장에서는 이런 벤치마크가 새로 만들어졌다는 자체가 측정 압력이 커지고 있다는 신호일 뿐, 점수 자체는 지지로 쓸 수 없다. 중앙값 유지 판정과 함께 기록한다. 과제당 최대 72시간이라는 긴 실행 허용치 안에서 나온 점수라는 점도 중요하다. 시간 부족 탓이 아니라 수행 구조 자체가 병목이라는 해석에 힘을 싣기 때문이다. 물리 게이트가 있는 과제군은 앞으로도 가장 정직한 판정 재료가 될 가능성이 크다.