GDPVal이 GPT-5.1의 39점에서 5.2의 70점으로 한 판올림 만에 도약했다. 1년 전만 해도 “이거 풀면 AGI지”라 불리던 벤치마크다. 여기서 무서운 건 점수 자체가 아니라 패턴이다. verifiable reward를 줄 수 있게 명세하는 순간, 그 일은 사실상 모델이 끝낼 수 있는 게임이 된다. 그래서 벤치마크를 만드는 행위가 곧 그것을 풀리게 만드는 신호가 되어버렸다.
근거
RL에서 배운 일반화 규칙 — 목적이 세팅되고 그 목적에 reward를 verifiable하게 줄 수만 있다면 모델이 끝낸다 — 이 GDPVal에도 그대로 적용됐다. 인간 고유의 지적 노동으로 여겨지던 영역이 전기세 수준(추정 비용의 1%)으로, 11배 빠르게 처리되기 시작했다.
“벤치마크를 만들면 뭐 되고 있다, 그러니까 벤치마크를 만들면 된다. 약간 이게 뒤바뀌어 있긴 한데 그런 느낌적인 느낌이에요.”
연결된 생각
- 20260603-gdpval-intellectual-labor-commoditization — 이 주장의 근거가 된 벤치마크
- 20260602-rl-amplifies-latent-reasoning-in-llm — verifiable reward가 풀어내는 메커니즘
- 20260602-non-verifiable-to-verifiable-closed-loop — 그래서 도망갈 곳은 명세 불가능한 도메인이라는 전략