적확한 토큰이 응답의 질을 결정한다면, 그 토큰을 모르는 비전문가는 어떻게 해야 하는가. 우회로가 있다 — arXiv 초록에서 전문 용어를 빌려오는 것이다. 특정 도메인의 무작위 논문 10편의 초록만 모델 앞에 깔아주면, 나는 그 용어들을 몰라도 모델은 그 토큰들 사이에서 뻔하지 않은 연결을 만들어낸다.
근거
arXiv는 명명 규칙(예: 2601.03220v1 = 26년 1월 3220번째 논문 v1)과 API를 가져 특정 도메인 논문을 프로그램적으로 끌어올 수 있다. 초록만 읽어도 전문 토큰이 채워지고, flagship 모델은 토큰 A와 B 사이에 가교를 놓는 능력이 있다.
이게 사실은 그 Gwern이 얘기했던 LLM daydreaming하고 관련이 있기도 하고 AlphaEvolve나 Co-scientist 계열이 하는 것과 작업과도 관련이 꽤 있는 거거든요.
다만 위험이 따른다. 내가 모르는 영역을 다루는 것이므로, 모델이 만든 분포가 그럴듯해 보여도 검증할 능력이 없다. 토큰 프라이밍은 발상의 지렛대이지 결론의 보증이 아니다.
연결된 생각
- 20260603-precise-tokens-light-up-the-models-minimap — 토큰이 능력을 발휘시키는 원리
- 20260603-harness-is-the-new-source-code — 같은 에피소드의 스킬화 흐름