정의
검증 불가능한 데이터 도메인이란 알고리즘적 방법(예: 정답이 자명한 reward function)으로 옳고 그름을 판별할 수 없는 영역의 데이터를 의미한다. 반면 수학·코딩·과학처럼 검증 가능한 도메인은 frontier model이 스스로 데이터를 생성하고 강화학습으로 학습할 수 있어, 스타트업의 독점적 데이터셋이 되기 어렵다.
핵심 속성
- 판단의 주관성: 인간의 취향, 맥락 의존적 판단, 감성 등이 개입되어 기계가 ground truth를 자동 생성할 수 없음.
- 자연적 희소성: 특정 서비스 환경에서만 수집 가능하며, 인터넷 전체에 분포하지 않음.
- 검증 가능성으로의 전환 가능성: 적절한 폐루프 환경(closed-loop system)을 통해 사용자 피드백을 label로 삼아 verifiable domain으로 변환할 수 있음(ex. 메이크업 조합 선호도, 자율주행 급정지 상황).
- Moat 창출 원천: “너만 가질 수 있는 데이터”의 진정한 정의가 이 도메인에서 비롯된다.
관계
- proprietary-data-flywheel — 개념을 실현하는 메커니즘
- 20260607-closed-loop-system-converts-non-verifiable-to-verifiable — 전환을 가능하게 하는 환경
- test-time-compute — 검증 가능한 도메인에서 모델 성능 향상을 위해 사용되는 기법 (대조 관계)
- data-as-environment — 시스템을 데이터 생성 환경으로 보는 관점
인용
“너만 가질 수 있는 데이터, proprietary 데이터 가져야 된다는 얘기 굉장히 많이 하잖아요. 그런 proprietary 데이터가 무엇이냐는 거에 대해서 제가 살짝 한 단계 더 나아간 건데, 이거죠. 뭐냐, 알고리즘적 방법으로 검증 가능한 reward function을 만들 수 없는 영역.”