정의

인공지능 모델이 물리적 또는 가상 환경 내에서 행동을 수행하고, 그 결과를 관찰하며, 상태를 유지(Save/Load)할 수 있도록 지원하는 제어 인터페이스 및 실행 인프라스트럭처.

핵심 속성

  • 관찰 인터페이스 (Observer): 환경의 상태(화면 스크린샷, RAM 상태, 로그 등)를 모델이 이해할 수 있는 형태의 컨텍스트로 변환하여 제공.
  • 실행 제어 (Executor): 모델의 고수준 명령을 환경이 수용할 수 있는 저수준 액션(버튼 입력, 좌표 이동 등)으로 매핑하고 실행.
  • 검증 루프 (Verification Loop): 행동 실행 후 환경의 변화를 즉각적으로 재관찰하여 의도한 결과가 도출되었는지 판단하는 피드백 체계.
  • 기억 및 상태 관리 (State Management): 세이브포인트, 세션 관리 등을 통해 에이전트가 중단된 지점부터 과업을 지속할 수 있도록 지원.

관계

인용

참가자들은 포켓몬을 하나의 에이전트 하네스 실험장으로 다뤘다. 에이전트가 화면을 관찰하고, RAM 상태를 읽고, 짧은 행동을 실행하고, 결과를 다시 확인하며, 기억과 세이브포인트를 통해 진행을 이어갈 수 있는지 테스트했다.

출처

클리핑 · linkedin.com