AI 에이전트가 로봇의 핵심 훈련 데이터 확보를 위한 가상 훈련장을 만들다
MIT CSAIL 연구팀이 세 개의 AI 에이전트(agent)를 활용해 3D 실내 장면을 자동으로 생성하는 시스템을 개발했다. 이 시스템은 물체 배치, 벽 구조, 공간 외관을 조합해 현실적인 가상 실내 환경을 구성한다. 생성된 가상 환경에서 로봇은 실제 전원이 켜지기 전에 다양한 작업 수행 방식을 연습하고 훈련 데이터를 확보할 수 있다.
MIT CSAIL 연구팀이 세 개의 AI 에이전트(agent)를 활용해 3D 실내 장면을 자동으로 생성하는 시스템을 개발했다. 이 시스템은 물체 배치, 벽 구조, 공간 외관을 조합해 현실적인 가상 실내 환경을 구성한다. 생성된 가상 환경에서 로봇은 실제 전원이 켜지기 전에 다양한 작업 수행 방식을 연습하고 훈련 데이터를 확보할 수 있다.
스타트업 General Intuition은 수백만 시간 분량의 비디오 게임 데이터를 활용해 물리적 AI(physical AI)용 기반 모델(foundation model)을 훈련하는 접근법을 추진하고 있다. 이 방식은 실세계 데이터 수집을 최소화하면서도 더 지능적인 로봇을 개발할 수 있도록 하는 것을 목표로 한다. TechCrunch Robotics는 해당 스타트업이 로봇공학 분야에서 대규모 언어 모델 확산에 비견되는 전환점이 가까워졌다고 주장한다고 전했다. 원문에는 구체적인 모델 사양이나 성능 수치는 공개되지 않았다.
NVIDIA Omniverse 블로그의 'Into the Omniverse' 시리즈 일환으로, 비전 AI 에이전트(Vision AI Agent)의 정확도를 높이기 위한 세 가지 워크플로를 소개한다. 해당 워크플로는 합성 데이터(synthetic data) 생성과 파인튜닝(fine-tuning) 기법을 결합하는 방식을 중심으로 구성된다. 비전 AI 에이전트는 공장 등 실물 환경의 영상 데이터를 운영 인텔리전스로 자동 변환하는 데 활용된다. 이 시리즈는 OpenUSD 및 NVIDIA Omniverse의 최신 발전을 바탕으로 개발자·3D 실무자·기업의 워크플로 개선을 목표로 한다.