한국의 집 50곳이 로봇 학습 데이터가 됐다: 3D 공간 50개소·행동 5,000건·객체 10,000장 구축기
한국 가정환경 50곳이 로봇이 학습할 수 있는 3D 공간·행동·객체 자산이 되기까지. 독파모 2차수가 만든 결과물을 1월에 공개했던 계획과 나란히 놓고, 숫자와 과정 중심으로 정리했습니다.
지난 1월, 저희는 독자 AI 파운데이션 모델 프로젝트(이하 독파모) 2차수를 시작하며 계획을 공개했습니다. 로봇이 학습할 수 있는 '가상 물리 환경'의 재료인 3D 공간, 4D 행동, 지능형 객체를 만들겠다는 것이었습니다. 2차수 사업이 종료됐고, 결과물을 공유하려 합니다.
SUPERB AI
피지컬 AI 데이터 팩토리란?
실세계에서 수집한 데이터(원료)를 시뮬레이터가 이해하는 3D/4D 디지털 자산으로 변환(공정)하고, 가상 환경에서 라벨링된 학습 데이터를 대량 생성(양산)하는 데이터 생산 체계.
정부가 '피지컬 AI 핵심경쟁력 확보전략'(2026.7)에서 데이터 확보를 첫 번째 육성 분야로 놓고, 업계에서 전국 권역별 데이터 팩토리 구축이 논의되는 등 올해 핵심 의제로 떠오른 개념이다. 슈퍼브에이아이는 독파모를 통해 이 구조를 국내에서 가동해 왔다.
이 개념을 보는 저희의 관점은 기고 '피지컬 AI 데이터 팩토리, '몇 개 짓느냐'보다 '어떻게 돌리느냐''에서 더 읽을 수 있습니다.
요약 (TL;DR)
- 한국 가정환경을 복제한 고정밀 3D 공간 자산 50개소: 3D Gaussian Splatting 배경에 상호작용 사물의 물리 메시를 결합한 하이브리드 구조, 실스케일·지면 정합 확보
- 설거지·청소·정리 등 가사 노동 4D 행동 자산 5,000건: 7,500건 촬영분 중 품질 선별, SMPL 기반 체형·자세 분리, 파이프라인 처리 성공률 98% 이상
- 로봇 조작 빈도가 높은 가사 사물 지능형 객체 자산 10,000장: 픽셀 단위 세그멘테이션 + 관절 모델링 8종(냉장고·세탁기·서랍장 등)
- 위 자산을 NVIDIA Isaac Sim에 통합해 합성 데이터 생성 파이프라인의 시제 가동(PoC): 10,000장 생성 진행 중
- 다음 단계: 3차수(2026 하반기) 멀티모달(언어·행동) 결합
계획과 결과
| 계획 | 결과물 |
|---|---|
| 한국형 주거 50개소를 고정밀 3D 공간으로 | 3D 공간 자산 50개소 |
| 가사 노동 시나리오 5,000건을 4D 행동 데이터로 | 4D 행동 자산 5,000건 (촬영 7,500건 중 품질 선별) |
| 가사 사물 10,000건을 상호작용 자산으로 | 객체 자산 10,000장 (1차수 30만 프레임에서 선별·추출) |
| 자산 통합·합성 데이터 10,000장 생성 | 파이프라인 시제 가동, 생성 진행 중 |
앞으로 딥다이브 시리즈에서 각 자산의 구축 과정을 차례로 다룰 예정입니다.
행동, 공간, 객체 세 자산을 어떻게 구척했는지, 세 자산이 어떻게 결합되는지에 대해 네 편에 걸쳐 설명 드리겠습니다.
왜 행동, 공간, 객체인가
로봇 학습의 병목은 모델이 아니라 데이터이고, 그 데이터는 웹에 없습니다. 공간·행동·객체는 각각 로봇이 '어디서, 무엇을 보고, 어떻게 움직일지'를 배우는 재료이며, 셋이 시뮬레이터에서 결합될 때 학습 데이터를 재생산하는 구조가 완성됩니다. 각 자산을 어떻게 만들었는지는, 구축 과정에서 겪은 시행착오까지 포함해 자산별 딥다이브에서 다룹니다.
글로벌은 지금
같은 시기에 해외에서는 어떤 일이 벌어지고 있을까요. 중국은 지난 한 해 정부 지원으로 40곳이 넘는 로봇 훈련센터를 세웠고, 애지봇(AgiBot)은 100만 건이 넘는 실로봇 조작 데이터셋을 오픈소스로 공개했습니다. 독일에서는 뮌헨공대와 NEURA Robotics가 1,700만유로를 투자한 유럽 최대 피지컬 AI 훈련센터가 올해 문을 엽니다.
물리 세계의 학습 데이터를 누가 먼저 쌓느냐의 경쟁이 이미 시작됐고, 슈퍼브에이아이의 이번 프로젝트는 한국이 확보한 실행 사례입니다.
자주 묻는 질문 (FAQ)
Q. 왜 '한국' 가정환경인가요?
해외 데이터셋으로 학습한 로봇에게 한국의 주거 구조는 학습 분포 밖입니다. 국내에 투입될 로봇의 학습 데이터는 국내 환경에서 나와야 합니다.
Q. 합성 데이터는 실데이터를 대체하나요?
대체가 아니라 증폭입니다. 잘 만든 실데이터 자산이 있어야 현실과 정합한 합성 데이터가 나옵니다. (딥다이브 4편에서 다룹니다)
피지컬 AI 데이터 구축 파트너십 문의는 아래 내용을 남겨주시면, 슈퍼브 전문가들이 바로 연락 드리겠습니다.
슈퍼브에이아이는 산업 현장의 시각 데이터를 기업이 활용할 수 있는 인텔리전스로 전환하는 비전 인텔리전스 기업입니다.