디지털 트윈 가상환경에서 마찰계수, 재질, 조명, 카메라 조건 등을 수학적 파라미터로 구현해 로봇 학습용 합성데이터를 생성하는 기술이 나왔다. 스카이월드와이드(SKAI)와 자회사 스카이인텔리전스, 서울대학교 AI연구원(AIIS)이 공동으로 개발한 이 기술은 2026년 8월 23일 방영된 JTBC 특집 다큐멘터리 ‘한국의 승부수-피지컬 AI’에서 소개됐다.
엔비디아 옴니버스 기반 자동화 파이프라인
이 시스템은 엔비디아 옴니버스를 기반으로 데이터 생성, 라벨링, 품질검증을 자동화한다. 현실에서는 모든 변수를 재현해 데이터를 수집하려면 시간과 비용이 크게 들고, 설비 고장이나 안전사고 같은 상황은 반복 재현 자체가 어렵다는 점이 이 기술의 출발점이다. 실제 현장에서 오류가 발생하면 해당 조건을 가상환경에 반영해 모델을 재학습하는 Real-to-Sim-to-Real 데이터 루프도 함께 구축했다.
이재철 스카이인텔리전스 대표는 “계산과 추적, 재활용이 가능하고 피지컬 AI에 전달하면 즉시 학습에 활용할 수 있는 데이터를 학습용 합성데이터라고 부른다”며 “합성데이터 생성과 함께 피지컬 AI의 병목을 해결하는 전체 데이터 루프와 인프라를 구축하는 것이 중요하다”고 말했다.
로봇 비전 공동연구와 밸류체인 협력
피지컬 AI 상용화의 병목은 하드웨어가 아니라 현실 변수를 반영한 학습 데이터 부족에 있다는 게 이들의 설명이다. 디지털 트윈 기반 합성데이터는 스크래치, 오염, 변형 등 현실에서 표본을 확보하기 어려운 상황까지 재현할 수 있다. 이를 바탕으로 스카이월드와이드와 스카이인텔리전스는 서울대 AIIS와 함께 케이블처럼 형태가 계속 변하는 유연 물체의 배선 작업을 로봇이 인식하고 처리하도록 하는 비전 기술을 공동 연구하고 있다.
스카이인텔리전스는 글로벌 산업용 로봇 기업 ABB로보틱스와 프레임워크 협약을 체결하며 밸류체인 상 협력 관계도 넓혔다. 로봇이 조명, 각도, 물체 위치 변화에 취약한 문제를 해결하기 위해서는 데이터 생성 기술뿐 아니라 실제 산업 현장에 적용할 로봇 파트너와의 연계가 필요하다는 판단에서다.
스카이월드와이드(종목코드 357880)는 10년 이상 DBMS와 그래프 기술을 개발해온 회사로, 국내 유일의 그래프 데이터베이스(GDB) 특허를 보유하고 있다. 신재혁 스카이월드와이드 대표는 “한국 제조업의 진짜 자산은 숙련공들의 손끝에 축적된 노하우”라며 “숙련 인력이 은퇴하더라도 기술이 단절되지 않도록 이를 데이터로 만들고 로봇에게 학습시켜 산업의 자산으로 계승하는 것이 중요하다”고 말했다. 그래프 데이터베이스 기반 기술력이 합성데이터와 결합하면서, 제조 현장의 암묵지를 로봇 학습 자산으로 전환하는 작업이 본격화하는 모습이다.