๋ง์ง๋ง ์ ๋ฐ์ดํธ:
Axis Robotics๋ ๋ฌผ๋ฆฌ์ AI ๋ฐ ๋ก๋ด ํ์ต์ ์ํ ์๋ฎฌ๋ ์ด์ ๊ธฐ๋ฐ ์ธํ๋ผ์ ์ง์คํ๋ ๋ก๋ด ๊ณตํ ๊ธฐ์ ์ ๋๋ค. 2025๋ ์ ์ค๋ฆฝ๋ ์ด ํ์ฌ๋ ์๋ฎฌ๋ ์ด์ ๋ฐ ์ค์ ํ๊ฒฝ ์ ๋ฐ์์ ๋ก๋ด ๋ฐ์ดํฐ๋ฅผ ์์ง, ์ฆ๊ฐ ๋ฐ ํ๋ จํ๊ธฐ ์ํ ์์คํ ์ ๊ฐ๋ฐํฉ๋๋ค. [1]
Axis Robotics๋ ๋ธ๋ผ์ฐ์ ๊ธฐ๋ฐ ์๋ฎฌ๋ ์ด์ ์ ํตํด ๋ก๋ด ํ์ต ๋ฐ์ดํฐ๋ฅผ ์์งํ๊ณ ์ฒ๋ฆฌํ๋ ๋ฐ ์ค์ ์ ๋ ๋ฌผ๋ฆฌ์ AI ์ธํ๋ผ ํ๋ก์ ํธ์ ๋๋ค. ์ฌ์ฉ์๋ ์๋ฎฌ๋ ์ด์ ๋ ๋ก๋ด ํ์ ์๊ฒฉ ์กฐ์ํ์ฌ ์กฐ์ ์์ ์ ์ํํ๋ฉฐ, ์ด๋ฅผ ํตํด ๋ก๋ด ์ํ, ๋ฌผ์ฒด ์์น, ์ ์ด ๋์ ๋ฐ ์์ ๋ฉํ๋ฐ์ดํฐ๊ฐ ํฌํจ๋ ๊ถค์ (trajectories)์ ์์ฑํฉ๋๋ค. ์์คํ ์ ์ด๋ฌํ ๊ถค์ ์ ์ฒ๋ฆฌํ๊ณ IsaacSim ๊ธฐ๋ฐ ๋ฐฑ์๋๋ฅผ ์ฌ์ฉํ์ฌ ์ฌ์ค์ ์ธ ๊ทธ๋ํฝ๊ณผ ๋๋ฉ์ธ ๋ฌด์์ํ(domain-randomized)๊ฐ ์ ์ฉ๋ ์ถ๊ฐ ํ์ต ์ํ์ ์์ฑํฉ๋๋ค. ์น์ธ๋ ๊ฐ ๊ถค์ ์ ๊ฒ์ฆ ๊ฐ๋ฅํ ์ถ์ฒ ๊ธฐ๋ก์ ์ ๊ณตํ๊ธฐ ์ํด Base์ ๊ธฐ๋ก๋ ๊ณ ์ ํ ๋ฐ์ดํฐ ID๋ฅผ ๋ถ์ฌ๋ฐ์ต๋๋ค.
AXIS ์คํ์ ์๋ ์์ฑ, ํ๋ ์์ง, ๋ฐ์ดํฐ ์ ์ , ๋ชจ๋ธ ํ์ต ๋ฐ ๋ฐฐํฌ์ ๋ค ๋จ๊ณ๋ก ๊ตฌ์ฑ๋ฉ๋๋ค. ์์ฐ์ด ์ง์นจ์ 3D ์์ฐ ๋ผ์ด๋ธ๋ฌ๋ฆฌ์ ์๋ํ๋ ์ฅ๋ฉด ์์ฑ ๋๊ตฌ๋ฅผ ์ฌ์ฉํ์ฌ ๊ตฌ์กฐํ๋ ์์ ๋ฐ ์๋ฎฌ๋ ์ด์ ํ๊ฒฝ์ผ๋ก ๋ณํ๋ฉ๋๋ค. ์์ง๋ ๊ถค์ ์ ์ ์ ๋ฐ ํํฐ๋ง ๊ณผ์ ์ ๊ฑฐ์น ํ ์๋ฎฌ๋ ์ด์ ์์ ์ฌ์๋์ด ํ์ฅ๋ ๋ฐ์ดํฐ์ ์ ์์ฑํ๋ฉฐ, ์ด๋ ๋ชจ๋ฐฉ ํ์ต(imitation-learning) ์ ์ฑ ๊ณผ ์๊ฐ-์ธ์ด-ํ๋(Vision-Language-Action) ๋ชจ๋ธ์ ํ์ต์ํค๋ ๋ฐ ์ฌ์ฉ๋ฉ๋๋ค. ๊ฒฐ๊ณผ๋ฌผ์ธ ์ ์ฑ ์ ์๋ฎฌ๋ ์ด์ ์์ ํ๊ฐ๋๊ณ ์ค์ ๋ก๋ด์์ ํ ์คํธ๋๋ฉฐ, ํ์ฌ ์์คํ ์ sim-to-real ๊ฒ์ฆ์ ์ํด Franka Research 3๋ฅผ ์ฌ์ฉํ๊ณ ์์ต๋๋ค. [3]
RoboVerse๋ ์ฌ๋ฌ ๋ก๋ด ์๋ฎฌ๋ ์ดํฐ์ ๊ฑธ์ณ ๊ณตํต ์ธํฐํ์ด์ค๋ฅผ ์ ๊ณตํ๋ ์๋ฎฌ๋ ์ด์ ํ๋ ์์ํฌ๋ก, ๋ฐ์ดํฐ ์์ง, ์ฆ๊ฐ, ํ๋กํ ํ์ดํ ๋ฐ ํ๊ฐ์ ๊ฐ ๋จ๊ณ์ ๋ฐ๋ผ ์๋ก ๋ค๋ฅธ ๋ฐฑ์๋๋ฅผ ์ฌ์ฉํ ์ ์๋๋ก ํฉ๋๋ค. AXIS๋ ๋ธ๋ผ์ฐ์ ๊ธฐ๋ฐ ๋ฐ์ดํฐ ์์ง์ ์ํด WebAssembly๋ก ์ปดํ์ผ๋ MuJoCo๋ฅผ ์ฌ์ฉํ๊ณ , ๊ถค์ ์ฌ์ ๋ฐ ์ฌ์ค์ ์ธ ์ฆ๊ฐ์ ์ํด GPU ์ธํ๋ผ์์ IsaacSim์ ์ฌ์ฉํ๋ฉฐ, ์ ์ํ ๊ฐ๋ฐ ๋ฐ ํ๊ฐ๋ฅผ ์ํด ๋ค์ดํฐ๋ธ MuJoCo๋ฅผ ์ฌ์ฉํฉ๋๋ค. ์ด ์์คํ ์ ์๋ฎฌ๋ ์ดํฐ์ ๋ ๋ฆฝ์ ์ธ ์ฅ๋ฉด ์ค๋ช , ํ์คํ๋ ์์ฐ, ๋ค์ดํฐ๋ธ ์๋ฎฌ๋ ์ดํฐ ํ์์ผ๋ก์ ์๋ ๋ณํ ๋ฐ ํ๋ก๊ทธ๋๋ฐ ๋ฐฉ์์ ์ฅ๋ฉด ์์ฑ์ ์ ๊ณตํ๋ MetaSim์ ๊ธฐ๋ฐ์ผ๋ก ๊ตฌ์ถ๋์ด, ์์ ์ ์, ๊ถค์ ๋ฐ ์์ฐ์ด ์ง์๋๋ ์๋ฎฌ๋ ์ด์ ํ๊ฒฝ ๊ฐ์ ์ด๋ํ ์ ์๋๋ก ํฉ๋๋ค.
RoboVerse v2๋ ์ด ํ๋ ์์ํฌ๋ฅผ ์์ , ํ๊ฒฝ, ํ๋ ๋ฐ ์๊ฐ์ ์กฐ๊ฑด ์ ๋ฐ์ ๋ณ๋์ฑ์ ์ด์ ์ ๋ง์ถ ๊ด๋ฒ์ํ ๋ฐ์ดํฐ ์์ฑ ๋ฐ ๋ชจ๋ธ ๊ฐ๋ฐ ํ์ดํ๋ผ์ธ์ผ๋ก ํ์ฅํฉ๋๋ค. ์ฌ๊ธฐ์๋ ํด๋จธ๋ ธ์ด๋, 4์กฑ ๋ณดํ ๋ฐ ์ ๊ตํ ์ ์กฐ์(dexterous) ๋ก๋ด ํ๋ซํผ์ ๋ํ ์ง์, ๊ฐํ ํ์ต, ๋ชจ๋ฐฉ ํ์ต ๋ฐ ์๊ฐ-์ธ์ด-ํ๋(VLA) ๋ชจ๋ธ์ ์ํ ํ์คํ๋ ์ธํฐํ์ด์ค, ์๋ํ๋ ์ฅ๋ฉด ๋ฐ ์์ฐ ์์ฑ, ๊ทธ๋ฆฌ๊ณ ์์ ์์ฑ, ์๊ฒฉ ์กฐ์ ๋๋ ์ ์ฑ ๊ธฐ๋ฐ ๋ฐ์ดํฐ ์์ง, ๋๋ฉ์ธ ๋ฌด์์ํ, ๋ชจ๋ธ ํ์ต ๋ฐ ์ค์ ๋ฐฐํฌ๋ฅผ ์ฐ๊ฒฐํ๋ ํ์ดํ๋ผ์ธ์ด ์ถ๊ฐ๋์์ต๋๋ค. ์ด ์์คํ ์ ํ๊ฐ ๋ฐฉ์์ ๋จ์ผ ๊ณ ์ ๋ฒค์น๋งํฌ์์์ ์ฑ๋ฅ๋ณด๋ค๋ ์๋ฎฌ๋ ์ดํฐ, ๋ ์ด์์, ๊ฐ์ฒด, ์๊ฐ์ ์กฐ๊ฑด ๋ฐ ์ค์ ๋ก๋ด ์ ๋ฐ์ ๊ฑธ์น ์ผ๋ฐํ ๋ฅ๋ ฅ์ ๊ฐ์กฐํฉ๋๋ค. [4]
AXIS๋ WebAssembly๋ก ์ปดํ์ผ๋ MuJoCo๋ฅผ ๊ธฐ๋ฐ์ผ๋ก ๊ตฌ์ถ๋ ๋ธ๋ผ์ฐ์ ๊ธฐ๋ฐ ์๊ฒฉ ์กฐ์ ์์คํ ์ ์ฌ์ฉํ์ฌ, ํน์ ํ๋์จ์ด๋ ์ํํธ์จ์ด ์ค์น ์์ด๋ ์ ์ฒด ๋ฌผ๋ฆฌ ์๋ฎฌ๋ ์ด์ ์ด ๋ก์ปฌ์์ ์คํ๋ ์ ์๋๋ก ํฉ๋๋ค. Three.js์ WebGL์ ์ค์๊ฐ 3D ๋ ๋๋ง์ ์ ๊ณตํ๋ฉฐ, ๋ด์ฅ๋ ์ญ๊ธฐ๊ตฌํ(inverse kinematics) ์๋ฒ๋ ์์น, ํ์ , ๊ทธ๋ฆฌํผ ์ํ์ ๊ฐ์ ์๋ ์ดํํฐ ์ ๋ ฅ์ ๊ด์ ์์ค์ ๋ช ๋ น์ผ๋ก ๋ณํํฉ๋๋ค. ์ง์ฐ ์๊ฐ์ ์ค์ด๊ธฐ ์ํด ๋ฌผ๋ฆฌ ์์ง, ๋ ๋๋ง ๋ฐ ์ฌ์ฉ์ ์ธํฐํ์ด์ค๋ ๋ณ๋๋ก ์๋ํ๋ฉฐ, ๊ถค์ ๋ฐ์ดํฐ๋ ์๋ ์ค์ ๋ฒํผ๋ง๋์๋ค๊ฐ ๋ด์ฅ๋ ์ฒดํฌ ๋๊ตฌ๊ฐ ์์ ์๋ฃ๋ฅผ ํ์ธํ ํ ์์ ๋ฉํ๋ฐ์ดํฐ์ ํจ๊ป ํ์คํ๋ JSON ํ์ผ๋ก ํจํค์ง๋ฉ๋๋ค.
์ด ์์คํ ์ ํํ ๊ทธ๋ฆฌํผ์ ์ ๊ตํ ์์ ํฌํจํ ๋ค์ํ ๋ก๋ด ํํ์ ๋ํด ๊ณตํต๋ ์ ์ด ๋ฐฉ๋ฒ์ ์ ๊ณตํฉ๋๋ค. ์ฌ์ ์ ์๋ ํ์ง(grasp) ํ ํ๋ฆฟ์ ๋ค์ํ ์กฐ์ ๊ตฌ์ฑ์ ๋ํ๋ด๋ฉฐ, ์์ ์๋ ๋จ์ผ ๋งค๊ฐ๋ณ์๋ฅผ ์กฐ์ ํ์ฌ ์ด๋ฆฐ ํด์ ์์น์ ์ ํ๋ ํ์ง ์ฌ์ด๋ฅผ ๋ณด๊ฐํจ์ผ๋ก์จ ๋ณต์กํ ๋ค๊ด์ ์ ์ ์ด๋ฅผ ํ๋์ ์ ๋ ฅ ์ถ์ผ๋ก ๋จ์ํํ ์ ์์ต๋๋ค. ์๋ก์ด ๋ก๋ด ํํ๋ ๊ธฐ๋ณธ ์๊ฒฉ ์กฐ์ ์์คํ ์ ๋ณ๊ฒฝํ์ง ์๊ณ ๋ ํด์ ์์น์ ๊ด๋ จ ํ์ง ํ ํ๋ฆฟ์ ์ ์ํจ์ผ๋ก์จ ํตํฉ๋ ์ ์์ต๋๋ค. [4] ย
AXIS๋ IsaacSim์ ์ฌ์ฉํ์ฌ Linux GPU ์๋ฒ์์ ๋ธ๋ผ์ฐ์ ๋ก ์์ง๋ ๋ก๋ด ๊ถค์ ์ ์ฒ๋ฆฌํฉ๋๋ค. ์ฌ์ ์ค์ ์์คํ ์ ์กฐ๋ช , ํ ์ค์ฒ, ์ฌ์ง, ๋ฐฐ๊ฒฝ, ์นด๋ฉ๋ผ ์ค์ ๋ฐ ์ง๋, ๋ง์ฐฐ, ๋ํ, ๊ด์ ์ปดํ๋ผ์ด์ธ์ค์ ๊ฐ์ ๋ฌผ๋ฆฌ์ ๋งค๊ฐ๋ณ์ ์ ๋ฐ์ ๊ฑธ์ณ ์ฌ์ค์ ์ธ ๋ ๋๋ง๊ณผ ๋๋ฉ์ธ ๋ฌด์์ํ๋ฅผ ์ ์ฉํฉ๋๋ค. ์ด๋ฌํ ๋ณํ์ ๋ชจ๋ธ์ ๋จ์ผ ๊ณ ์ ์๋ฎฌ๋ ์ด์ ํ๊ฒฝ์ ๋ํด ํ๋ จ์ํค๋ ๋์ ๋ค์ํ ์๊ฐ์ ๋ฐ ๋ฌผ๋ฆฌ์ ์กฐ๊ฑด์ ๋ ธ์ถ์ํค๊ธฐ ์ํ ๊ฒ์ ๋๋ค. ๋ํ ์ฆ๊ฐ ์์คํ ์ ์ฌ๋ฌ ๊ฐ์ ์นด๋ฉ๋ผ ์์ ์์ ๊ด์ฐฐ ๋ฐ์ดํฐ๋ฅผ ์์ฑํ์ฌ ๊ฐ ๊ถค์ ์์ RGB, ๊น์ด(depth) ๋ฐ ์ธ๊ทธ๋ฉํ ์ด์ ๋ฐ์ดํฐ๋ฅผ ์์ฑํฉ๋๋ค. ๋ฐ๋ผ์ ๋จ์ผ ์๋ณธ ์์ฐ ๋ฐ์ดํฐ๋ ์๋์ ํ๋์ ๋ณด์กดํ๋ฉด์๋ ์ธํ, ์์ ๋ฐ ๋ฌผ๋ฆฌ์ ์กฐ๊ฑด์ด ๋ค์ํ ์์ฒ ๊ฐ์ ์ํ๋ก ํ์ฅ๋ ์ ์์ต๋๋ค. ์ด ์ ๊ทผ ๋ฐฉ์์ ์์ฐ๋ ์์ ๊ณผ์ ์ผ๊ด์ฑ์ ์ ์งํ๋ฉด์ ํ๋ จ ๋ฐ์ดํฐ์ ์ ํฌ๊ธฐ์ ๊ฐ๋ณ์ฑ์ ์ฆ๊ฐ์ํต๋๋ค. [4]
RoboVerse ๋๋ฉ์ธ ๋๋คํ(DR) ์์คํ ์ ์๋ฎฌ๋ ์ด์ ํ๊ฒฝ ๋ด์์ ์๊ฐ์ ๋ฐ ๋ฌผ๋ฆฌ์ ์กฐ๊ฑด์ ๋ณ๊ฒฝํจ์ผ๋ก์จ ๋ก๋ด ๊ฐํ ํ์ต ๋ฐ ๋ชจ๋ฐฉ ํ์ต์์์ ๊ณผ์ ํฉ์ ์ค์ด๋๋ก ์ค๊ณ๋์์ต๋๋ค. ์ด ์์คํ ์ ์ฅ๋ฉด ์๋ช ์ฃผ๊ธฐ ๊ด๋ฆฌ์ ์์ฑ ํธ์ง์ ๋ถ๋ฆฌํฉ๋๋ค. SceneRandomizer๋ ๊ฐ์ฒด์ ์์ฑ, ์ ๊ฑฐ ๋ฐ ๊ต์ฒด๋ฅผ ๋ด๋นํ๋ฉฐ, ์ ์ฉ ๋๋คํ ๋๊ตฌ๋ ์ฌ์ง, ์กฐ๋ช ๋ฐ ์นด๋ฉ๋ผ ํ๋ผ๋ฏธํฐ๋ฅผ ์์ ํฉ๋๋ค. ObjectRegistry๋ ์๋ฎฌ๋ ์ด์ ๊ฐ์ฒด์ ์ ๊ทผํ๊ธฐ ์ํ ๊ณตํต ์ธํฐํ์ด์ค๋ฅผ ์ ๊ณตํ๋ฉฐ, 3๊ณ์ธต ์ฅ๋ฉด ๊ณ์ธต ๊ตฌ์กฐ๋ ๊ด๋ฒ์ํ ํ๊ฒฝ, ์กฐ์ ์์ ๊ณต๊ฐ ๋ฐ ์๊ฐ์ ๋ฐฉํด ์์๋ฅผ ๋ถ๋ฆฌํฉ๋๋ค. ์ด ์์คํ ์ ๋ฌผ๋ฆฌ ์์ง์ด ์ ์ฉ๋ ์ ์ ๊ฐ์ฒด์ ๋ฐํ์์ ๊ด๋ฆฌ๋๋ ์๊ฐ์ ๊ฐ์ฒด๋ฅผ ๋ชจ๋ ์ง์ํฉ๋๋ค.
๋๋คํ๋ ํต์ ๋ ์คํ์ ์ง์ํ๊ธฐ ์ํด ์ ์ง์ ์ผ๋ก ์ ์ฉ๋๋ฉฐ, ๋ฒ ์ด์ค๋ผ์ธ์์ ์์ํ์ฌ ํ์ ๋จ๊ณ์์ ์ฅ๋ฉด ๊ธฐํํ ๋ฐ ์ฌ์ง, ์กฐ๋ช , ์นด๋ฉ๋ผ ๋ณ๊ฒฝ ์ฌํญ์ ์ถ๊ฐํฉ๋๋ค. ๋ ๋ฆฝ์ ์ธ ๋์ ์์ฑ๊ธฐ์ ๊ณ ์ ๋ ์๋๋ฅผ ํตํด ๋ถ์ฐ ํ๋ จ ์ค์๋ ์คํ์ ์ฌํํ ์ ์์ผ๋ฉฐ, ์์คํ ์ ๋ฌผ๋ฆฌ๋ฅผ ์ํ IsaacLab๊ณผ ๋ ๋๋ง์ ์ํ IsaacSim ๋ชจ๋์์ ์๋ํ ์ ์์ต๋๋ค. ๋ํ ํด๋ผ์ฐ๋ ๊ธฐ๋ฐ ์์ฐ ๋ฐ์ดํฐ์ ๋ฐ URDF-to-USD ๋ณํ์ ํฌํจํ ์๋ํ๋ ์์ฐ ์ฒ๋ฆฌ๋ฅผ ํตํฉํ๋ฉฐ, ๋ฐ๋ณต์ ์ธ ํ๊ฒฝ ๋ฆฌ์ ์ ์ํด ๋ฉ๋ชจ๋ฆฌ ํจ์จ์ ์ธ ์ฅ๋ฉด ์์ ์ ์ํํฉ๋๋ค. [4]
AXIS ๋ฐ์ดํฐ ํ์ดํ๋ผ์ธ์ ์ธ๊ฐ์ ๋ฐ์ดํฐ ์์ง ์ ์๋ ์์ ์์ฑ์ ์๋ํํ๊ณ , ์์ง ํ์๋ ๊ถค์ ์ฒ๋ฆฌ๋ฅผ ์๋ํํฉ๋๋ค. ์์ ์์ฑ ์์ง(Task Generation Engine)์ ์์ฐ์ด ์ง์นจ์ ๊ตฌ์กฐํ๋ ์กฐ์ ์์ ์ผ๋ก ๋ณํํ๊ณ , 2,000๊ฐ ์ด์์ ๊ฐ์ฒด๊ฐ ํฌํจ๋ ๋ฐ์ดํฐ๋ฒ ์ด์ค์์ 3D ์์ฐ์ ์ ํํ๊ฑฐ๋ ์์ฑํ๋ฉฐ, ๊ณต๊ฐ ๋ ์ด์์์ ๊ตฌ์ฑํ๊ณ , ๊ฒฐ๊ณผ ์ฅ๋ฉด์ ๊ฒ์ฆํ๋ฉฐ, ์์ ๋ณ ์ฑ๊ณต ์ฒดํฌ ํญ๋ชฉ์ ์์ฑํฉ๋๋ค. ๊ทธ๋ฐ ๋ค์ ๊ฐ์ฒด ์์น, ํผ๋๋(clutter) ๋ฐ ์นด๋ฉ๋ผ ์์ ์ ๋ณํ์ ์ํ๋งํ์ฌ ๋์ผํ ์์ ์ ๋ค์ํ ์ธ์คํด์ค๋ฅผ ์์ฑํฉ๋๋ค. ์ด ํ๋ซํผ์ ์ง๊ธฐ ๋ฐ ๋๊ธฐ(pick-and-place), ๋ฐ๊ธฐ, ๋ถ๋ฅ, ๋ถ๊ธฐ, ์ด๊ณ ๋ซ๊ธฐ, ์๊ธฐ ๋ฐ ๋ค๋จ๊ณ ์กฐ์์ ํฌํจํ 90๊ฐ ์ด์์ ์์ ์นดํ ๊ณ ๋ฆฌ๋ฅผ ๋ค๋ฃน๋๋ค.
์๊ฒฉ ์กฐ์(teleoperation) ํ, ๊ถค์ ์ ์์๋ ๋ฐ์ดํฐ, ๋ถ์ ์ ํ ์ํ ๋ณํ ๋ฐ ์คํจํ ์์ ์กฐ๊ฑด์ ๋ํด ํํฐ๋ง๋๋ฉฐ, ์ ์ง ํ๋ ์์ ์ ๊ฑฐ๋๊ณ ๋จ์ ์์ง์์ ๋ถ๋๋ฝ๊ฒ ์ฒ๋ฆฌ๋์ด 6โ8 Hz์์ 20 Hz๋ก ์ ์ํ๋ง๋ฉ๋๋ค. 16๊ฐ์ LIBERO ๋ฒค์น๋งํฌ ์์ ์ ๋ํ ํ ์คํธ์์ ์ด ํ๋ก์ธ์ค๋ ํ๊ท ๊ฐ์๋๋ฅผ 54%, ํ๊ท ์ ํฌ(jerk)๋ฅผ 47% ๊ฐ์์์ผฐ์ต๋๋ค. ์ ์ ๋ ๊ถค์ ์ IsaacSim์์ ์ฌ์๋๋ฉฐ, ์ฌ๊ธฐ์ ์กฐ๋ช , ์ฌ์ง, ํ ์ค์ฒ, ๋ฌผ๋ฆฌ ํ๋ผ๋ฏธํฐ, ๋ฐฐ๊ฒฝ ๋ฐ ์นด๋ฉ๋ผ ์์ ์ ๋ค์ํ๊ฒ ๋ณ๊ฒฝํ์ฌ ์๋์ ์์ ๋์์ ์ ์งํ๋ฉด์ ๋ค์ค ๋ทฐ RGB, ๊น์ด(depth), ์ธ๊ทธ๋ฉํ ์ด์ ๋ฐ ๊ธฐํ ์ฃผ์์ ์์ฑํฉ๋๋ค. ๊ฒฐ๊ณผ ๋ฐ์ดํฐ์ ์ ์๊ฐ-์ธ์ด-ํ๋(VLA) ๋ฐ ๋ชจ๋ฐฉ ํ์ต ํ๋ จ์ ์ฌ์ฉ๋๋๋ก ๊ตฌ์กฐํ๋ฉ๋๋ค. [5]
AXIS๋ ์ ์ ๋๊ณ ์ฆ๊ฐ๋ ์๋ฎฌ๋ ์ด์ ๋ฐ์ดํฐ๋ฅผ ์ฌ์ฉํ์ฌ ๋ ๊ฐ์ง ์ฃผ์ ์ ํ์ ๋ก๋ด ์ ์ฑ ์ ํ๋ จํฉ๋๋ค. ํ๋๋ ์์ ๋ณ ํ๋ ๋ณต์ (behavior-cloning) ๋ฐ ํ์ฐ ์ ์ฑ (diffusion-policy) ๋ชจ๋ธ์ด๊ณ , ๋ค๋ฅธ ํ๋๋ ๋ฒ์ฉ ์๊ฐ-์ธ์ด-ํ๋(VLA) ๋ชจ๋ธ์ ๋๋ค. ํ๋ จ ํ๋ก์ธ์ค๋ ๋ฐ์ดํฐ ์ฒ๋ฆฌ ๋ฐ ์ฆ๊ฐ์ ํจ๊ณผ๋ฅผ ์ธก์ ํ๊ธฐ ์ํด ์ผ๊ด๋ ์์ ์ ์์ ํ๋ จ ์์ฐ์ ์ฌ์ฉํ์ฌ ์์ ์๊ฒฉ ์กฐ์ ๋ฐ์ดํฐ, ์ ์ ๋ ๊ถค์ , IsaacSim์ ํตํด ์ฆ๊ฐ๋ ์ ์ ๊ถค์ ์ ๋น๊ตํฉ๋๋ค. ์ ์ฑ ์ ๋ค์ํ ๊ฐ์ฒด ๊ตฌ์ฑ, ํ ์ค์ฒ, ์กฐ๋ช , ๋ฌผ๋ฆฌ ํ๋ผ๋ฏธํฐ ๋ฐ ์ฅ๋ฉด ๋ ์ด์์ ํ์ ์๋ฎฌ๋ ์ด์ ์์ ํ๊ฐ๋ ํ, ์ง๊ธฐ ๋ฐ ๋๊ธฐ, ์๋ ์กฐ์, ๋ถ๊ธฐ, ๋ฒํผ ๋๋ฅด๊ธฐ์ ๊ฐ์ ์์ ์ ๋ํด Franka Research 3 ๋ก๋ด ํ์ ์ฌ์ฉํ์ฌ ์๋ฎฌ๋ ์ด์ ์์ ์ค์ ํ๊ฒฝ์ผ๋ก์ ์ ์ด(sim-to-real transfer) ํ ์คํธ๋ฅผ ๊ฑฐ์นฉ๋๋ค.
์ด ํ๋ จ ์์คํ ์ ์ฃผ๋ก ์๋ฎฌ๋ ์ด์ ๋ฐ ํฉ์ฑ ๋ฐ์ดํฐ๋ก ํ๋ จ๋ ์ ์ฑ ์ด ์ค์ ์ธ๊ณ ์กฐ๊ฑด์์ ์๋ํ ์ ์๋์ง ์ฌ๋ถ๋ฅผ ํ๊ฐํ๊ธฐ ์ํ ๊ฒ์ ๋๋ค. ํด๋น ํ๋ก์ ํธ์์ ๋ณด๊ณ ๋ ์ฐ๊ตฌ์๋ ๋ก๋ด ๊ทธ๋ฆฌํ์ ์ํ ์๋ฎฌ๋ ์ด์ ๊ธฐ๋ฐ ํ๋ จ์ ์กฐ์ฌํ GraspVLA์ ์๋ก ๋ค๋ฅธ ํํ(embodiments) ๊ฐ์ ๋ก๋ด ๊ธฐ์ ๊ฒฐํฉ์ ๋ค๋ฃฌ SkillBlender๊ฐ ํฌํจ๋ฉ๋๋ค. ์ด ์์คํ ์ ๊ถค์ ์ฌ์ ์ค MuJoCo์ IsaacSim ๊ฐ์ ์ฐจ์ด, ์๊ฒฉ ์กฐ์ ๋ฐ์ดํฐ์ ์ ํ๋ ์กฐ๋ฐํ ๋ผ๋ฒจ๋ง ๋ฐ ์์ ์ฑ๊ณต ์ ํธ, ๊ทธ๋ฆฌ๊ณ ์ด๋ํ ๋ฐ ์ ์ด ํน์ฑ์ด ์ค์ง์ ์ผ๋ก ๋ค๋ฅธ ๋ก๋ด ๊ฐ์ ์ ์ฑ ์ ์ด์ ํ ๋ ํํ๋ณ ์ ์์ด ํ์ํ๋ค๋ ์ ์ ํฌํจํ์ฌ ๋ช ๊ฐ์ง ๋ช ์๋ ํ๊ณ์ ์ ๊ฐ์ง๊ณ ์์ต๋๋ค. [6]
AXIS ์ํคํ ์ฒ๋ ๋ค ๊ฐ์ง ๊ธฐ์ ๊ณ์ธต์ผ๋ก ๊ตฌ์ฑ๋ฉ๋๋ค: World Generation(์ธ๊ณ ์์ฑ), Behavior Collection(ํ๋ ์์ง), Data Refinement(๋ฐ์ดํฐ ์ ์ ), ๊ทธ๋ฆฌ๊ณ Model Training & Deployment(๋ชจ๋ธ ํ์ต ๋ฐ ๋ฐฐํฌ). L1์ ์์ฐ์ด ์์ ์ฌ์๊ณผ ์์ ๋ผ์ด๋ธ๋ฌ๋ฆฌ๋ฅผ ์ฌ์ฉํ์ฌ MetaSim ์ฅ๋ฉด ์ค๋ช ์์คํ ์ ํตํด ์๋ฎฌ๋ ์ดํฐ ํธํ ํ๊ฒฝ์ ์์ฑํฉ๋๋ค. L2๋ ์ฌ์ฉ์๊ฐ ๋ธ๋ผ์ฐ์ ๊ธฐ๋ฐ ์ธํฐํ์ด์ค๋ฅผ ํตํด ์๋ฎฌ๋ ์ด์ ๋ ๋ก๋ด์ ์ ์ดํ ์ ์๊ฒ ํ๋ฉฐ, ํค๋ณด๋, ํด๋ํฐ, ๊ฒ์ํจ๋, VR๊ณผ ๊ฐ์ ์ฅ์น์ ์ ๋ ฅ์ ํ์คํ๋ ๋ก๋ด ๊ถค์ ์ผ๋ก ๋ณํํฉ๋๋ค. ์น์ธ๋ ๋ฐ์ดํฐ๋ Base ์ฒด์ธ ์์ ์ถ์ฒ ๊ธฐ๋ก์ด ํ ๋น๋ฉ๋๋ค. L3๋ ์ด๋ฌํ ๊ถค์ ์ ์ ์ ํ๊ณ IsaacSim ๊ธฐ๋ฐ GPU ํ๋ก์ธ์ฑ ๋ฐ ๋๋ฉ์ธ ๋ฌด์์ํ(domain randomization)๋ฅผ ์ฌ์ฉํ์ฌ ๊ธฐํํ์ ๊ตฌ์กฐ, ์ฌ์ง, ์กฐ๋ช , ์นด๋ฉ๋ผ ์ค์ ๋ฐ ๋ฌผ๋ฆฌ์ ํน์ฑ์ ๋ณํ๋ฅผ ํฌํจํ๋ ๋ ํฐ ๋ฐ์ดํฐ์ ์ผ๋ก ์์ฐ ๋ฐ์ดํฐ๋ฅผ ํ์ฅํฉ๋๋ค.
L4๋ ๊ฒฐ๊ณผ ๋ฐ์ดํฐ์ ์ ์ฌ์ฉํ์ฌ ํ๋ ๋ณต์ (behavior-cloning), ํ์ฐ ์ ์ฑ (diffusion-policy), ์๊ฐ-์ธ์ด-ํ๋(Vision-Language-Action) ๋ชจ๋ธ์ ํ์ต์ํต๋๋ค. ์ด ๋ชจ๋ธ๋ค์ ์ค์ ํ๋์จ์ด์์ sim-to-real ํ ์คํธ๋ฅผ ๊ฑฐ์น๊ธฐ ์ , ๋ค์ํ ์๋ฎฌ๋ ์ดํฐ, ํ๊ฒฝ ๋ฐ ๋ก๋ด ํํ์ ๊ฑธ์น ์ผ๋ฐํ ๋ฅ๋ ฅ์ ํ๊ฐ๋ฐ์ต๋๋ค. ์ด ์ํคํ ์ฒ๋ ๊ณ์ธต ๊ฐ์ ์ฑ ์์ ๋ถ๋ฆฌํ๊ณ ํ์คํ๋ ๋ฐ์ดํฐ ์ธํฐํ์ด์ค๋ฅผ ์ฌ์ฉํ์ฌ ์์คํ ์ ์ฒด๋ฅผ ๋ณ๊ฒฝํ์ง ์๊ณ ๋ ๊ฐ๋ณ ๊ตฌ์ฑ ์์๋ฅผ ์์ ํ ์ ์๋๋ก ํฉ๋๋ค. ํ์ดํ๋ผ์ธ ์ ๋ฐ์ ๊ฑธ์ณ ์ถ์ฒ๊ฐ ์ ์ง๋๋ฉฐ, ๋ฐ์ดํฐ ID๋ฅผ ํตํด ๊ถค์ , ์ฆ๊ฐ๋ ๋ฐ์ดํฐ์ , ํ์ต๋ ๋ชจ๋ธ์ ์๋์ ๋ฐ์ดํฐ ์์ค์ ์ฐ๊ฒฐํฉ๋๋ค. [3]
2026๋ 7์, AXIS๋ Hack VC๊ฐ ์ฃผ๋ํ๊ณ Nomad Capital, Pi Core Team Ventures, 10K Ventures ๋ฐ ์์ ค ํฌ์์๋ค์ด ์ฐธ์ฌํ 1,200๋ง ๋ฌ๋ฌ ๊ท๋ชจ์ ์๋ ๋ผ์ด๋ ํฌ์๋ฅผ ๋ฐํํ์ต๋๋ค. ํ์ฌ๋ ์ด๋ฒ ํฌ์๊ธ์ด ๋๊ท๋ชจ ์๋ฎฌ๋ ์ด์ , ์ค์ ํ๊ฒฝ์ ์๊ธฐ์ค์ฌ์ (egocentric) ๋ฐ์ดํฐ ์์ง, ๊ทธ๋ฆฌ๊ณ ์ธ๊ฐ ์ฐธ์ฌํ(human-in-the-loop) ์ฌํ ํ์ต์ ๊ฒฐํฉํ์ฌ ๊ตฌ์กฐํ๋ ๋ก๋ด ๋ฐ์ดํฐ์ ์ ์์ฑํ๋ ๋ฌผ๋ฆฌ์ AI์ฉ ๋ฐ์ดํฐ ์ธํ๋ผ ํ๋ซํผ ๊ฐ๋ฐ์ ์ง์ํ ๊ฒ์ด๋ผ๊ณ ๋ฐํ์ต๋๋ค. AXIS๋ ์ด ์์คํ ์ ๋ฌผ๋ฆฌ์ AI ๋ชจ๋ธ์ ์ง์์ ์ธ ๊ฐ๋ฐ๊ณผ ๊ฐ์ ์ ์ง์ํ๊ธฐ ์ํ ํ์ ๋ฃจํ(closed-loop) ๋ฐ์ดํฐ ํ์ดํ๋ผ์ธ์ผ๋ก ์ค๋ช ํ์ต๋๋ค. [2]