본문 바로가기
과학기술

휴머노이드 및 항공우주 시스템을 위한 온디바이스 인텔리전스 기술

by 리서치가이 2025. 11. 4.

Part I: Physical AI와 Embodied AI의 개념적 프레임워크

1.1 디지털 AI에서 Physical AI로의 패러다임 전환 정의

인공지능(AI) 분야는 데이터를 처리하고 신호를 해석하는 '디지털 AI(Digital AI)'의 한계를 넘어, 물리적 세계를 감지하고, 추론하며, 자율적으로 행동하는 'Physical AI(PAI)'로의 근본적인 패러다임 전환을 맞이하고 있다.1 이 전환은 단순히 로봇 공학의 발전을 의미하는 것이 아니라, AI가 사물 인터넷(IoT), 자동화 기술과 융합하여 현실 세계의 산업 환경에서 지능형 시스템을 구현하는 광범위한 변화를 포괄한다.1

 

 

이러한 패러다임에 따라 AI는 두 가지 주요 범주로 분류될 수 있다. 첫째, 디지털 AI는 전통적인 신호 처리 영역에 국한된 AI를 지칭한다.2 둘째, Physical AI는 물리적 실체와 상호작용하는 모든 형태의 AI를 의미하며, 이는 다시 두 가지 하위 개념으로 나뉜다.2

 

  • 통합형 Physical AI (Integrated Physical AI, IPAI): 로봇과 같이 모든 구성 요소가 제한된 공간 내에 통합되어 있는 시스템을 의미한다.2
  • 분산형 Physical AI (Distributed Physical AI, DPAI): IoT 네트워크처럼 구성 요소들이 넓은 공간에 분산되어 있는 시스템을 지칭한다. 이러한 분산형 시스템은 농업, 헬스케어, 물류 등 다양한 산업 분야에서 PAI를 적용할 수 있는 비옥한 토양을 제공한다.2

 

Physical AI를 실현하는 핵심 메커니즘은 'Embodied AI(체화된 AI)' 개념에서 찾을 수 있다. Embodied AI는 진정한 지능이 가상 공간(cyberspace)과 물리적 세계를 연결하며 환경과의 물리적 상호작용을 통해 발현된다는 철학에 기반한다.3 이 접근법은 추상적인 문제 해결을 넘어 물리적 실체를 제어함으로써 인공 일반 지능(Artificial General Intelligence, AGI)으로 나아가는 필수적인 단계로 간주된다.3

 

1.2 엣지 일반 지능(EGI)과 에이전트 시스템의 부상

현재의 엣지 인텔리전스는 객체 탐지와 같은 특정 작업에 국한되어 있지만, 기술은 이를 넘어 '엣지 일반 지능(Edge General Intelligence, EGI)'으로 진화하고 있다.6 EGI는 분산된 에이전트들이 동적이고 다중 모달 환경에서 스스로 인지하고, 추론하며, 자율적으로 행동하는 능력을 갖추는 것을 목표로 한다.6 이는 단순한 엣지에서의 추론을 넘어서는 중요한 발전이다.

 

EGI의 동력은 수동적인 예측기가 아닌 능동적인 행위자로서의 '에이전트 AI(Agentic AI)'에서 나온다. 이러한 에이전트들의 대규모 협업을 가능하게 하는 기반 프레임워크로 '에이전트 인터넷(Internet of Agents, IoA)' 개념이 제시되었다. IoA는 가상 비서부터 휴머노이드 로봇에 이르기까지 이종(heterogeneous) 에이전트 간의 원활한 상호 연결과 협업을 위한 통일된 인프라를 제공한다.8

 

1.3 인지적 핵심으로서의 월드 모델(World Models)

EGI 에이전트의 '두뇌' 또는 '인지적 중추' 역할을 하는 핵심 기술은 바로 '월드 모델(World Model)'이다.7 월드 모델은 에이전트가 물리 법칙을 이해하고, 자신의 행동 결과를 시뮬레이션하며, 정보에 기반한 결정을 내릴 수 있도록 지원하는 내부 시뮬레이터이다.3 월드 모델의 아키텍처는 주로 세 가지 핵심 요소로 구성된다.

 

  • 인코더(Encoder): 이미지나 센서 데이터와 같은 고차원 감각 입력을 압축하여 관련 없는 세부 정보를 걸러내고, 예측에 중요한 특징만 남긴 컴팩트한 잠재 상태(latent state) 표현으로 변환한다.7
  • 동역학 모델(Dynamics Model): 현재 상태와 가능한 행동을 기반으로 미래의 잠재 상태를 예측한다. 이는 모델의 예측 능력의 핵심이다.
  • 상상 기반 계획(Imagination-Based Planning): 학습된 동역학 모델을 사용하여 미래의 궤적과 결과를 '상상'한다. 이를 통해 에이전트는 불확실성 하에서 추론하고, 선견지명을 가지고 다단계 행동을 계획할 수 있다.6

 

월드 모델은 대규모 클라우드 기반 시뮬레이터부터 실시간 상호작용을 안내하는 소형 온디바이스 '에이전트 두뇌'에 이르기까지 이중적인 역할을 수행한다.9 이러한 내부 시뮬레이션 능력은 에이전트가 단순한 반응적 행동을 넘어 능동적이고 목표 지향적인 행동을 수행할 수 있게 하는 원동력이다.6

 

이처럼 Physical AI, Embodied AI, EGI, 월드 모델은 개별적인 개념이 아니라 하나의 일관된 연구 궤적을 형성한다. Physical AI가 거시적인 비전이라면 1, Embodied AI는 물리적 상호작용을 통해 지능을 구현하는 철학적 접근법이다.3 EGI는 지능을 클라우드에서 디바이스로 이전하여 PAI를 실용적으로 만드는 분산 아키텍처이며 6, 월드 모델은 선견지명과 계획 능력을 제공하는 핵심 구현 기술이다.7 이 통합된 경로를 이해하는 것은 해당 분야의 방향성을 명확히 파악하는 데 매우 중요하다.

 

Part II: 온디바이스 AI 기술 스택

2.1 엣지 추론을 위한 하드웨어 가속기

정교한 AI 모델을 자원이 제한된 물리적 시스템에서 실행하기 위해서는 하드웨어 가속이 필수적이다. 온디바이스 AI를 위한 주요 하드웨어 가속기는 다음과 같이 세 가지로 분류할 수 있다.

 

  • GPU (Graphics Processing Units): 병렬 처리에 탁월하여 모델 훈련에 지배적이지만, 엣지 추론 시에는 전력 소모가 큰 경향이 있다. 높은 유연성과 CUDA, TensorRT와 같은 성숙한 소프트웨어 생태계를 제공한다.11
  • NPU (Neural Processing Units): 신경망 연산을 위해 특별히 설계된 주문형 반도체(ASIC)이다. 추론 작업에서 월등한 에너지 효율(TOPS/Watt)과 낮은 지연 시간을 제공하지만, 유연성이 낮고 소프트웨어 생태계가 아직 발전 중이다.11 벤치마크에 따르면 특정 추론 워크로드에서 NPU는 GPU보다 훨씬 빠르고 전력 효율적일 수 있다.11
  • FPGA (Field-Programmable Gate Arrays): 재구성과 성능 사이의 균형을 제공한다. 배포 후에도 새로운 모델이나 작업에 최적화되도록 재프로그래밍할 수 있어, 요구사항이 변화하는 연구 및 애플리케이션에 이상적이다. 다만 프로그래밍이 더 어렵다는 단점이 있다.12

 

최근 AI 하드웨어의 주요 병목 현상은 '메모리 장벽(memory wall)'과 상호연결(interconnect) 문제이다. 칩 내부의 연산 능력(FLOPs)은 크게 향상되었지만, 데이터를 프로세서로 가져오고 내보내는 속도가 이를 따라가지 못하고 있다. 이로 인해 연구의 초점은 순수한 연산 능력에서 균형 잡힌 시스템 설계와 효율적인 데이터 이동으로 옮겨가고 있다.14

 

특성 GPU (Graphics Processing Unit) NPU (Neural Processing Unit) FPGA (Field-Programmable Gate Array)
코어 아키텍처 대규모 병렬 코어 신경망 연산에 특화된 ASIC 재구성 가능한 로직 블록
주요 사용 사례 모델 훈련, 고성능 추론 저전력, 저지연 추론 프로토타이핑, 맞춤형 워크로드
성능 지표 (TOPS) 매우 높음 중간 ~ 높음 낮음 ~ 중간
효율성 지표 (TOPS/Watt) 낮음 매우 높음 중간
지연 시간 높음 (처리량 중심) 매우 낮음 (응답성 중심) 낮음 ~ 중간 (파이프라인 가능)
전력 소비 높음 매우 낮음 낮음 ~ 중간
유연성/프로그래밍 높음 (CUDA, OpenCL) 낮음 (특정 프레임워크에 의존) 매우 높음 (VHDL, Verilog)
소프트웨어 생태계 성숙함 (NVIDIA, AMD) 성장 중 (Google, Apple 등) 전문적 (Xilinx, Intel)

 

2.2 자원 제약적 배포를 위한 소프트웨어 및 런타임

대규모 모델을 엣지 디바이스에 배포하기 위해서는 모델 최적화가 필수적이다. 주요 최적화 전략은 다음과 같다.15

 

  • 양자화(Quantization): 모델 가중치의 정밀도를 32비트 부동소수점에서 8비트 정수 등으로 낮추는 기술이다. 이를 통해 정확도 손실을 최소화하면서 모델 크기를 최대 75%까지 줄일 수 있다.13
  • 가지치기(Pruning): 훈련된 네트워크에서 불필요한 뉴런이나 연결을 제거하여 모델 크기와 연산 복잡도를 줄이는 기법이다.13

 

이러한 최적화된 모델을 실행하기 위한 경량 추론 엔진으로는 두 가지가 대표적이다.

 

  • TensorFlow Lite (TFLite): 모바일 및 임베디드 디바이스에 모델을 배포하기 위한 Google의 프레임워크이다. TensorFlow 모델을 최적화하는 변환기와 경량 인터프리터를 제공하며, 특히 ESP32와 같이 자원이 극도로 제한된 마이크로컨트롤러 환경에서 강점을 보인다.18
  • ONNX Runtime: 개방형 ONNX 모델 형식을 지원하는 크로스플랫폼 고성능 추론 엔진이다. PyTorch, TensorFlow 등 어떤 프레임워크에서 훈련하든 단일 런타임으로 배포할 수 있는 상호운용성이 가장 큰 장점이다. 그래프 최적화와 하드웨어별 실행 프로바이더(Execution Provider)를 통해 상당한 성능 향상을 제공한다.17

 

2.3 실시간 운영체제(RTOS)의 핵심적 역할

안전이 중요한 모든 물리 시스템에는 실시간 운영체제(RTOS)가 필수적이다. 리눅스와 같은 범용 OS와 달리, RTOS는 작업 실행에 대한 결정론적 보장을 제공한다. 주요 특징은 다음과 같다.

 

  • 결정성 및 예측 가능성(Determinism & Predictability): 과부하 상태에서도 작업이 특정 시간 내에 예측 가능하게 완료됨을 보장한다.23
  • 최소 지연 시간(Minimal Latency): 외부 이벤트나 인터럽트에 대한 신속한 응답을 보장하여, 빠르게 움직이는 로봇이나 항공기를 제어하는 데 매우 중요하다.23
  • 내결함성 및 안정성(Fault Tolerance & Stability): 오류 복구 및 시스템 안정성을 위한 메커니즘을 제공하여, 실패가 치명적인 결과를 초래할 수 있는 환경에서 필수적이다.23

 

로봇 공학에서 RTOS는 움직임과 센서 처리의 정밀한 제어를 보장하며, 항공우주 분야에서는 비행 제어, 항법 등 타이밍이 절대적으로 중요한 기능에 사용된다.23 VxWorks는 이러한 분야에서 널리 사용되는 고신뢰성 RTOS의 대표적인 예이다.23

 

효과적인 온디바이스 AI 시스템을 구축하는 것은 단순히 강력한 칩이나 경량 모델을 선택하는 문제를 넘어선다. 이는 하드웨어와 소프트웨어의 깊은 상호작용을 고려하는 '하드웨어-소프트웨어 공동 설계(Co-Design)'의 문제이다. 예를 들어, NPU는 저전력, 저지연 추론에 뛰어나지만 유연성이 부족하다.11 NPU를 선택했다는 것은 해당 NPU가 요구하는 모델 형식과 양자화 방식(예: INT8)을 지원하는 소프트웨어 워크플로우를 선택하는 것을 의미한다.13 또한 ONNX Runtime과 같은 추론 엔진은 특정 하드웨어에 최적화된 '실행 프로바이더'를 통해 성능을 극대화한다.22 따라서 하드웨어, 모델 아키텍처, 최적화 기법, 런타임을 하나의 통합된 시스템으로 고려하는 전체론적 접근이 실패할 경우, 하드웨어 성능을 제대로 활용하지 못하거나 모델 배포 자체가 불가능해질 수 있다.

 

Part III: 심층 분석: 휴머노이드 로보틱스

3.1 휴머노이드의 인지-예측-행동 루프

현대의 휴머노이드 제어 기술은 다중 모달 모델을 지향하고 있다. 특히 '시각-언어-행동(Vision-Language-Action, VLA)' 모델은 로봇 제어를 순차 예측 문제로 재구성하여, 로봇이 복잡한 언어 기반 명령을 이해하고 실행할 수 있게 한다.4

 

이러한 시스템의 핵심에는 월드 모델이 자리 잡고 있다. 예를 들어, DreamVLA 모델은 월드 모델을 사용하여 현재를 인지하는 것을 넘어 미래의 월드 정보(예: 미래 상태, 깊이 맵)를 예측하고, 이를 행동 정책의 지침으로 삼는다.10 이는 반응적 제어에서 예측 기반의 종단간(end-to-end) 계획으로의 전환을 명확히 보여준다. 전통적인 모션 플래닝은 연산 비용이 높지만, Realtime Robotics의 Resolver와 같은 AI 기반 솔루션은 클라우드 기반 AI를 사용하여 최적의 충돌 없는 경로를 미리 계획한다. 이를 통해 복잡한 다중 로봇 작업에서 온디바이스의 연산 부담을 극적으로 줄일 수 있다.24

 

3.2 Embodied 휴머노이드 제어의 도전 과제

휴머노이드 로봇을 제어하는 데에는 여러 가지 근본적인 어려움이 존재한다.

 

  • Sim-to-Real 격차: 시뮬레이션에서 훈련된 정책이 물리, 센서 노이즈, 액추에이터 동역학의 미묘한 차이로 인해 현실 세계에서 실패하는 문제는 로봇 공학의 오랜 난제이다. 이는 Embodied AI 연구의 주요 초점 중 하나이다.3
  • 동적이고 민첩한 움직임: 걷기, 점프, 넘어짐 완화와 같은 인간과 유사한 동적 움직임을 구현하기 위해서는 고출력 액추에이터, 높은 대역폭의 저수준 제어, 그리고 복잡한 동역학을 실시간으로 관리할 수 있는 정교한 제어 알고리즘이 필요하다.25
  • 연산 요구사항: 다중 모달 인지, 월드 모델 기반 예측, 전신 모션 플래닝의 조합은 로봇의 온보드 시스템에 막대한 연산 부담을 주며, 이는 Part II에서 논의된 효율적인 하드웨어와 소프트웨어의 필요성을 다시 한번 강조한다.27

 

VLA와 월드 모델의 등장은 로봇 공학 제어 패러다임의 근본적인 변화를 시사한다. 이는 전통적인 모듈식 파이프라인(인지, 계획, 제어 모듈이 분리된)에서 통합된 종단간 학습 정책으로의 전환이다. 전통적인 로봇 공학은 각기 다른 기능을 수행하는 독립적인 모듈들로 구성된다. 반면, VLA 모델은 언어와 시각 정보를 입력받아 행동을 출력하는 단일 모델로 작동하며, 내부 월드 모델을 중간 추론 과정에 사용한다.10 이는 제어를 '다음 토큰 예측' 문제로 간주하는 접근법과 일맥상통한다.4 이러한 변화는 지능이 인간이 설계한 여러 모듈에 분산되는 것이 아니라, 하나의 거대한 신경망 내에 학습되고 내재화됨을 의미한다. 이는 시스템을 '블랙박스'로 만들어 디버깅과 안전 보장을 더 어렵게 만드는 새로운 도전 과제를 제시하며, 대규모 훈련 데이터를 필요로 하게 되어 고충실도 시뮬레이션과 합성 데이터 생성의 중요성을 부각시킨다.

 

Part IV: 심층 분석: 항공우주 시스템

4.1 항공우주 환경의 특수한 제약 조건

항공우주 시스템에서의 온디바이스 AI는 지상 로봇과 다른, 훨씬 더 혹독한 환경에 직면한다.

 

  • 통신 문제: 위성, 심우주 탐사선, 무인 항공기(UAV)는 제한된 대역폭, 높은 지연 시간, 간헐적인 연결성 속에서 작동하므로 실시간 결정에 있어 지상 관제에 의존하기 어렵다.28
  • 크기, 무게, 전력(SWaP) 제약: 모든 그램과 와트가 중요하기 때문에, 온보드 컴퓨터는 극도로 전력 효율적이고 가벼워야 한다.29
  • 환경적 위험: 우주 공간의 전자기기는 단일 이벤트 업셋(SEU)이나 총 이온화 선량(TID) 효과를 견디기 위해 방사선 경화 처리가 되어야 하며, 이로 인해 상용 프로세서보다 성능이 수 세대 뒤처진다.32
  • 극도의 신뢰성과 안전성: 항공우주 시스템은 실패 허용 오차가 거의 없는 미션 크리티컬 시스템이므로, 극도의 신뢰성과 강력한 내결함성이 요구된다.29
  • 동적이고 예측 불가능한 조건: 위성과 UAV의 빠른 이동성은 채널 페이딩과 동적인 네트워크 토폴로지를 유발하여, 적응형 통신 및 제어 전략을 필요로 한다.28

 

4.2 자율 항공우주 작전을 위한 엣지 AI 아키텍처

이러한 제약 조건 하에서 엣지 AI는 필수적인 솔루션으로 부상하고 있다.

 

  • 온보드 데이터 처리: 차세대 센서에서 쏟아지는 데이터는 다운링크 대역폭을 포화시킬 것이므로, 원시 데이터 대신 분석 결과나 통찰을 전송하는 온보드(엣지) 처리가 반드시 필요하다.30
  • 자율 시스템을 위한 AI: 인간의 개입이 불가능한 상황에서 AI는 자율 운영을 가능하게 하는 핵심 기술이다. 주요 응용 분야는 다음과 같다.
  • 자율 항법 및 제어: 복잡한 환경을 항해하는 UAV나 우주 파편을 피하기 위해 실시간으로 경로를 수정하는 우주선에 적용된다.33
  • 예측 정비 및 상태 모니터링: AI 알고리즘이 센서 데이터를 분석하여 부품 고장을 예측함으로써 항공기나 위성과 같은 고가 자산의 안전과 수명을 보장한다.33
  • 협력 메커니즘: 위성군이나 UAV 스웜과 같은 분산 시스템에서 데이터 교환, 자원 할당, 협력적 임무 수행을 조정하기 위해 AI 기반 메커니즘이 사용된다.28
  • 경량 모델: 드론과 같은 모바일 플랫폼의 극심한 자원 제약은 경량 AI 모델의 사용을 필수적으로 만든다.36

 

항공우주 환경은 '진정한 엣지' AI의 궁극적인 시험장이라고 할 수 있다. 많은 지상 엣지 애플리케이션이 불안정한 네트워크 링크를 보완하기 위해 클라우드 연결에 의존할 수 있는 반면 38, 항공우주 시스템은 빛의 속도로 인한 지연, 심우주에서의 연결 부재 등 극단적인 통신 제약에 직면한다.28 이로 인해 화성 탐사 로버나 심우주 탐사선에 탑재된 AI는 사전 훈련된 모델을 실행하는 단순한 추론 엔진을 넘어, 수집한 새로운 데이터로부터 학습하고, 예상치 못한 상황에 적응하며, 임무를 재계획하는 완전한 자율성을 갖춰야 한다.33 따라서 항공우주 분야의 도전 과제는 엣지 AI의 경계를 '엣지에서의 추론'에서 온디바이스 학습, 계획, 적응을 포함하는 '엣지에서의 자율성'으로 확장시키고 있다.

 

Part V: 유망 기술 및 미래 방향

5.1 뉴로모픽 컴퓨팅: 뇌 모방 효율성

뉴로모픽 컴퓨팅은 폰 노이만 아키텍처 대신 인공 뉴런과 시냅스를 사용하는 '스파이킹 신경망(SNNs)'을 통해 뇌의 구조와 기능을 모방한다.39 연산이 이벤트 기반("스파이크 기반")으로 이루어지기 때문에 희소한 데이터 처리에 있어 극도로 에너지 효율적이다.41 Intel의 Loihi나 BrainChip의 Akida와 같은 뉴로모픽 하드웨어는 인지 및 제어 작업에 초저전력 처리를 제공할 것으로 기대된다. 이는 전력이 제한된 로봇과 드론에 이상적이며, 디바이스에서 직접 지속적인 실시간 학습과 적응을 가능하게 할 것이다.13

 

5.2 분산 지능을 위한 연합 학습(Federated Learning)

연합 학습은 로봇 편대나 위성군과 같은 여러 분산 장치에 걸쳐 로컬 데이터를 교환하지 않고 모델을 훈련하는 기계 학습 패러다임이다.42 오직 모델 업데이트(가중치 또는 그래디언트)만이 중앙에서 집계되므로, 데이터 프라이버시를 보호하고 대역폭 요구사항을 극적으로 줄일 수 있다.28 이 접근법은 대규모 데이터셋을 지구로 전송하지 않고 위성 네트워크 전체에 걸쳐 공유 모델을 훈련하거나 42, 로봇 편대가 민감한 데이터를 로컬에 유지하면서 집단적 경험으로부터 협력적으로 학습하는 데 이상적이다.

 

5.3 물리 법칙을 고려한 생성형 월드 모델로의 진화

월드 모델의 다음 단계는 물리 엔진과 물리 법칙을 생성 과정에 명시적으로 통합하는 것이다.43 목표는 데이터로부터 암묵적인 동역학을 학습하는 것을 넘어, 진정한 '월드 시뮬레이터'로 기능할 수 있는 고충실도의 물리 인식 월드 모델을 만드는 것이다. 이는 더 정확한 장기 예측 및 계획을 가능하게 하고, 모델의 '상상' 속에서 완전히 훈련된 정책을 현실로 제로샷(zero-shot) 전이시켜 Sim-to-Real 격차를 해소할 잠재력을 가진다.5

 

미래 기술들은 현재 기술의 핵심 병목 현상을 직접적으로 해결하는 방향으로 발전하고 있다. Part II에서 확인된 전력 소비 제약 11은 뉴로모픽 컴퓨팅의 초저전력 특성으로 해결될 수 있다.40 Part IV에서 제기된 대역폭 및 프라이버시 문제 28는 원시 데이터를 이동시키지 않는 연합 학습을 통해 해결 가능하다.42 마지막으로, Part III의 주요 난제인 Sim-to-Real 격차 3는 물리 법칙을 내재화한 월드 모델을 통해 극복될 수 있다.43 이는 기술 발전이 무작위가 아닌, 현재 패러다임의 가장 중대한 한계를 목표로 하는 문제 해결 중심의 일관된 진화임을 보여준다.

 

Part VI: 대학 연구실을 위한 실용 가이드

6.1 온디바이스 AI 개발 플랫폼

로봇 공학 연구에 가장 널리 사용되는 두 가지 플랫폼은 NVIDIA Jetson과 Google Coral이다.

 

  • NVIDIA Jetson 시리즈 (예: Orin Nano, AGX Orin): 통합 GPU를 특징으로 하는 강력한 모듈형 시스템(SoM)이다. 완전한 Ubuntu Linux 환경을 실행하며 CUDA, TensorRT, Isaac 등 풍부한 NVIDIA 소프트웨어 스택을 지원한다. 다재다능하고 강력하지만 전력 소비가 더 많다.44 유연성, 고성능, 다양한 모델(예: PyTorch) 실험이 필요한 연구에 가장 적합하다.
  • Google Coral Dev Board / USB Accelerator: TFLite 추론에 특화된 ASIC인 Edge TPU를 탑재했다. 특정 작업에 대해 매우 전력 효율적이고 빠르지만, 양자화된 TFLite 모델로 사용이 제한된다. 전력이 제한된 애플리케이션에 이미 최적화된 모델을 배포하는 데 가장 적합하다.44

 

특성 NVIDIA Jetson Orin Nano Google Coral Dev Board
코어 프로세서 통합 GPU (Ampere 아키텍처) Edge TPU (ASIC)
AI 성능 최대 40 TOPS (INT8) 4 TOPS (INT8)
전력 소비 (TDP) 7W - 15W (구성 가능) ~3W - 4W
지원 프레임워크 TensorFlow, PyTorch, ONNX, TFLite 등 TensorFlow Lite (양자화 모델 전용)
소프트웨어 생태계 성숙함 (JetPack, CUDA, TensorRT, Isaac) 제한적 (TensorFlow Lite API)
메모리 4GB 또는 8GB LPDDR5 1GB LPDDR4
비용 $399 이상 ~$149
이상적인 로봇 공학 사용 사례 자율 항법, 다중 AI 모델 실행, 연구 개발 저전력 상시 작동 센서, 단일 목적 추론

 

6.2 오픈소스 휴머노이드 로봇 플랫폼

최근 대학 연구실의 진입 장벽을 낮추는 접근성 높은 플랫폼들이 등장하고 있다.

 

  • AGILOped: 대부분 3D 프린팅으로 제작된 오픈소스 휴머노이드로, 높이 110 cm, 비용은 약 6,400 USD이다. 기성품 액추에이터와 부품을 사용하여 접근성과 유지보수성이 높다. 걷기, 점프, 넘어짐 완화와 같은 동적인 능력을 입증했다.25
  • Berkeley Humanoid Lite: 5,000 USD 미만의 비용으로 3D 프린팅하여 제작할 수 있는 또 다른 오픈소스 휴머노이드이다. 학습 기반 제어를 위해 명시적으로 설계되었으며, Sim-to-Real 격차를 줄이는 것을 목표로 Isaac Lab 시뮬레이션 환경과 긴밀하게 통합되어 있다.51

 

특성 AGILOped Berkeley Humanoid Lite
높이 110 cm 85 cm
무게 14.5 kg 22 kg
비용 (USD) ~$6,400 < $5,000
액추에이터 10개 (기성품) 모듈식 (3D 프린팅 기어박스)
주요 재료 플라스틱 (3D 프린팅), 알루미늄 3D 프린팅 부품, 금속
오픈소스 CAD, 소프트웨어 CAD, 소프트웨어 (MIT 라이선스)
핵심 설계 철학 접근성, 유지보수성, 동적 성능 학습 기반 제어, Sim-to-Real 통합
입증된 능력 걷기, 점프, 넘어짐 완화 동적 보행, 외부 충격 저항
시뮬레이션 통합 명시적 언급 없음 NVIDIA Isaac Lab과 긴밀히 통합

 

6.3 Physical AI 연구를 위한 시뮬레이션 환경

로봇 공학 연구를 위한 주요 시뮬레이션 플랫폼은 Gazebo와 NVIDIA Isaac Sim이다.

 

  • Gazebo: ROS와 긴밀하게 통합된 오랜 역사의 오픈소스 표준이다. 물리 시뮬레이션에 중점을 두며 다양한 로봇과 센서를 지원한다. 특히 공기역학 및 유체역학 지원 덕분에 UAV 및 UUV 시뮬레이션에 강점을 보인다.53
  • NVIDIA Isaac Sim: Omniverse 플랫폼 기반의 현대적인 시뮬레이터이다. 사실적인 렌더링(비전 모델 훈련에 중요), GPU 가속 물리(NVIDIA PhysX), AI 훈련 워크플로우(합성 데이터 생성, Isaac Lab)와의 깊은 통합이 강점이다. AI 기반 로봇 공학과 시각적 Sim-to-Real 격차 해소에 선호되는 선택지이다.54

 

특성 Gazebo NVIDIA Isaac Sim
주요 초점 물리 시뮬레이션, ROS 통합 사실적 그래픽, AI 훈련
물리 엔진 ODE, Bullet, DART 등 (플러그인 방식) NVIDIA PhysX (GPU 가속)
그래픽 충실도 기능적이지만 사실성은 낮음 매우 높음 (포토리얼리스틱)
ROS/ROS2 통합 매우 긴밀함 (네이티브 지원) 지원 (브릿지 통해)
AI/ML 훈련 지원 제한적 (ROS 통해 연동) 매우 강력함 (합성 데이터, Isaac Lab)
하드웨어 요구사항 중간 (CPU 중심) 높음 (NVIDIA RTX GPU 필수)
라이선스 오픈소스 (Apache 2.0) 독점 (무료 사용 가능)
휴머노이드 적합성 가능 매우 높음
항공우주/UAV 적합성 매우 높음 (공기/유체역학 지원) 가능 (물리 엔진 기반)

 

6.4 연구 로드맵을 위한 종합 및 권장 사항

본 보고서의 분석을 종합하여, 대학 연구실이 이 분야의 연구를 시작하기 위한 구체적인 '스타터 툴킷'을 제안할 수 있다. 예를 들어, 학습 기반 휴머노이드 제어 연구를 목표로 한다면 다음과 같은 조합이 이상적이다.

 

  • 하드웨어 플랫폼: Berkeley Humanoid Lite. 저렴한 비용과 시뮬레이션 및 학습 파이프라인과의 직접적인 통합이 큰 장점이다.
  • 온디바이스 컴퓨터: NVIDIA Jetson Orin Nano. 시뮬레이션에서 훈련된 복잡한 정책을 실행하는 데 필요한 강력한 GPU 가속과 성숙한 AI 소프트웨어 스택을 제공한다.
  • 시뮬레이션 및 훈련 환경: NVIDIA Isaac Sim 및 Isaac Lab. 강력한 정책을 훈련하고 Sim-to-Real 격차를 최소화하는 데 필요한 고충실도 환경과 강화 학습 프레임워크를 제공한다.

 

이 툴킷을 활용하여 다음과 같은 초기 연구 프로젝트를 수행할 수 있다. 1) 통합 플랫폼을 사용하여 다양한 Sim-to-Real 기법의 성능을 벤치마킹. 2) Jetson 플랫폼에서 보행 및 조작을 위한 월드 모델 개발 및 테스트. 3) 상위 수준의 작업 계획을 위해 VLA와 같은 생성형 AI 모델의 사용을 탐구. 이러한 접근법은 제한된 예산과 자원으로도 Physical AI 및 온디바이스 개발 분야에서 의미 있는 연구를 시작할 수 있는 구체적인 경로를 제시한다.

 

참고 자료

  1. (PDF) Physical AI: The Next Frontier of Industrial Digitalization - ResearchGate, 10월 27, 2025에 액세스, https://www.researchgate.net/publication/394791297_Physical_AI_The_Next_Frontier_of_Industrial_Digitalization
  2. Physical Artificial Intelligence: The Concept Expansion of Next ..., 10월 27, 2025에 액세스, https://arxiv.org/pdf/2105.06564
  3. Aligning Cyber Space with Physical World: A Comprehensive Survey on Embodied AI - arXiv, 10월 27, 2025에 액세스, https://arxiv.org/html/2407.06886v8
  4. Embodied AI: Emerging Risks and Opportunities for Policy Action - arXiv, 10월 27, 2025에 액세스, https://arxiv.org/html/2509.00117v1
  5. A Survey: Learning Embodied Intelligence from Physical Simulators and World Models, 10월 27, 2025에 액세스, https://arxiv.org/html/2507.00917v1
  6. Edge General Intelligence Through World Models and Agentic AI: Fundamentals, Solutions, and Challenges - ResearchGate, 10월 27, 2025에 액세스, https://www.researchgate.net/publication/394472597_Edge_General_Intelligence_Through_World_Models_and_Agentic_AI_Fundamentals_Solutions_and_Challenges
  7. Edge General Intelligence Through World Models and Agentic AI: Fundamentals, Solutions, and Challenges - arXiv, 10월 27, 2025에 액세스, https://arxiv.org/html/2508.09561v1
  8. (PDF) Internet of Agents: Fundamentals, Applications, and Challenges - ResearchGate, 10월 27, 2025에 액세스, https://www.researchgate.net/publication/391677063_Internet_of_Agents_Fundamentals_Applications_and_Challenges
  9. (PDF) A Survey of Embodied World Models - ResearchGate, 10월 27, 2025에 액세스, https://www.researchgate.net/publication/395713824_A_Survey_of_Embodied_World_Models
  10. 2507.04447v1 | PDF | Prediction | Forecasting - Scribd, 10월 27, 2025에 액세스, https://www.scribd.com/document/907624858/2507-04447v1
  11. NPU vs GPU: Guide to AI Acceleration Hardware | ServerMania, 10월 27, 2025에 액세스, https://www.servermania.com/kb/articles/npu-vs-gpu-comparison-guide
  12. A Review of Artificial Intelligence in Embedded Systems - PMC - PubMed Central - NIH, 10월 27, 2025에 액세스, https://pmc.ncbi.nlm.nih.gov/articles/PMC10220566/
  13. Optimizing Edge AI for Effective Real-time Decision Making in Robotics, 10월 27, 2025에 액세스, https://www.edge-ai-vision.com/2025/03/optimizing-edge-ai-for-effective-real-time-decision-making-in-robotics/
  14. AI Chips Overview: TPU, NPU, GPU, and FPGA - Tech News - Bizety, 10월 27, 2025에 액세스, https://bizety.com/2025/10/09/ai-chips-overview-tpu-npu-gpu-and-fpga/
  15. Empowering Edge Intelligence: A Comprehensive Survey on On-Device AI Models - arXiv, 10월 27, 2025에 액세스, https://arxiv.org/html/2503.06027v1
  16. Empowering Edge Intelligence: A Comprehensive Survey on ... - arXiv, 10월 27, 2025에 액세스, https://arxiv.org/pdf/2503.06027
  17. Unleashing ONNX Runtime: Accelerating AI on CPU and Edge ..., 10월 27, 2025에 액세스, https://medium.com/@kumarvaibhav916/unleashing-onnx-runtime-accelerating-ai-on-cpu-and-edge-devices-675ca01fdee9
  18. TensorFlow Lite: Powering Smart, Efficient AI on Mobile and Edge ..., 10월 27, 2025에 액세스, https://zindi.africa/discussions/23844
  19. TensorFlow Lite On ESP32 - OpenELAB Technology Ltd., 10월 27, 2025에 액세스, https://openelab.io/blogs/learn/tensorflow-lite-on-esp32
  20. LiteRT for Microcontrollers | Google AI Edge, 10월 27, 2025에 액세스, https://ai.google.dev/edge/litert/microcontrollers/overview
  21. Faster and Lighter Model Inference with ONNX Runtime from Cloud to Client, 10월 27, 2025에 액세스, https://learn.microsoft.com/en-us/shows/ai-show/faster-and-lighter-model-inference-with-onnx-runtime-from-cloud-to-client
  22. Performant on-device inferencing with ONNX Runtime - Microsoft Open Source, 10월 27, 2025에 액세스, https://opensource.microsoft.com/blog/2023/02/08/performant-on-device-inferencing-with-onnx-runtime/
  23. What is a Real-Time Operating System (RTOS)? | IBM, 10월 27, 2025에 액세스, https://www.ibm.com/think/topics/real-time-operating-system
  24. Realtime Robotics, 10월 27, 2025에 액세스, https://rtr.ai/
  25. AGILOped: Agile Open-Source Humanoid Robot for Research | Cool Papers, 10월 27, 2025에 액세스, https://papers.cool/arxiv/2509.09364
  26. AGILOped: Agile Open-Source Humanoid Robot for Research | Request PDF, 10월 27, 2025에 액세스, https://www.researchgate.net/publication/395418064_AGILOped_Agile_Open-Source_Humanoid_Robot_for_Research
  27. AGILOped: Agile Open-Source Humanoid Robot for Research - arXiv, 10월 27, 2025에 액세스, https://arxiv.org/html/2509.09364v1
  28. (PDF) AI-Driven Cooperative Mechanisms for Edge-Intelligent Communication Systems, 10월 27, 2025에 액세스, https://www.researchgate.net/publication/395552191_AI-Driven_Cooperative_Mechanisms_for_Edge-Intelligent_Communication_Systems
  29. AI-Driven Cooperative Mechanisms for Edge-Intelligent Communication Systems, 10월 27, 2025에 액세스, https://www.ewadirect.com/proceedings/ace/article/view/26849
  30. Satellite Edge Computing for the Internet of Things in Aerospace - ResearchGate, 10월 27, 2025에 액세스, https://www.researchgate.net/publication/336422082_Satellite_Edge_Computing_for_the_Internet_of_Things_in_Aerospace
  31. Learning Based Edge Computing in Air-to-Air Communication Network, 10월 27, 2025에 액세스, https://ntrs.nasa.gov/api/citations/20210023115/downloads/Edge_Computing_A2A_Communications_Oct%2019.pdf
  32. CSP Hybrid Space Computing | Journal of Aerospace Information Systems - AIAA ARC, 10월 27, 2025에 액세스, https://arc.aiaa.org/doi/10.2514/1.I010572
  33. On the Role of Artificial Intelligence in Aerospace Engineering ..., 10월 27, 2025에 액세스, https://www.cambridge.org/core/services/aop-cambridge-core/content/view/A69D4FABFC73CDE81FA0F4F79A4FBC5F/S000192402510050Xa.pdf/on_the_role_of_artificial_intelligence_in_aerospace_engineering_current_state_of_the_art_and_future_trajectories.pdf
  34. Two-Sided Chance-Constrained Penetration Trajectory Optimization for Unmanned Combat Aerial Vehicle | Journal of Aircraft - Aerospace Research Central, 10월 27, 2025에 액세스, https://arc.aiaa.org/doi/10.2514/1.C038395
  35. AI Reshaping the Aerospace Robotics Market - MarketsandMarkets, 10월 27, 2025에 액세스, https://www.marketsandmarkets.com/ResearchInsight/ai-impact-analysis-on-aerospace-robotics-industry.asp
  36. Lightweight and mobile artificial intelligence and immersive technologies in aviation - PMC, 10월 27, 2025에 액세스, https://pmc.ncbi.nlm.nih.gov/articles/PMC12408884/
  37. (PDF) Lightweight and mobile artificial intelligence and immersive technologies in aviation, 10월 27, 2025에 액세스, https://www.researchgate.net/publication/395237614_Lightweight_and_mobile_artificial_intelligence_and_immersive_technologies_in_aviation
  38. The Emerging Landscape of Edge-Computing. - Microsoft, 10월 27, 2025에 액세스, https://www.microsoft.com/en-us/research/wp-content/uploads/2020/02/GetMobile__Edge_BW.pdf
  39. Neuromorphic computing - Wikipedia, 10월 27, 2025에 액세스, https://en.wikipedia.org/wiki/Neuromorphic_computing
  40. Neuromorphic Robotics - Meegle, 10월 27, 2025에 액세스, https://www.meegle.com/en_us/topics/neuromorphic-engineering/neuromorphic-robotics
  41. Neuromorphic Computing: The New Frontier of Computer Science Inspired by the Human Brain - Embedded, 10월 27, 2025에 액세스, https://www.embedded.com/neuromorphic-computing-the-new-frontier-of-computer-science-inspired-by-the-human-brain/
  42. Foundational Architecture Enabling Federated Learning for Training ..., 10월 27, 2025에 액세스, https://www.biorxiv.org/content/10.1101/2025.01.14.633017v1.full-text
  43. Generative Physical AI in Vision: A Survey - arXiv, 10월 27, 2025에 액세스, https://arxiv.org/html/2501.10928v1
  44. Jetson vs Coral Edge TPU: Choosing the Right Hardware for Edge ..., 10월 27, 2025에 액세스, https://rasimmax.com/blog/jetson-vs-coral-edge-tpu
  45. Best Robotics Hardware: Boards, Sensors & Components - Articsledge, 10월 27, 2025에 액세스, https://www.articsledge.com/post/best-robotics-hardwares
  46. Benchmarking Deep Learning Models for Object Detection on Edge Computing Devices, 10월 27, 2025에 액세스, https://arxiv.org/html/2409.16808v1
  47. A Review of Embedded Machine Learning Based on Hardware, Application, and Sensing Scheme - PubMed Central, 10월 27, 2025에 액세스, https://pmc.ncbi.nlm.nih.gov/articles/PMC9959746/
  48. Coral Dev Board Vs Nvidia Jetson TX2 : r/computervision - Reddit, 10월 27, 2025에 액세스, https://www.reddit.com/r/computervision/comments/elwlba/coral_dev_board_vs_nvidia_jetson_tx2/
  49. DEPTH ESTIMATION AI INFERENCING COMPARISON OF JETSON XAVIER NX AND CORAL DEV BOARD - ResearchGate, 10월 27, 2025에 액세스, https://www.researchgate.net/publication/366450925_DEPTH_ESTIMATION_AI_INFERENCING_COMPARISON_OF_JETSON_XAVIER_NX_AND_CORAL_DEV_BOARD
  50. (PDF) AGILOped: Agile Open-Source Humanoid Robot for Research - ResearchGate, 10월 27, 2025에 액세스, https://www.researchgate.net/publication/395939903_AGILOped_Agile_Open-Source_Humanoid_Robot_for_Research
  51. Berkeley Humanoid: A Research Platform for Learning-based Control, 10월 27, 2025에 액세스, https://berkeley-humanoid.com/
  52. HybridRobotics/Berkeley-Humanoid-Lite: Codebase for ... - GitHub, 10월 27, 2025에 액세스, https://github.com/HybridRobotics/Berkeley-Humanoid-Lite
  53. Compare Gazebo vs. NVIDIA Isaac Sim in 2025 - Slashdot, 10월 27, 2025에 액세스, https://slashdot.org/software/comparison/Gazebo-vs-NVIDIA-Isaac-Sim/
  54. Top 5 Simulation Software for Robotics Development - ThinkRobotics.com, 10월 27, 2025에 액세스, https://thinkrobotics.com/blogs/learn/top-5-simulation-software-for-robotics-development
  55. Robotics simulation – A comparison of two state-of-the-art ... - ASIM GI, 10월 27, 2025에 액세스, https://www.asim-gi.org/fileadmin/user_upload_asim/ASIM_Publikationen_OA/AM180/a2033.arep.20_OA.pdf
  56. Gazebo, 10월 27, 2025에 액세스, https://gazebosim.org/
  57. Gazebo Simulation | PX4 User Guide (v1.12), 10월 27, 2025에 액세스, https://docs.px4.io/v1.12/en/simulation/gazebo
  58. Isaac Sim - Robotics Simulation and Synthetic Data Generation ..., 10월 27, 2025에 액세스, https://developer.nvidia.com/isaac/sim
  59. Robotics Simulation | Use Case - NVIDIA, 10월 27, 2025에 액세스, https://www.nvidia.com/en-us/use-cases/robotics-simulation/