Gemini Robotics ER 2, 로봇의 두뇌는 어떻게 진화했나?

제미나이 로보틱스 ER 2(Gemini Robotics ER 2)는 로봇이 단순히 움직이는 단계를 넘어, 현실 공간을 이해하고 스스로 계획하며 판단하는 체화 추론(Embodied Reasoning) 모델이다. 물리적 세계에서 장기 작업을 수행하기 위한 로봇의 두뇌 역할을 담당한다.

기존 로봇은 계획을 모두 끝낸 뒤 움직였다. 반면 Gemini Robotics ER 2는 작업을 수행하는 동안에도 다음 행동을 계속 계산한다. 즉, 움직이면서 동시에 생각하는 구조를 가진다.

Gemini Robotics 2만으로는 부족했던 이유

Gemini Robotics 2는 사람처럼 자연스럽게 움직이는 뛰어난 실행 능력을 보여주었다. 하지만 실행만으로는 복잡한 현실 문제를 해결하기 어렵다.

예를 들어 창고에서 특정 물건을 찾아 포장하는 작업은 단순히 팔을 움직이는 것으로 끝나지 않는다. 어떤 물건을 먼저 옮길지, 장애물을 어떻게 피할지, 작업 순서를 어떻게 바꿀지를 계속 판단해야 한다.

이러한 상위 수준의 계획과 추론을 담당하기 위해 등장한 모델이 바로 Gemini Robotics ER 2다.

제미나이 로보틱스 ER 2 로봇의 두뇌는 어떻게 진화했나

AI는 왜 또 하나의 두뇌를 만들었을까

기존의 로봇 AI는 사용자의 명령이 떨어지면 곧바로 팔을 뻗거나 걷는 단기 반응에 집중해 왔다. 하지만 현실 세계의 작업은 단순히 움직이는 것만으로는 해결되지 않는다.

수 분 동안 이어지는 복잡한 절차를 조율하고 변수에 대처하려면 전체 판을 읽는 상위 두뇌가 필요하다. 구글이 ER 2를 선보인 이유는 바로 이 계획과 추론의 공백을 메우기 위해서다.

Robotics 2와 Gemini Robotics ER 2는 무엇이 다른가

두 모델은 서로 다른 역할을 맡아 움직인다.

• 역할 분리: ER 2는 무엇을 해야 할지 계획을 세우는 상위 두뇌고, Robotics 2는 그 계획을 받아 모터를 구동하는 실행 계층이다.
• 추론과 행동: 직접 관절을 꺾는 것보다 상황을 이해하고 순서를 짜는 과정이 먼저 필요하기 때문에 두 모델의 체계가 나뉘어 있다.

기존 VLM과 제미나이 로보틱스 ER 2 비교

비교 항목	기존 VLM	Gemini Robotics ER 2
공간 이해	제한적	3D 공간 추론
장기 계획	제한	Long Horizon Planning
행동 계획	제한	다단계 작업 분해
성공 판단	없음	Success Detection
일반화	제한	새로운 환경 적응

여러 대의 로봇이 하나의 팀으로 협업한다

Gemini Robotics ER 2는 하나의 로봇만 똑똑하게 만드는 모델이 아니다.

여러 대의 로봇이 서로의 위치와 역할을 이해하고, 각자의 강점을 고려해 작업을 스스로 분담한다. 복잡한 작업을 하나의 로봇이 모두 수행하는 것이 아니라 여러 로봇이 협력하여 하나의 목표를 달성하도록 계획한다.

예를 들어 물류 창고에서 하나의 로봇은 선반에서 상품을 꺼내고, 다른 로봇은 이를 포장대로 운반하며, 또 다른 로봇은 포장을 완료해 출고 구역으로 이동시킬 수 있다. 작업 도중 특정 로봇에 장애가 발생하면 Gemini Robotics ER 2는 전체 작업 흐름을 다시 계산하여 다른 로봇에게 역할을 재분배하고 작업을 이어간다.

이처럼 ER 2는 개별 로봇을 제어하는 수준을 넘어, 여러 대의 피지컬 AI가 하나의 팀처럼 협력하도록 작업을 계획하고 조율하는 상위 지능을 제공한다.

공간을 이해하는 로봇의 두뇌

Gemini Robotics ER 2는 카메라에 잡힌 화면을 단순한 이미지로 보지 않는다.

물체의 정확한 위치와 거리, 주변 장애물을 입체적으로 계산해 충돌 가능성을 미리 예측한다. 로봇의 손이 들어갈 공간까지 세밀하게 산출해 내는 공간 추론 능력이 바탕이 되기 때문에 좁고 복잡한 현장에서도 길을 잃지 않는다.

단순히 컵을 보는 것이 아니라 컵 뒤의 공간, 손이 들어갈 경로, 주변 장애물까지 함께 계산한다.

생각하고 계획하는 장기 작업(Long Horizon Planning)

제미나이 로보틱스 ER 2는 사람과 자연스럽게 대화하며 작업 내용을 설명하고, 새로운 명령이 들어오면 즉시 계획을 수정한다.

복잡한 일처리는 여러 단계를 거친다.

• 컵을 찾아라
• 물을 따라라
• 쟁반에 올려라
• 사람에게 전달하라
• 빈 컵을 다시 가져와라

이처럼 긴 호흡의 명령을 받으면 Gemini Robotics ER 2는 스스로 작업을 작은 단위로 쪼개어 계획을 세운다. 작업 도중 문제가 생기면 제대로 수행되었는지 실패했는지 스스로 검증하고 수정하는 단계를 거친다.

왜 체화 지능이 중요한가

기존의 언어 모델은 텍스트로 생각을 만들고 답변을 내놓는 데 그쳤다.

반면 ER 2는 현실 공간을 직접 관찰하고 이해한 뒤 행동 계획을 세우고 실행 결과를 확인하는 루프를 돈다. 이 과정에서 ER 2가 무엇을 할지 방향을 잡으면, Robotics 2가 구체적으로 어떻게 움직일지 완성하는 유기적인 협업 구조가 만들어진다.

MCP와 연결되는 구조

LLM
↓
RAG
↓
Gemini Robotics ER 2
│
├── MCP → Google Search
├── MCP → Calendar
├── MCP → ERP
├── MCP → GitHub
└── MCP → DB

↓

Gemini Robotics 2

↓

Robot

대형 언어 모델이 판단하고 외부 지식이 공급되면, MCP가 이를 안전하게 받아 ER 2와 연결한다. Gemini Robotics ER 2가 현실을 정확히 이해하고 계획을 짜면 최종적으로 로봇의 하드웨어가 움직이는 실행 흐름이 완성된다.

외부 도구를 활용하는 체화 지능

ER 2는 내부 지식만으로 판단하지 않는다.

필요하면 Google Search를 통해 최신 정보를 검색하고, Google Calendar로 일정을 확인하며, Function Calling으로 외부 프로그램을 실행한다.

즉, 현실 세계에서 필요한 정보를 스스로 찾아 활용한 뒤 작업 계획을 수정하는 능력이 추가되었다. 이는 단순한 로봇 제어를 넘어 AI 에이전트의 특성을 로봇으로 확장한 것이다.

피지컬 AI의 진화 방향

초기의 인공지능이 단순한 언어 추론에 머물렀다면, 이제는 체화 추론을 거쳐 물리적 행동으로 확장되고 있다.

앞으로는 이 지능 체계가 MCP를 통해 외부 시스템과 맞물리고, 여러 대의 피지컬 AI가 서로 데이터를 주고받으며 협업하는 거대한 무대로 나아갈 것이다.

ER 2가 무엇을 해야 하는지 판단하는 상위 두뇌라면, VLA(Vision-Language-Action)는 그 계획을 실제 행동으로 바꾸는 실행 모델이다. ER 2가 작업 순서를 설계하면 Robotics 2의 VLA가 모터 제어 신호를 생성해 로봇의 몸을 움직인다.

피지컬 AI의 두뇌와 산업 생태계 확장

생각하는 상위 두뇌와 공간을 읽는 추론 능력이 결합하면서 로봇은 더 이상 단순한 기계 장치에 머물지 않는다. 제미나이 로보틱스 ER 2는 그 지능을 실제 행동 계획으로 치환하는 핵심 신경망 역할을 해내고 있다.

LLM이 언어 지능을 만들고, RAG가 지식을 확장했으며, MCP가 외부 세계를 연결했다면, Gemini Robotics ER 2는 현실 공간을 이해하고 행동을 계획하는 체화 지능의 두뇌를 담당한다. 앞으로 이러한 두뇌가 수많은 피지컬 AI와 결합하는 순간, 산업 생명체(Industrial Organism)의 시대는 한 걸음 더 현실에 가까워질 것이다.

---

글에서 사용한 머리 아픈 용어

• Embodied Reasoning (체화 추론): AI가 물리적 공간의 구조와 시간의 흐름을 이해하고, 작업 목표를 달성하기 위한 장기 계획을 스스로 수립하는 고차원 추론 능력이다.
• VLA (Vision-Language-Action): 시각 정보(Vision)와 언어(Language)를 통합해 로봇의 실제 행동(Action)을 생성하는 AI 모델이다. 카메라로 주변 환경을 이해하고, 사용자의 명령을 해석하여 모터 제어 신호를 만들어 낸다.
• Long Horizon Planning (장기 작업 계획): 하나의 명령을 여러 단계의 작업으로 분해하고, 작업 도중 발생하는 변수까지 고려해 장시간에 걸친 실행 계획을 스스로 수립하고 수정하는 능력이다.
• Success Detection (성공 판단): 로봇이 수행한 작업이 의도대로 완료되었는지 스스로 확인하고, 실패했을 경우 원인을 분석해 다음 행동을 결정하는 검증 기능이다.
• 산업 생명체(Industrial Organism): 산업 생명체(Industrial Organism)는 인간이 만든 지능이 물리적 신체를 얻고 현실 세계로 진출하면서 탄생한 새로운 산업적 존재다. 이들은 인간과 공존하며 인간의 행동과 문화를 학습하고, 점차 인간 문명의 일부로 성장한다.