딥마인드, Gemini Robotics ER 2 공개: 실시간 3D 공간 영상 추론 기반 다중 로봇 자율 협업 시스템

피지컬 AI의 협동 장벽: 단일 로봇 조작에서 군집 자율 협업으로의 도약

현대 스마트 공장과 최첨단 물류 인프라 전반에서 단일 로봇의 작업 능력은 괄목할 만한 발전을 이룩했습니다. 단순 부품 피킹이나 규격화된 물품 검사 등은 이미 고도화된 자동화가 이루어졌지만, 실제 제조업의 핵심을 구성하는 고난도 공정—항공기 대형 동체 접합, 고정밀 변속기 동축 조립, 복합 물류 팔레트의 동적 적재 등—은 서로 다른 기계적 형태와 관절 구조를 가진 여러 대의 로봇이 물리적으로 정밀하게 힘과 궤적을 일치시키는 복합 협업을 필연적으로 요구합니다. 그러나 기존의 다중 로봇 자동화 라인은 프로그래머블 로직 컨트롤러(PLC) 기반의 강성 하드코딩과 고비용의 결정론적 시퀀스 제어에 전적으로 의존해 왔습니다. 부품 위치가 수 밀리미터만 어긋나거나 네트워크 지연이 발생해도 전체 라인이 멈추거나 장비 간 물리적 충돌이 발생하는 치명적인 취약점을 안고 있었습니다.

이러한 산업적 한계를 근본적으로 타파하기 위해, 구글 딥마인드는 물리 세계 인공지능의 최전선을 상징하는 혁신적 아키텍처인 'Gemini Robotics ER 2(Embodied Reasoning 2)'를 공식 발표했습니다. 이번 발표는 개별 로봇이 고립된 환경에서 폐쇄적인 동작을 수행하던 기존 방식을 넘어, 통합된 멀티모달 파운데이션 모델이 작업장 전체의 3차원 물리 공간을 실시간으로 추론하고 자율적인 군집 협동을 이끌어내는 새로운 시대로의 진입을 의미합니다.

핵심 기술 구조: 실시간 3D 공간 비디오 스트리밍과 계층적 편성 체계

Gemini Robotics ER 2의 엔지니어링 정수는 고성능 엣지 서버에서 구동되는 '거시적 공간 추론 뇌'와 각 로봇 단말에 탑재된 '미시적 고주파 서보 소뇌'로 분리된 2단계 계층 제어 토폴로지에 있습니다.

상위 인지 계층에서는 딥마인드의 최첨단 스트리밍 비디오 공간 표현 모델이 작동합니다. 공장 천장에 설치된 전역 광각 카메라, 이족보행 휴머노이드 머리의 스테레오 비전, 이동형 로봇 매니퓰레이터 손목에 장착된 초근접 카메라 등에서 전송되는 다양한 앵글의 영상 피드를 60Hz 속도로 실시간 융합 처리합니다. 단순히 2D 스틸 컷을 연속 처리하는 기존 방식을 탈피하여, ER 2는 공간 내 모든 물체와 로봇의 움직임을 연속적인 '4D 동적 장면 기하 그래프(4D Dynamic Spatial Scene Graph)'로 실시간 재구성합니다. 각 로봇의 관절 자유도, 엔드이펙터 속도 벡터, 부품의 3차원 외형 및 중력과 마찰력 계수가 단일한 물리 좌표계 안에 정밀하게 통합 투영됩니다.

하위 협동 제어 계층에서는 복잡한 통신 메시지 교환 프로토콜을 완전히 제거하고, 상대방의 물리적 모션을 직접 관찰하여 의도를 파악하는 '시각적 의도 동기화' 기법을 도입했습니다. 작업 관리자가 "메인 프레임을 조립대에 수평 거치하고 보조 로봇 팔로 네 모서리를 체결하라"는 자연어 명령을 내리면, 공간 모델은 수 밀리초 내에 목표를 개별 로봇의 국소 행동 원형으로 분해합니다. 로봇들은 디지털 통신 신호를 주고받지 않고도 상대 로봇의 미세한 관절 기울기와 하중 변화를 시각적으로 감지하여 모터 토크를 10밀리초 이내에 자동 분산 조절함으로써 완벽한 팀워크를 발휘합니다.

극한 산업 환경 실증: 제로샷 정밀 조립과 자율 회복 탄력성

딥마인드가 공개한 실제 공장 환경 실증 데이터에서 Gemini Robotics ER 2는 경이로운 적응력을 입증했습니다. 사전 CAD 3차원 데이터가 전혀 제공되지 않은 상태에서 이족보행 휴머노이드 1대, 전방향 이동형 매니퓰레이터 2대, 정밀 데스크톱 로봇 팔 1대로 구성된 이기종 로봇 팀이 고중량 트랜스미션 하우징의 전 공정 조립을 완벽히 마쳤습니다.

실험 과정에서 연구진이 무작위로 부품 트레이를 이동시키거나 주요 카메라 시야를 차단하고, 조립 중인 로봇 팔을 물리적으로 강하게 밀치는 등 거친 외란을 가했음에도 시스템은 뛰어난 작업 복원력을 보여주었습니다. 시야가 가려진 로봇은 동료 로봇의 이동 궤적을 분석하여 부품 위치를 역추산했고, 충격을 받은 로봇 팔은 즉각 반발력을 완화한 뒤 10밀리초 내에 파지력을 재조정하여 작업 중단 없이 전체 공정을 완수했습니다.

글로벌 제조 및 로보틱스 산업의 대전환

Gemini Robotics ER 2의 출시는 체화 인공지능이 실험실의 데모 수준을 완전히 뛰어넘어 실제 고난도 제조 현장의 기간 인프라로 안착했음을 입증합니다. 수주일 이상 소요되던 복합 로봇 라인의 캘리브레이션 및 궤적 프로그래밍 작업이 단 몇 시간의 비디오 시연과 자연어 대화만으로 대체될 수 있게 되었습니다.

풍부한 물리적 직관과 공간 인지 능력을 겸비한 로봇 군집이 인간 장인들처럼 능숙하게 협업하는 시대는 전 세계 제조업의 유연 생산성을 극대화하고, 위험 작업의 완전한 무인화를 실현하는 핵심적인 기술 토대가 될 것입니다.