Isaac ROS 5.0 공개: AI 에이전트가 로봇 개발 현장으로 들어왔다

Published · AI Daily — AI-assisted deep research, methodology & disclosure

NVIDIA가 ROSCon 토론토에서 Isaac ROS 5.0을 공개했다. ROS Lyrical과 Ubuntu 24.04를 지원하고, 에이전트용 스킬과 문서를 더했으며, FoundationPose 추론은 최대 5.5배 빨라졌다. RealSense, Intrinsic, Seeed, Magna 등이 함께한다.

2026년 9월 22일, NVIDIA는 캐나다 토론토에서 열린 ROSCon에서 Isaac ROS 5.0을 공개했다. Isaac ROS는 ROS 위에 구축된 GPU 가속 패키지 모음이다. ROS는 Open Robotics가 이끄는 개방형 프레임워크로, 로봇 애플리케이션을 만들고 연결하는 데 쓰는 공통 도구, 라이브러리, 표준을 제공한다. NVIDIA는 ROS 사용자를 약 130만 명으로 본다. 이번 릴리스의 메시지는 분명하다. 사람과 AI 에이전트가 함께 로봇을 만들도록 돕는다는 것이다. 이전 버전은 인식과 계획 노드를 얼마나 빠르게 돌리느냐에 무게를 두었다. 이번에는 개발 작업을 누가, 또는 무엇이 하는가로 질문이 바뀌었다. 이 변화는 성능 수치 하나보다 무겁다. 로봇 소프트웨어가 어떻게 실행되는지뿐 아니라 어떻게 만들어지는지를 바꾸기 때문이다.

먼저 플랫폼 계층을 보자. Isaac ROS 5.0은 ROS Lyrical과 Ubuntu 24.04를 지원한다. 개발자는 최신 ROS 플랫폼으로 옮겨 갈 길을 얻고, 부하가 큰 작업은 계속 NVIDIA 가속 컴퓨팅으로 처리할 수 있다. 더 오래 영향을 미칠 기여도 있다. NVIDIA는 Open Source Robotics Alliance와 협력해 표준 데이터 처리 인터페이스를 ROS Lyrical에 기여했다. GPU를 포함한 서로 다른 컴퓨팅 하드웨어에서 로봇 소프트웨어가 데이터를 효율적으로 다루도록 돕는 장치이며, CUDA가 GPU 가속의 동작 예시로 제공된다. 이 인터페이스는 ROS 커뮤니티 전체에 열려 있고 NVIDIA 제품에 묶이지 않는다. 가속을 비공개 확장으로 두지 않고 공유 표준으로 만들면 생태계가 갈라질 위험이 줄고, 다른 하드웨어 업체도 같은 약속에 맞춰 참여할 수 있다. 로봇 코드베이스를 수년간 유지하는 팀에게 공통 데이터 경로는 접착 코드가 줄고 이전 비용을 예측하기 쉬워진다는 뜻이다.

이번 릴리스에서 가장 두드러진 부분은 에이전트 기반 개발 지원이다. AI 에이전트는 반복 작업을 자동화하고, 복잡한 코드베이스를 탐색하도록 돕고, 아이디어를 동작하는 애플리케이션으로 더 빨리 옮기면서 소프트웨어 개발 방식을 이미 바꾸고 있다. Isaac ROS 5.0은 이 능력을 로봇 개발로 가져온다. NVIDIA는 설정과 조작을 위한 새로운 Isaac 스킬을 추가했다. 개발자와 에이전트가 모두 개발 작업을 마치는 데 쓸 수 있는 재사용 가능한 워크플로다. 에이전트 대응 문서 덕분에 에이전트가 Isaac ROS의 도구와 절차를 이해하기 쉬워지고, 개발자의 의도가 동작하는 애플리케이션으로 더 빨리 바뀐다. 일부 스킬은 개별 코딩 작업을 돕는 수준을 넘는다. 새 FoundationStereo 미세 조정 스킬은 에이전트가 스테레오 인식 모델을 개발자의 카메라, 환경, 용도에 맞추도록 도와, 주어진 센서 구성에서 더 정확한 인식을 얻게 한다. 물체 자세 추정과 추적의 기반 모델인 FoundationPose는 이제 에이전트 대응 추론 라이브러리를 제공하며, 로봇이 물체의 위치와 방향을 최대 5.5배 빠르게 인식하고 추적한다. 검출, 깊이 추정, 자세 출력을 잇는 흔한 작업인 픽 앤 플레이스도 독립형 에이전트 대응 스킬이 되어 Isaac ROS 밖에서도 유연하게 쓸 수 있다.

파트너들의 움직임은 이 접근이 홍보 문구 하나에 그치지 않음을 보여 준다. 3D 인식 기업 RealSense가 후원하는 오픈소스 프로젝트 AgenticROS는 Isaac ROS를 NVIDIA Nemotron 오픈 모델 및 NemoClaw 블루프린트와 연결해 AI 에이전트가 ROS 기반 로봇과 상호작용하게 한다. RealSense는 D585 Pro를 포함한 최신 AI 네이티브 3D 스테레오 깊이 카메라와 오픈소스 소프트웨어 개발 키트를 Isaac ROS와 Jetson Thor 엣지 AI 플랫폼에 맞게 최적화하고 있다. Intrinsic은 산업용 로봇을 위한 사전 구성 런타임 서비스 모음인 오픈소스 Intrinsic Core를 공개했다. 여기에 포함된 Open Machine Tending Solution은 CNC 공작기계 작업 보조(머신 텐딩)의 참조 애플리케이션이며, FoundationPose와의 호환이 내장되어 물체 등록, 추적, 자세 추정을 바로 쓸 수 있다. 로봇이 부품을 동적으로 감지하고 다룰 수 있어 딱딱하고 비싼 고정구와 특수 시스템 통합에 대한 의존이 줄어든다. Seeed Studio는 Jetson Thor에서 Isaac ROS를 reBot Arm과 결합해 가속 인식, 공간 이해, 동작 계획을 묶고, 물체 위치 파악부터 충돌을 고려한 조작, 자율 픽 앤 플레이스까지 다룬다. Magna는 Isaac ROS를 모듈형 GPU 가속 기반으로 삼아 로봇 인식, 동기화된 데이터 수집, Isaac GR00T 모델 배포에 쓰고, Isaac Sim의 하드웨어 인 더 루프 시험을 함께 사용한다.

여기서 세 가지 해석과 몇 가지 단서가 나온다. 첫째, 로봇 개발의 병목이 알고리즘에서 엔지니어링으로 옮겨 가고 있다. 환경 구축, 센서 적응, 인식과 동작 계획의 연결에는 시간과 숙련이 든다. 이를 에이전트가 실행할 수 있는 스킬로 묶으면 아이디어에서 시제품까지의 거리가 줄어든다. 둘째, 개방성과 가속의 결합은 지켜볼 만하다. ROS Lyrical의 데이터 인터페이스는 공유 인프라가 될 수 있지만, FoundationPose와 FoundationStereo 같은 모델과 Jetson 플랫폼은 여전히 NVIDIA가 제공한다. 종속의 정도는 팀이 이들을 얼마나 깊이 채택하느냐에 달려 있다. 셋째, 에이전트가 로봇 코드를 쓰면 책임의 문제가 새로 생긴다. 로봇은 물리 세계에서 움직이므로 에이전트가 만든 설정 오류가 실제 충돌이나 라인 정지로 이어질 수 있다. Magna가 쓰는 Isaac Sim 방식처럼 시뮬레이션과 하드웨어 인 더 루프 시험은 건너뛸 수 없는 단계가 된다. 5.5배 같은 수치는 공급사의 발표이며 '최대'라는 조건이 붙는다는 점도 기억해야 한다. 도입하는 쪽은 자체 하드웨어와 작업에서 다시 측정해야 한다. 종합하면 Isaac ROS 5.0의 가치는 개별 기능보다 에이전트, 개방형 표준, 엣지 하드웨어를 하나의 전달 경로에 올려놓았다는 데 있다. 체화된 AI의 엔지니어링에 분명한 기준점을 제공한다.

Sources

FAQ

Isaac ROS 5.0에서 말하는 '에이전트형'이란 무엇인가요?

로봇 개발 작업을 재사용 가능한 스킬로 묶고, AI 에이전트가 읽을 수 있는 문서를 함께 제공한다는 뜻입니다. NVIDIA는 환경 설정, 조작(manipulation), FoundationStereo 미세 조정, 독립형 픽 앤 플레이스 스킬을 소개했습니다. 개발자가 의도를 말하면 에이전트가 스킬을 이용해 구성하고 구현합니다.

NVIDIA 하드웨어를 쓰지 않는 ROS 사용자에게도 의미가 있나요?

있습니다. NVIDIA는 Open Source Robotics Alliance와 협력해 표준 데이터 처리 인터페이스를 ROS Lyrical에 기여했습니다. GPU를 포함한 다양한 컴퓨팅 하드웨어에서 로봇 소프트웨어가 효율적으로 동작하도록 돕고, ROS 커뮤니티 전체에 열려 있습니다. CUDA는 동작하는 예시로 제공됩니다. 픽 앤 플레이스 스킬은 Isaac ROS 밖에서도 쓸 수 있습니다.

FoundationPose의 5.5배라는 수치는 어떻게 읽어야 하나요?

NVIDIA에 따르면 새 에이전트 대응 추론 라이브러리로 로봇이 물체의 위치와 방향을 최대 5.5배 빠르게 인식하고 추적합니다. '최대'는 상한이지 보장이 아닙니다. 실제 이득은 하드웨어, 장면, 설정에 따라 달라지므로 자체 작업에서 측정해 보아야 합니다.