NVIDIA介绍DGX SuperPOD的AI工厂运维智能体:NemoClaw和OpenShell上有六个领域智能体,Kubernetes检查使用只读凭据;未公布准确率,容器镜像需NGC早期访问邀请
2026年11月4日,NVIDIA开发者博客介绍了AI Factory Operations Agent:它由六个领域子智能体组成,通过聊天排查GPU集群问题,基于NemoClaw和OpenShell构建,使用本地部署的Nemotron模型,并运行在NVIDIA内部的DGX H100、B200和GB300集群上。Kubernetes访问是只读的,命令在按会话的沙箱中运行。文章没有公布根因分析准确率、SRE认同率或节省的时间。代码是Apache 2.0许可的实验性开源,但仓库说Helm图表和容器镜像需要受邀访问私有NGC注册表。
2026年11月4日,NVIDIA在开发者博客发表《NVIDIA如何用AI智能体简化AI工厂运维》,作者是Kavya G Y和Rohan Adwankar。文章介绍AI Factory Operations Agent。NVIDIA说,它是为简化自家内部DGX SuperPOD集群的运维、减少站点可靠性工程师(SRE)的手工工作而开发的。SRE不必逐个检查计算、网络、硬件和调度器的仪表盘,而是在聊天界面里提问,由各个专门的子智能体收集并关联证据。子智能体之间通过模型上下文协议(MCP)通信。页面上还有一段由NVIDIA Nemotron模型自动生成的摘要,我们没有使用,而是依据文章正文和GitHub仓库。
架构围绕NVIDIA的NemoClaw蓝图展开。面向用户的智能体运行时接收SRE的问题,并把它路由给某个领域智能体。智能体通过OpenClaw插件和MCP服务器接入基础设施,每个MCP服务器只暴露一小组经批准的运维工具。框架基于NVIDIA OpenShell构建,按文章所说可以完全在本地运行,推理由本地部署的NVIDIA Nemotron开放模型提供。NVIDIA说该框架运行在其内部的DGX H100、DGX B200和DGX GB300生产集群上。这描述的是NVIDIA自己的部署,并不是对其他用户提出的硬件要求。
部署形态是Kubernetes控制面应用。Helm把网页界面、OpenClaw网关、MCP工具服务器、推理端点和OpenShell运行时作为服务装上去。执行shell命令时,OpenShell为每个会话创建单独的Kubernetes沙箱,而不是在主网关Pod里直接运行。Kubernetes检查走服务器端的run_kubectl工具,它使用固定版本的kubectl二进制和登记过的只读凭据,OpenShell既拿不到kubectl,也拿不到Kubernetes凭据。文章展示了从智能体一侧执行kubectl auth can-i的结果:可以读取Pod和ConfigMap,不能读取Secret,也不能创建或更新Pod。这是权限边界的一个直观画面,来自一种具体配置。
文章列出六个领域智能体。作业恢复智能体检测训练失败和有效吞吐下降,并在调度器、应用、硬件和网络几层做根因分析;硬件智能体把PCIe、ECC、GPU、NVMe和温度故障定位到具体部件;可观测性智能体查询Prometheus、遥测和Grafana Loki日志,并按需生成仪表盘;研究智能体检索预加载的文档,例如NVIDIA Mission Control手册和DGX SuperPOD参考架构,团队也可以加入自己的运行手册;Kubernetes智能体提供对Pod、服务、部署、GPU资源和节点状态的只读感知;集群管理智能体通过诊断类工具与NVIDIA Base Command Manager的API协作,做建议性的工作。跨领域的MCP工具包括网络搜索、代码执行和Grafana仪表盘,团队也可以接入自己的MCP服务器。
NVIDIA总结了生产使用中的五条经验:智能体边界要清晰;先只读,用准确的调查建立信任,再谈自动化;跨层关联,找出孤立工具漏掉的原因;MCP工具要定义精确,路由才会更好;展示工具调用、证据和结论,让SRE在行动前能够核查。文章说NVIDIA通过测量根因分析的准确率和跟踪SRE的认同度来持续改进框架。但它没有公布任何准确率、认同率、事件数量或节省的时间。演示视频被描述为注入到DGX集群里用于内部演示的一次事件。
可用性需要仔细读,因为两个来源强调的点不同。文章把这套编排框架称为实验性开源软件,API、配置和部署要求在版本之间可能变化,并指向GitHub仓库。仓库使用Apache 2.0许可证,同样称之为实验性发布,并补充说在早期访问阶段,已发布的Helm图表和容器镜像需要受邀访问一个私有的NGC注册表,仅登录nvcr.io并不能获得拉取权限。它列出的要求是Kubernetes、kubectl和Helm 3,模型可用兼容OpenAI的端点或图表托管的vLLM,只有部署这个vLLM时才需要GPU。另外,文章说NVIDIA的客户可以向客户经理申请使用NVIDIA开发的集群运维智能体。README还列出文章没有点名的工作流,例如Slurm作业分析和VictoriaMetrics查询,以及四种接口:浏览器界面、HTTP API、命令行客户端和面向编码智能体的MCP桥。
对于多租户集群,文章描述了按范围划分的智能体、工具、沙箱和Kubernetes权限:租户的SRE只能看到自己的命名空间、作业和节点,中央运维保留更广的视野,由OpenShell实施内核级限制。它建议使用与生产集群隔离的、带GPU加速的专用控制面,让智能体的推理不占用训练用GPU,并为较小的部署提到RTX PRO工作站或DGX Spark。
我们的判断:这是一家厂商介绍自家内部工具的架构与经验文章。设计选择具体且可复用,包括只读凭据、按会话的沙箱和狭窄的MCP工具,但没有可衡量的结果来对照投入。考虑采用的团队应把获取容器镜像的权限当作一道关卡,并先在非生产集群上测试。
Sources
FAQ
NVIDIA公布了这个智能体的准确率或节省时间的数字吗?
没有。文章说NVIDIA在改进框架时会测量根因分析准确率并跟踪SRE的认同度,但没有给出准确率、认同率、事件数量或节省的时间。演示视频是注入DGX集群的内部演示事件,所以文章提供的是设计经验,不是实测结果。
现在任何人都能部署AI Factory Operations Agent吗?
代码以Apache 2.0许可作为实验性开源放在GitHub。但仓库说,已发布的Helm图表和容器镜像需要受邀访问私有NGC注册表,仅登录nvcr.io没有拉取权限。API、配置和要求在版本之间可能变化。
这个智能体对集群有写权限吗?
展示的Kubernetes检查里没有:run_kubectl用只读凭据,can-i输出允许读Pod和ConfigMap,拒绝读Secret及创建、更新Pod。shell命令在按会话的OpenShell沙箱中运行,文章建议先只读调查再自动化。