返回顶部
返回首页 会员充值 我的足迹 返回上一页
具身智能
情绪经济
商业航天
十五五
银发经济

物理生成式AI应用场景

AI的下一个浪潮不是生成更逼真的图片或文本,而是理解并操作物理世界。申万宏源最新报告指出,物理生成式AI正成为AI产业的下一个战略高地。Nvidia CEO黄仁勋在Computex 2024演讲中强调,“AI的新一波浪潮是物理AI,AI能够理解物理定律。”物理AI现阶段涵盖两个层次:将物理AI模型集成在自主机器中执行现实操作,以及生成符合物理规律的数据供模型训练。本文从技术架构、应用场景、产业工具链三个维度,全面解析物理生成式AI的发展趋势与投资机遇。

物理AI——AI从数字世界走向物理世界的战略跃迁

现有生成式AI模型(GPT、Llama等)基于互联网海量文本和图像数据训练,在生成人类语言和抽象概念方面已满足需求,但受限于训练数据,对物理世界的理解有限,因此会出现不符合现实规律的“扭曲”图像。物理AI能够理解三维世界的空间关系和物理行为,核心是“数据+理解”。通过AI训练过程中提供更多物理数据(包含与现实世界空间关系和物理规则有关信息)来实现。物理AI与物理世界融合的两个层次:第一层是将物理AI模型集成在机器人、自动驾驶等自主机器中,帮助自主机器感知、理解并在现实世界中执行复杂操作;第二层是运用生成式AI能力创造输出更多数据(构成物理体、物理场等)供模型大量训练,突破真实数据不足的瓶颈。物理AI实现的难点在于建立可靠的物理模拟环境,自主机器需要在准确的物理环境中进行训练,这可以提高机器人执行复杂任务时的效率和准确性。此外,由于自主机器执行任务过程中会受外部不可控干扰,需要即时的符合物理规则的反馈。物理AI的本质是从“生成内容”到“生成物理交互”的范式跃迁,将对机器人、智能制造、自动驾驶等行业产生深远影响。
物理AI两大层次对比
层次核心能力技术实现应用场景
第一层自主机器感知与执行物理AI模型集成于机器人/自动驾驶机器人操作、自动驾驶决策
第二层合成数据生成生成式AI创造符合物理规律的数据模型训练数据扩充

核心应用场景——机器人仿真与智能驾驶验证

机器人和智能驾驶是物理AI现阶段最核心的两大应用场景。按照Nvidia的设想,机器人技术需要三台计算机:一台用于训练AI,一台用于在精确物理模拟环境中测试AI,另一台安装在机器人内部。模拟环境测试和机器人内部均需要物理AI支持。安全调试是机器人仿真的本质需求,多足机器人、人形机器人移动速度快,会与环境频繁交互碰撞,真实环境直接调试成本高且存在安全风险,需在虚拟环境中集中测试验证。机器人开发的两大需求均需通过物理AI满足:在仿真环境中验证机器人程序逻辑,以及获取真实世界中不易得到的数据进行持续训练。智能驾驶场景与机器人高度相似:在仿真环境中验证智能驾驶程序逻辑,获取真实世界不易得到的边缘场景数据进行训练。传感器套件和软件必须在真实驾驶场景中经过广泛测试验证,若仅依靠实际道路测试可能需要数十亿英里。算法迭代速度取决于高保真、可扩展的仿真环境。Ansys AVxcelerate Sensors已可通过NVIDIA Omniverse进行访问,凭借面向摄像头、激光雷达和雷达传感器的可预测物理求解器,增强NVIDIA DRIVE Sim高保真3D环境。

Nvidia物理AI工具链——Omniverse+DGX+Jetson的完整闭环

Nvidia已建立相对完整的物理AI使用流程,形成软硬一体化的下一代“软核心”布局。第一步:构建虚拟3D环境(Omniverse)。Omniverse提供众多API、SDK,开发者基于CAE、CAD等软件厂商能力在平台上构建物理场景,通过RTX渲染集成到仿真流程。第二步:生成和合成数据(Omniverse Replicator)。Replicator提供内置域随机化功能,允许在3D仿真过程中更改众多物理参数,使用ControlNet扩散模型进一步增强生成图像。第三步:训练验证(DGX)。NVIDIA DGX平台是全集成式硬件和软件AI平台,与基于物理的数据结合使用,通过TensorFlow、PyTorch等框架及NGC上预训练模型来训练或调优AI模型,训练后使用NVIDIA IsaacSim等参考应用进行仿真验证。第四步:部署(下一代机器人设备)。将优化堆栈部署到NVIDIA Jetson Orin及即将推出的Jetson Thor机器人超级计算机上,为类人型机器人或工业自动化系统赋能。该工具链使开发者差异化的核心体现在算法优势和数据质量。物理AI的发展为人形机器人、智能驾驶、工业自动化提供了完整的技术路径。Nvidia通过Omniverse平台链接外部CAE/CAD软件,提供虚拟场景构建和数据整合能力,最终实现硬件销售的核心目标。

H3:合成数据——破解物理AI训练数据瓶颈的关键

创建准确的物理AI模型需要大量数据,使用计算机仿真从数字孪生生成的合成数据能够有效替代现实世界数据集。获取现实世界数据集进行模型训练可能成本非常高昂,有时甚至不可能获得(如极端天气下的自动驾驶场景、机器人故障边缘场景)。借助NVIDIA NIM微服务和Omniverse Replicator等工具,开发者能够加速创建可靠、多样化的数据集来训练物理AI,这有助于增强VLM等模型的适应能力和性能。Replicator具有内置域随机化功能,允许在3D仿真过程中更改众多物理参数,还可以使用采用ControlNet的扩散模型来进一步增强生成的图像。合成数据生成能力正在成为物理AI产业的关键竞争力,具备物理求解能力和数据积累的CAE/CAD厂商有望在物理AI时代占据核心地位。
点击阅读报告原文: 计算机行业“智”造TMT系列之二十七暨CAE系列深度之四:Nvidia Omniverse物理生成式AI入口下一代“软核”-241211(21页)
相关报告