隨著工業(yè)自動(dòng)化進(jìn)程加速,工廠正日益依賴(lài)先進(jìn)機(jī)器人技術(shù)來(lái)提升生產(chǎn)力和運(yùn)營(yíng)韌性。在工業(yè)環(huán)境成功部署機(jī)器人的關(guān)鍵在于精準(zhǔn)運(yùn)動(dòng)規(guī)劃、精確空間感知及可靠避障等能力。AI 驅(qū)動(dòng)的機(jī)器人技術(shù)與軟件定義的自動(dòng)化有助于提高工廠的自動(dòng)化、可擴(kuò)展性和抗風(fēng)險(xiǎn)能力,高性能機(jī)器人軟件已成為現(xiàn)代制造業(yè)不可或缺的核心要素。
這篇文章將探討NVIDIA Isaac Manipulator中的 cuMotion、nvblox、FoundationPose 和 FoundationStereo 等軟件庫(kù)與 AI 模型如何顯著優(yōu)化 AI 機(jī)械臂的功能。這些先進(jìn)的 GPU 加速工具提供實(shí)時(shí)運(yùn)動(dòng)規(guī)劃、精確環(huán)境建圖及高精度立體視覺(jué)感知,使制造商能夠以最小集成復(fù)雜度快速部署復(fù)雜自動(dòng)化解決方案。
利用 NVIDIA Isaac Manipulator優(yōu)化機(jī)器人機(jī)械臂
Isaac Manipulator 是一款全面的軟件解決方案,它借助 NVIDIA 先進(jìn)的 GPU 加速軟件工具,簡(jiǎn)化了機(jī)器人機(jī)械臂功能的部署流程。該方案通過(guò)以下工具,將復(fù)雜的機(jī)器人功能整合到工業(yè)工作流中:
cuMotion:GPU 加速的運(yùn)動(dòng)規(guī)劃
cuMotion 提供基于 GPU 的強(qiáng)大運(yùn)動(dòng)規(guī)劃、軌跡生成和逆運(yùn)動(dòng)學(xué)計(jì)算能力。該技術(shù)能顯著加速機(jī)械臂的實(shí)時(shí)操作,在復(fù)雜環(huán)境中快速生成無(wú)碰撞運(yùn)動(dòng)軌跡,為工業(yè)機(jī)器人應(yīng)用提供至關(guān)重要的高精度與高可靠性保障。
nvblox:動(dòng)態(tài)實(shí)時(shí) 3D 建圖
nvblox 為機(jī)器人機(jī)械臂提供實(shí)時(shí) 3D 地圖構(gòu)建功能,實(shí)現(xiàn)動(dòng)態(tài)空間感知和精確環(huán)境理解。這項(xiàng)技術(shù)使機(jī)器人能夠準(zhǔn)確感知復(fù)雜多變的環(huán)境并進(jìn)行導(dǎo)航,同時(shí)提高避障能力,確保操作流程的安全性。
FoundationPose:強(qiáng)大可擴(kuò)展的 6D 位姿估計(jì)
FoundationPose 通過(guò) RGB-D 輸入提供先進(jìn)的 6D 位姿估計(jì)能力,對(duì)光照條件、反射及多樣物體幾何形態(tài)具有卓越的魯棒性。語(yǔ)言模型可以借助海量的互聯(lián)網(wǎng)文本進(jìn)行訓(xùn)練,但是物理 AI 模型的訓(xùn)練完全不同,其最大的挑戰(zhàn)之一在于缺乏真實(shí)世界數(shù)據(jù)。為克服此難題,NVIDIA 團(tuán)隊(duì)使用 Isaac Sim 在計(jì)算機(jī)上生成超 500 萬(wàn)張合成圖像,隨后僅用數(shù)天時(shí)間在另一臺(tái)計(jì)算機(jī)的 V100 GPU 上完成 FoundationPose 訓(xùn)練。最終得到的是一個(gè)零樣本模型,無(wú)需訓(xùn)練或微調(diào),可泛化至各種新物體,且開(kāi)箱即可使用。
FoundationStereo:精準(zhǔn)立體視覺(jué)感知
FoundationStereo 提供強(qiáng)大的立體視覺(jué)能力,這對(duì)高精度深度估計(jì)至關(guān)重要。精確感知保障了與周邊環(huán)境的可靠交互,使機(jī)械臂能在復(fù)雜、雜亂或動(dòng)態(tài)的工業(yè)場(chǎng)景中準(zhǔn)確執(zhí)行任務(wù)。FoundationStereo 基于海量合成數(shù)據(jù)訓(xùn)練,即使采用英特爾 RealSense 等經(jīng)濟(jì)型傳感器,仍然能顯著提升深度感知質(zhì)量。這一技術(shù)的有關(guān)論文獲得 2025 年 CVPR 最佳論文提名(共有超過(guò) 10,000 篇論文投稿,其中僅有 14 篇獲得最佳論文提名)。
Vention MachineMotion AI
Vention MachineMotion AI 是一款先進(jìn)的自動(dòng)化控制器,旨在將 AI 驅(qū)動(dòng)的機(jī)器人技術(shù)無(wú)縫集成到工業(yè)工作流中。該控制器利用NVIDIA Jetson Orin并內(nèi)置蜂窩連接功能,可實(shí)現(xiàn)機(jī)器人單元的快速部署、高效邊緣計(jì)算和遠(yuǎn)程操作,從而最大限度地降低基礎(chǔ)設(shè)施要求和復(fù)雜性。
MachineMotion AI 的主要應(yīng)用包括:
基于邊緣的機(jī)器人抓取放置
MachineMotion AI 利用 Jetson Orin模塊的強(qiáng)大邊緣處理能力,可直接在機(jī)器人單元內(nèi)實(shí)現(xiàn)實(shí)時(shí)物體檢測(cè)和定位,顯著降低延遲并消除對(duì)外部處理資源的依賴(lài)。
遠(yuǎn)程診斷與監(jiān)控
MachineMotion AI 利用內(nèi)置蜂窩連接功能,使工程師能夠遠(yuǎn)程監(jiān)控機(jī)器人性能、執(zhí)行診斷操作并更新軟件組件,而無(wú)需現(xiàn)場(chǎng)干預(yù)。
柔性裝配線
MachineMotion AI 使制造商能夠快速重新配置機(jī)器人單元以適應(yīng)多樣化任務(wù),這得益于其直觀的低代碼軟件界面以及由 Jetson Orin 平臺(tái)上運(yùn)行的 Isaac Manipulator 提供的 GPU 加速運(yùn)動(dòng)規(guī)劃能力。這種靈活性確保生產(chǎn)線能夠快速適應(yīng)不斷變化的產(chǎn)品規(guī)格和市場(chǎng)需求。
利用 Jetson Orin,MachineMotion AI 簡(jiǎn)化并加速了可擴(kuò)展、可靠的 AI 驅(qū)動(dòng)機(jī)器人系統(tǒng)的部署。該解決方案顯著增強(qiáng)了 NVIDIA Isaac 軟件能力,并為敏捷工業(yè)自動(dòng)化戰(zhàn)略提供支持。
系統(tǒng)架構(gòu)
該機(jī)器人部署系統(tǒng)架構(gòu)在工業(yè)抓取放置場(chǎng)景中整合了 Isaac Manipulator 與 Vention MachineMotion AI 硬件,由三個(gè)協(xié)同實(shí)現(xiàn)高性能實(shí)時(shí)自動(dòng)化的核心層級(jí)組成:
感知層
深度感應(yīng)攝影頭捕獲 RGB-D 輸入用于物體檢測(cè)與位姿估計(jì)。NVIDIA FoundationPose加速這些感知任務(wù),并在 Jetson Orin 硬件上直接執(zhí)行,提供響應(yīng)迅速且精準(zhǔn)的環(huán)境感知能力。當(dāng)使用英特爾 RealSense 等低成本傳感器時(shí),F(xiàn)oundationStereo 可基于立體圖像顯著提升深度質(zhì)量。
規(guī)劃與控制層
cuMotion 利用位姿數(shù)據(jù)計(jì)算無(wú)碰撞運(yùn)動(dòng)軌跡,并為機(jī)械臂求解逆運(yùn)動(dòng)學(xué)。GPU 加速架構(gòu)確保在動(dòng)態(tài)工業(yè)環(huán)境中實(shí)現(xiàn)低延遲、平滑且精確的運(yùn)動(dòng)規(guī)劃。
執(zhí)行與邊緣控制層
Vention MachineMotion AI 作為邊緣控制器,利用 cuMotion 生成運(yùn)動(dòng)軌跡。它與機(jī)器人、執(zhí)行器、傳感器及網(wǎng)絡(luò)通信層對(duì)接,在生產(chǎn)單元層級(jí)管理實(shí)時(shí)機(jī)器人操作,并內(nèi)置遠(yuǎn)程診斷與更新支持。
該模塊化架構(gòu)支持靈活可擴(kuò)展的工業(yè)自動(dòng)化,通過(guò) GPU 加速和邊緣控制,在嚴(yán)苛生產(chǎn)環(huán)境中提供穩(wěn)健性能。
隨機(jī)箱揀選系統(tǒng)
該集成系統(tǒng)的代表性應(yīng)用是工業(yè)隨機(jī)箱揀選場(chǎng)景,充分展示了 Isaac Manipulator 與 Vention MachineMotion AI 控制器的協(xié)同優(yōu)勢(shì):
物體位姿估計(jì)
FoundationPose 處理 RGB-D 數(shù)據(jù)以估算物體位置與朝向,實(shí)現(xiàn)精準(zhǔn)的機(jī)器人操作。
軌跡規(guī)劃與執(zhí)行
cuMotion 接收物體位置數(shù)據(jù)并快速計(jì)算優(yōu)化的無(wú)碰撞軌跡。Vention MachineMotion AI 控制器將這些軌跡流式傳輸至機(jī)器人控制器執(zhí)行,實(shí)現(xiàn)精準(zhǔn)可靠的機(jī)械臂運(yùn)動(dòng)以抓取和轉(zhuǎn)移物品。
該集成方案提供實(shí)時(shí)感知與運(yùn)動(dòng)規(guī)劃性能,能夠更好地適應(yīng)工業(yè)自動(dòng)化場(chǎng)景中隨機(jī)箱揀選任務(wù)固有的復(fù)雜性與多變性。
后續(xù)步驟
將 Isaac Manipulator 與 Vention MachineMotion AI 整合,為工業(yè)場(chǎng)景部署 AI 驅(qū)動(dòng)的機(jī)器人提供了強(qiáng)大而實(shí)用的框架。該整合解決方案利用 GPU 加速的邊緣感知與實(shí)時(shí)運(yùn)動(dòng)規(guī)劃,能實(shí)現(xiàn)靈活、高性能的自動(dòng)化操作,以滿(mǎn)足現(xiàn)代制造環(huán)境不斷變化的需求。
整合優(yōu)勢(shì)包括:
實(shí)時(shí)性能
通過(guò) NVIDIA Jetson 平臺(tái)的 GPU 加速確保低延遲,在動(dòng)態(tài)嚴(yán)苛環(huán)境中實(shí)現(xiàn)響應(yīng)式感知與精準(zhǔn)機(jī)械臂操控。
簡(jiǎn)易部署
MachineMotion AI 簡(jiǎn)化了高級(jí)機(jī)器人功能的集成與擴(kuò)展,降低工業(yè)團(tuán)隊(duì)的配置復(fù)雜度與時(shí)間成本。
遠(yuǎn)程能力
內(nèi)置蜂窩連接,支持穩(wěn)健的遠(yuǎn)程監(jiān)控、診斷和軟件更新,最大限度減少停機(jī)時(shí)間并實(shí)現(xiàn)持續(xù)系統(tǒng)優(yōu)化。
隨著 AI 驅(qū)動(dòng)的機(jī)器人技術(shù)不斷發(fā)展,這一集成堆棧為提高適應(yīng)性、自主性和效率奠定了基礎(chǔ),也為智能自動(dòng)化在各行各業(yè)的廣泛應(yīng)用鋪平道路。
-
機(jī)器人
+關(guān)注
關(guān)注
213文章
29726瀏覽量
212803 -
NVIDIA
+關(guān)注
關(guān)注
14文章
5308瀏覽量
106342 -
機(jī)械臂
+關(guān)注
關(guān)注
13文章
554瀏覽量
25375
原文標(biāo)題:借助 Isaac Manipulator 和 Vention MachineMotion AI,提升工業(yè)機(jī)器人靈活性
文章出處:【微信號(hào):NVIDIA-Enterprise,微信公眾號(hào):NVIDIA英偉達(dá)企業(yè)解決方案】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
通過(guò)NVIDIA Cosmos模型增強(qiáng)機(jī)器人學(xué)習(xí)

NVIDIA Isaac Sim和Isaac Lab現(xiàn)已推出早期開(kāi)發(fā)者預(yù)覽版
NVIDIA Isaac Sim與NVIDIA Isaac Lab的更新
NVIDIA 通過(guò)云端至機(jī)器人計(jì)算平臺(tái)驅(qū)動(dòng)人形機(jī)器人技術(shù),賦能物理 AI

盤(pán)點(diǎn)#機(jī)器人開(kāi)發(fā)平臺(tái)
大象機(jī)器人攜手進(jìn)迭時(shí)空推出 RISC-V 全棧開(kāi)源六軸機(jī)械臂產(chǎn)品
NVIDIA Isaac 是英偉達(dá)推出的綜合性機(jī)器人開(kāi)發(fā)平臺(tái)
NVIDIA Isaac GR00T N1開(kāi)源人形機(jī)器人基礎(chǔ)模型+開(kāi)源物理引擎Newton加速機(jī)器人開(kāi)發(fā)
NVIDIA發(fā)布全球首個(gè)開(kāi)源人形機(jī)器人基礎(chǔ)模型Isaac GR00T N1
智元機(jī)器人基于NVIDIA Isaac GR00T打造高效仿真數(shù)據(jù)采集方案

NVIDIA宣布NVIDIA Isaac重要更新
簡(jiǎn)述NVIDIA Isaac的重要更新

NVIDIA發(fā)布人形機(jī)器人重磅更新!Isaac GR00T Blueprint厲害在哪?

利用NVIDIA Isaac平臺(tái)構(gòu)建、設(shè)計(jì)并部署機(jī)器人應(yīng)用

評(píng)論