在蘇州舉辦的GTC CHINA 2019大會上，NVIDIA創(chuàng)始人兼CEO黃仁勛宣布了全新版本的Isaac（應(yīng)該取自艾薩克·牛頓）軟件開發(fā)套件（SDK），建立了一個統(tǒng)一的機器人開發(fā)平臺，提供更新的AI感知、仿真、操控功能。

Isaac SDK套件包括提供應(yīng)用程序框架的Isaac Robotics Engine，預(yù)先構(gòu)建的深度神經(jīng)網(wǎng)絡(luò)模型、算法、庫、驅(qū)動程序和API Isaac GEM，用于室內(nèi)物流的參考應(yīng)用程序，以及提供導(dǎo)航功能的Isaac Sim（首個版本）。

NVIDIA表示，全新的Isaac SDK可以大大加快研究人員、開發(fā)人員、初創(chuàng)企業(yè)和制造商開發(fā)和測試機器人的速度，使機器人能夠通過仿真獲得由人工智能技術(shù)驅(qū)動的感知和訓(xùn)練功能，從而可以在各種環(huán)境和情況下對機器人進行測試和驗證，從而節(jié)省成本。

為了加快AI機器人的開發(fā)速度，Isaac SDK包含了各種基于攝像頭的感知深度神經(jīng)網(wǎng)絡(luò)，比如：

－ 對象檢測：識別用于導(dǎo)航、交互或操控的對象

－ 自由空間分割：檢測和分割外部世界，例如確定人行道在哪里，以及機器人可以在哪里行駛

－ 3D姿態(tài)估計：了解目標的位置和方向，從而實現(xiàn)諸如機械臂拾取物體的任務(wù)

－ 2D人體姿態(tài)估計：將姿態(tài)估計應(yīng)用于人，這對于與人互動的機器人（例如配送機器人）和協(xié)作機器人（專門設(shè)計用于與人合作）非常重要

Isaac SDK的對象檢測也通過ResNet深度神經(jīng)網(wǎng)絡(luò)進行了更新，可以使用NVIDIA的遷移學(xué)習(xí)工具包對其進行訓(xùn)練，添加新對象進行檢測和訓(xùn)練新模型變得更容易，這些新模型能以較高的準確度啟動并運行。

借助新版SDK，還可以使用Isaac Sim訓(xùn)練機器人，并將所生成的軟件部署到在現(xiàn)實世界中運行的真實機器人中，大大加快機器人的開發(fā)速度，從而實現(xiàn)綜合數(shù)據(jù)的訓(xùn)練。

通過仿真，開發(fā)人員可以在困難或異常等極端情況下對機器人進行測試，以進一步加強對它的訓(xùn)練。將這些結(jié)果輸入訓(xùn)練管道，使神經(jīng)網(wǎng)絡(luò)可以基于真實和模擬數(shù)據(jù)來提高準確性。

全新SDK也提供了多機器人仿真，可將多個機器人放入仿真環(huán)境中進行測試，以便它們學(xué)會彼此相關(guān)的工作。各個機器人可以在共享的虛擬環(huán)境中移動時，運行獨立版本的Isaac導(dǎo)航軟件堆棧。

最后，如果開發(fā)人員已經(jīng)開發(fā)了自己代碼的機器人，全新Isaac SDK也能集成他們的工作，并有基于C編程語言的新API，開發(fā)人員可以將自己的軟件堆棧連接到Isaac SDK，并最大程度地減少編程語言轉(zhuǎn)換，為用戶提供通過C API訪問路由的Isaac功能。

C-API訪問權(quán)限同時支持開發(fā)人員在其他編程語言中使用Isaac SDK。

Isaac WebSight

Isaac項目上，NVIDIA已經(jīng)與清華、北大等國內(nèi)多所高校、科研機構(gòu)和企業(yè)達成了合作。

在發(fā)布會現(xiàn)場，黃仁勛還演示了一款名為“Leonardo”的物體操縱機器人，體現(xiàn)了快速平滑的動作、6D姿態(tài)感知、交互式行為生成，在模擬和現(xiàn)實世界中通過學(xué)習(xí)，成為一個真正意義上的機器人。

Leonardo的仿真訓(xùn)練空間名為Isaac Gym，模擬了RGB、景深攝像頭和Franka機器人傳動裝置。盡管是模擬世界，它依然遵循真實物理規(guī)則，并運行于NVIDIA GPU PhysX 5.0物理引擎之上。

責(zé)任編輯：wv