Move.ai 的動(dòng)作捕捉擴(kuò)展程序,可免費(fèi)為 3D 藝術(shù)家和開發(fā)者提供可用于其創(chuàng)作流的無標(biāo)記動(dòng)作數(shù)據(jù)。

創(chuàng)建動(dòng)畫數(shù)據(jù)既費(fèi)錢又耗時(shí),但基于全新的 Move.ai Omniverse 擴(kuò)展程序,任何人都可以利用手機(jī)拍攝的視頻,生成高保真動(dòng)作數(shù)據(jù)。
該擴(kuò)展程序可作為 Move.ai 動(dòng)作資產(chǎn)數(shù)據(jù)庫的插件。基于此擴(kuò)展程序,用戶只需點(diǎn)擊一下頁面就可將相關(guān)數(shù)據(jù)導(dǎo)入 NVIDIA Omniverse,并且能輕松地將所生成的動(dòng)畫重定位于角色之上,并將其與 Autodesk Maya 中的裝備或游戲引擎(如 UE 虛幻引擎和 Unity)中的場(chǎng)景相連接。
Move.ai 合作關(guān)系和交付主管 Niall Hendry 表示:“我們相信,NVIDIA Omniverse 正在開拓一條通往‘創(chuàng)建廣闊虛擬世界’的道路。人體動(dòng)作對(duì)于數(shù)字體驗(yàn)和虛擬環(huán)境的開發(fā)和落地而言至關(guān)重要。”
Move.ai 與 Omniverse 相連接后,其動(dòng)作數(shù)據(jù)可通過一系列軟件生態(tài)系統(tǒng)實(shí)現(xiàn)共享,可幫助該公司開拓新受眾。該擴(kuò)展程序還支持用戶無需為每個(gè)實(shí)例構(gòu)建對(duì)應(yīng)插件,即可與其他軟件實(shí)例交叉連接。例如,Omniverse 用戶可以將基于 Move.ai 生成的動(dòng)畫,應(yīng)用于其他擴(kuò)展程序(如 in3D 等)所生成的角色之上。
Move.ai 擴(kuò)展程序的構(gòu)建過程
為了構(gòu)建該擴(kuò)展程序,Move.ai 的開發(fā)人員 Denis Cera,使用了 Omniverse Kit 中基于 Python 的 SDK,并參考了創(chuàng)建 Omniverse 擴(kuò)展程序的視頻教程以及 Omniverse Kit 文檔。
為創(chuàng)建用戶界面(UI),Cera 添加了一個(gè) [VGrid] 至 [ScrollingFrame] 中,并利用圖像預(yù)覽對(duì)動(dòng)畫進(jìn)行了填充。此外,他還為每張圖片創(chuàng)建了一個(gè)按鈕,用戶只需點(diǎn)擊按鈕就可將其導(dǎo)入相應(yīng)的動(dòng)畫。
在創(chuàng)建用戶界面后,Cera 還給按鈕配置了參數(shù)各異的不同函數(shù)。具體方法如下:
```python
button = ui.Button(
text="Import motion",
name=motion["title"],
alignment=ui.Alignment.RIGHT,
width=0,
height=0,
asset_path=self.asset_path,
clicked_fn=partial(
download_motion,
Path(self.asset_field.model.get_value_as_string()),
motion["title"],
)
```
用戶界面中的每個(gè)按鈕都有相應(yīng)的函數(shù),并且該函數(shù)還有對(duì)應(yīng)的一組參數(shù),如下載路徑、動(dòng)畫名稱等。因此,用戶可以點(diǎn)擊不同的按鈕來執(zhí)行不同的操作或完成不同的動(dòng)作。
Omniverse 平臺(tái)基于通用場(chǎng)景描述(USD)構(gòu)建,吸納了其能在不同工具實(shí)現(xiàn)內(nèi)容互換的特點(diǎn),但 Move.ai 的 API 目前只支持用戶訪問 FBX(Filmbox)數(shù)據(jù)。幸運(yùn)的是,Omniverse 擁有一個(gè)內(nèi)置 converter,可將 `.fbx` 文件轉(zhuǎn)換為 `.usd` 文件,用戶還可以直接使用該 converter,或者直接導(dǎo)入 `.fbx` 文件至 Omniverse 中進(jìn)行自動(dòng)轉(zhuǎn)換。
為將`.fbx`數(shù)據(jù)導(dǎo)入 Omniverse,Move.ai 的開發(fā)者使用了 `CreateReferenceCommand` 來直接引用 `.usd`格式的`.fbx`文件,該文件可在其 `moveai.assets.extension.utils.import_file_to_scene()`函數(shù)中找到:
```python
def import_file_to_scene(usd_path: Path):
stage = omni.usd.get_context().get_stage()
if not stage:
return
name = usd_path.stem
prim_path = omni.usd.get_stage_next_free_path(stage, "/" + name, True)
omni.kit.commands.execute(
"CreateReferenceCommand", path_to=prim_path, asset_path=str(usd_path), usd_context=omni.usd.get_context()
)
```
用戶可利用 `moveai.assets.extension.utils.convert_asset_to_usd()` 函數(shù),將文件直接轉(zhuǎn)換為 `.usd` 格式。
Hendry 表示:“最終,USD 將會(huì)成為元宇宙應(yīng)用的行業(yè)標(biāo)準(zhǔn)。與 NVIDIA 合作,可幫助快速實(shí)現(xiàn)我們與 USD 交換范式的整合。”
任何人都可以在 GitHub 上使用 Move.ai 擴(kuò)展程序的源代碼(詳情請(qǐng)見:https://github.com/move-ai/omniverse-public-asset-library)。
實(shí)現(xiàn)高質(zhì)量動(dòng)作數(shù)據(jù)訪問的自主化
Move.ai 旨在降低高保真動(dòng)作捕捉和動(dòng)畫數(shù)據(jù)的使用門檻。基于 Omniverse,用戶只需輕松點(diǎn)擊一下,就能訪問 Move.ai 的高質(zhì)量動(dòng)作數(shù)據(jù)庫。
Move.ai 與 Omniverse 相連有助于其授權(quán)團(tuán)隊(duì)自發(fā)地在創(chuàng)意社區(qū)發(fā)布免費(fèi)動(dòng)畫的 Motion Packs,可賦能用戶在其項(xiàng)目中輕松使用動(dòng)作數(shù)據(jù)。未來,用戶還能將其自有數(shù)據(jù)導(dǎo)入 Omniverse。
Move.ai 的手機(jī)應(yīng)用程序?qū)⒂诮衲?3 月上架,屆時(shí)任何人都可以下載使用,您還可以在“www.move.ai”上報(bào)名參加該應(yīng)用的公測(cè)。如需下載該 Omniverse 擴(kuò)展程序,請(qǐng)參見:https://docs.move.ai/nvidia-omniverse-extension。
請(qǐng)觀看以下視頻講解,了解該擴(kuò)展程序的使用方法:
如需進(jìn)一步了解“如何構(gòu)建 Omniverse 應(yīng)用、擴(kuò)展程序和微服務(wù)”,您可以注冊(cè) NVIDIA GTC 大會(huì)(人工智能和元宇宙時(shí)代的開發(fā)者大會(huì)),并觀看大會(huì)期間的 Omniverse 分會(huì)。Move.ai 將與眾多的初創(chuàng)企業(yè)及行業(yè)的領(lǐng)導(dǎo)者一起共同推動(dòng)元宇宙的發(fā)展,并且該公司將于 GTC 大會(huì)進(jìn)行相關(guān)展示。
Move.ai 是 NVIDIA 初創(chuàng)加速計(jì)劃成員,該計(jì)劃旨在為全球 13000 多家尖端初創(chuàng)企業(yè)提供支持,企業(yè)可訪問以下鏈接申請(qǐng)成為其中的一員。
您可以訪問 Omniverse 資源中心的文檔和教程,了解開發(fā)者如何基于 Omniverse 平臺(tái)構(gòu)建基于 USD 的應(yīng)用和擴(kuò)展程序。
點(diǎn)擊 “閱讀原文” 或掃描下方海報(bào)二維碼,即可免費(fèi)注冊(cè) GTC23,在 3 月 24 日 聽 OpenAI 聯(lián)合創(chuàng)始人與 NVIDIA 創(chuàng)始人的爐邊談話,會(huì)議將由 NVIDIA 專家主持,配中文講解和實(shí)時(shí)答疑,一起看 AI 的現(xiàn)狀和未來!
原文標(biāo)題:如何利用手機(jī)捕捉高質(zhì)量的動(dòng)作數(shù)據(jù)并將其導(dǎo)入 Omniverse 平臺(tái)
文章出處:【微信公眾號(hào):NVIDIA英偉達(dá)企業(yè)解決方案】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
-
英偉達(dá)
+關(guān)注
關(guān)注
22文章
3953瀏覽量
93820
原文標(biāo)題:如何利用手機(jī)捕捉高質(zhì)量的動(dòng)作數(shù)據(jù)并將其導(dǎo)入 Omniverse 平臺(tái)
文章出處:【微信號(hào):NVIDIA-Enterprise,微信公眾號(hào):NVIDIA英偉達(dá)企業(yè)解決方案】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
SCTF星通時(shí)頻參加2025高新技術(shù)企業(yè)高質(zhì)量發(fā)展論壇
淺析:數(shù)字經(jīng)濟(jì)時(shí)代,高質(zhì)量數(shù)據(jù)集對(duì)AI產(chǎn)業(yè)帶來哪些新的變化
高質(zhì)量 HarmonyOS 權(quán)限管控流程

啟源芯動(dòng)力榮獲青浦區(qū)多項(xiàng)殊榮,以技術(shù)創(chuàng)新賦能高質(zhì)量發(fā)展

廣汽集團(tuán)召開高質(zhì)量發(fā)展大會(huì)
電動(dòng)工具EMC測(cè)試整改:邁向高質(zhì)量生產(chǎn)的必經(jīng)之路

借助谷歌Gemini和Imagen模型生成高質(zhì)量圖像

芯導(dǎo)科技榮獲上市公司高質(zhì)量發(fā)展大會(huì)“科技創(chuàng)新獎(jiǎng)”
江蘇多維科技皮特級(jí)TMR芯片成功檢測(cè)到高質(zhì)量的成人實(shí)時(shí)心磁信號(hào)

立洋光電助力城市照明高質(zhì)量發(fā)展
中興通訊引領(lǐng)5G-A高質(zhì)量發(fā)展新紀(jì)元
中國(guó)算力大會(huì)召開,業(yè)界首個(gè)算力高質(zhì)量評(píng)估體系發(fā)布

揭秘高質(zhì)量點(diǎn)焊機(jī)的五大標(biāo)準(zhǔn):打造焊接性能的基石

評(píng)論