女人自慰AV免费观看内涵网,日韩国产剧情在线观看网址,神马电影网特片网,最新一级电影欧美,在线观看亚洲欧美日韩,黄色视频在线播放免费观看,ABO涨奶期羡澄,第一导航fulione,美女主播操b

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

NVIDIA 賦能 Cyanpuppets 打造實時 2D 視頻生成 3D 骨骼 AI 轉換模型

NVIDIA英偉達 ? 來源:未知 ? 2023-04-07 02:30 ? 次閱讀

青色木偶科技 Cyanpuppets致力于 AI 圖像算法技術和實時渲染平臺工具,是一家以卷積神經網絡和深度神經網絡算法為核心,打造自研 AI 模型架構、實現虛擬與現實世界驅動協作的 AIGC 技術公司。其自研 CYAN.AI 平臺結合 NVIDIA GPU?算力,實現了 2D 視頻生成 3D 動作數據,具備三維空間自由人體運動,能夠為全球用戶提供 AI 無穿戴動作捕捉技術、虛擬社交全身互動技術、3D 動畫制作工具與三維空間預演技術。

數字化身的低成本實時驅動

成為一大挑戰

游戲開發商 Epic Games 的首席執行官 Tim Sweeney曾提到,“元宇宙將是一種前所未有的大規模參與式媒介,所有用戶都可以參與、創造、分享并從中獲利,而用戶的虛擬數字化身(Avatar)可以自由地在不同平臺之間穿梭”。隨著 AI 算力和計算機圖形渲染技術的蓬勃發展,人類對于自由地在不同數字平臺中穿梭,并隨時進入虛擬世界的數字化身 Avatar 提出了更高的要求:如何輕便快捷地讓數字化身真實地表達人類的動作意愿與情感,并將人類的動作實時遷移至虛擬化身上,成為關鍵性挑戰之一,細分為以下幾個具體的問題:

  • 復雜的技術流程

    從面部表情、手指動作到肢體動作,每個模塊往往由不同的技術方案構成,數據的同步性與流程的一體化構建面臨巨大的技術投入和人力成本挑戰。

  • 高昂的捕捉成本

    體驗與成本不可兼得,市面上效果較為一般的半身視覺動捕無法滿足 Avatar 的技術要求,而較為精準的光學捕捉與慣性捕捉,動輒數十萬的投入又使得 Avatar 成本居高不下。較高的成本讓普通民眾無法參與數字內容體系的建設,也無法享受技術時代帶來的新體驗。

  • 割裂的數字孤島

    虛擬化身的骨骼標準難以統一,不同的制作軟件、綁定系統和圖形渲染引擎會形成割裂的多個數字孤島,因此不僅每次虛擬化身穿梭到不同平臺帶來的資產遷移成本很高,而且難以形成一個整體性的虛擬化身世界。

  • 糟糕的捕捉體驗

    身上穿戴著復雜且繁重的動作捕捉傳感器,使得數字化身的使用體檢較為糟糕,長時間穿戴帶來的不適感與疲憊感也讓元宇宙成為了難以進入的宇宙。

NVIDIA GPU 助力 Cyanpuppets

打造 AI 驅動模型賦能Avatar發展

基于以上問題,Cyanpuppets 選擇了 NVIDIA 平臺多個產品提供支持,在多張NVIDIA GeForce RTX3080Ti的算力支持下,參考主流 AI 框架 TensorFlow、PyTorch、Caffe 等,對 COCO、ORGBD 等數據集進行長期訓練。硬件終端上采用 ?GeForce RTX 3060?/3070/3080等系列硬件給軟件系統帶來了穩定性保障和流暢體驗感。同時,使用Deep Learning Super Sampling(DLSS)這項 AI 深度學習技術,為用戶提供極致的畫面渲染效果。

NVIDIA GPU賦能下,CYAN.AI 以 CNN 和 DNN 為底層核心訓練了近萬小時的數據集,在同步的 2D 視頻流中提取人體動作的關鍵特征做人體姿態識別,追蹤人體超過 208 個關鍵點,結合動力學、生物力學生成人體運動的建模算法,一體化完成面部、表情與肢體共 208 點無穿戴、無標記的高精度捕捉。

CYAN.AI 構建了一個全新的骨骼系統,通過合成數據算法對主流的 Unreal Skeleton Asset、Daz、CC、Unity avatar 和 metahuman 的模型骨骼系統進行匹配映射,讓虛擬化身的全身驅動不再是一個個割裂的數字孤島。

在硬件優化環節,通過對 NVIDIA GPU 算力進行分布式的算力調配,僅需成本數百元的 RGB 攝像頭就能獲取視頻流,進行插值異構即可實現更低延遲的數據信息吞吐與數據畫面合成。

結合 NVIDIA GPU 算力支持,算法模型以低至 0.1s 的延遲實現了超低延時的視覺動作捕捉,同時輔助動捕特征平滑算法、圖像識別多目協同算法、空間檢測、定位算法和重定向算法等多種算法,即使在復雜、狹小且充滿干擾物的使用環境中,CYAN.AI 依然可以穩定、高效、高精度地動作捕捉遷移。

AIGC 行業是當前最受關注的人工智能領域之一,算力與算法帶來的生產力提升,讓每個個體都切實感受到新時代的來臨。傳統的行業紛紛擁抱 AI 生成科技進行產業升級,從文字生成圖片,圖片生成視頻再到視頻生成 3D,這是一個長久進化的趨勢,Cyanpuppets 正處于 2D 生成 3D 的關鍵環節。NVIDIA 提供的 GPU 解決方案,解決了深度學習和機器學習的技術難題,使得我們可以持續不斷地創新算法模型,拓寬應用場景,并通過 CYAN.AI 平臺為全球不同行業、不同場景的用戶搭建虛擬現實協作的橋梁、虛擬化身的實時驅動方案。” 青色木偶科技 Cyanpuppets CEO 李宗興表示。

NVIDIA 初創加速計劃

青色木偶科技 Cyanpuppets是 NVIDIA 初創加速計劃 (NVIDIA Inception) 會員企業。NVIDIA 初創加速計劃為免費會員制,旨在培養顛覆行業格局的優秀創業公司。該計劃聯合國內外知名的風投機構,創業孵化器,創業加速器,行業合作伙伴以及科技創業媒體等,打造創業加速生態系統。能夠提供產品折扣,技術支持,市場宣傳,融資對接,業務推薦等一系列服務,加速創業公司的發展。

想獲得 NVIDIA 初創加速生態助力?掃描下方二維碼,僅需一分鐘填寫意向申請表單,獲得快速聯系。

a925a344-d4a8-11ed-bfe3-dac502259ad0.png


原文標題:NVIDIA 賦能 Cyanpuppets 打造實時 2D 視頻生成 3D 骨骼 AI 轉換模型

文章出處:【微信公眾號:NVIDIA英偉達】歡迎添加關注!文章轉載請注明出處。


聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 英偉達
    +關注

    關注

    22

    文章

    3922

    瀏覽量

    93136

原文標題:NVIDIA 賦能 Cyanpuppets 打造實時 2D 視頻生成 3D 骨骼 AI 轉換模型

文章出處:【微信號:NVIDIA_China,微信公眾號:NVIDIA英偉達】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦
    熱點推薦

    NVIDIA助力影眸科技3D生成工具Rodin升級

    在當今數字化與 AI 飛速發展的時代,3D 生成技術正逐漸成為推動各行業創新的關鍵力量。影眸科技(上海)有限公司專注于 3D 生成領域的探索
    的頭像 發表于 04-27 15:09 ?338次閱讀

    HT 可視化監控頁面的 2D3D 連線效果

    HT 是一個靈活多變的前端組件庫,具備豐富的功能和效果,滿足多種開發需求。讓我們將其效果化整為零,逐一拆解具體案例,幫助你更好地理解其實現方案。 此篇文章中,讓我們一起深入探討 2D3D
    的頭像 發表于 04-09 11:28 ?368次閱讀
    HT 可視化監控頁面的 <b class='flag-5'>2D</b> 與 <b class='flag-5'>3D</b> 連線效果

    使用海爾曼太通/HellermannTyton 3D CAD 模型進行快速高效的設計

    提供 3D2D CAD 數據,可供免費下載。 直接嵌入三維設計環境的模型下載功能 在海爾曼太通官網上點擊【產品】選項,工程師現在可以查看和下載眾多產品的 3D CAD
    發表于 03-14 16:55

    AI Agent 應用與項目實戰》----- 學習如何開發視頻應用

    開發一個視頻內容生成Agent。 訪問語聚AI平臺官網 ,進行注冊或登錄。 在平臺首頁,了解語聚AI的功能和應用場景,特別是其支持的視頻生成
    發表于 03-05 19:52

    騰訊混元3D AI創作引擎正式發布

    AI技術,能夠根據用戶提供的提示詞或圖片,直接生成高質量的3D模型。這一功能極大地降低了3D內容創作的門檻,使得即使是缺乏專業
    的頭像 發表于 01-23 10:33 ?513次閱讀

    騰訊混元3D AI創作引擎正式上線

    或上傳一張圖片,該引擎便能迅速生成與之對應的3D模型。這一功能極大地降低了3D內容創作的門檻,使得更多用戶能夠輕松涉足這一領域。 除了基礎的3D
    的頭像 發表于 01-22 10:26 ?491次閱讀

    AN-1249:使用ADV8003評估板將3D圖像轉換2D圖像

    電子發燒友網站提供《AN-1249:使用ADV8003評估板將3D圖像轉換2D圖像.pdf》資料免費下載
    發表于 01-08 14:28 ?0次下載
    AN-1249:使用ADV8003評估板將<b class='flag-5'>3D</b>圖像<b class='flag-5'>轉換</b>成<b class='flag-5'>2D</b>圖像

    OpenAI推出AI視頻生成模型Sora

    近日,備受期待的OpenAI再次推出了其創新之作——AI視頻生成模型Sora。這一新品的發布,無疑為AI技術注入了新的活力。 據悉,Sora與OpenAI旗下的
    的頭像 發表于 12-12 09:40 ?626次閱讀

    OpenAI開放Sora視頻生成模型

    OpenAI近日宣布,其傾力打造的人工智能視頻生成系統Sora已正式向美國及其他市場的ChatGPT Plus訂閱用戶開放。自去年首次公開預覽以來,Sora歷經約10個月的精心研發與優化,現已全面
    的頭像 發表于 12-10 11:16 ?673次閱讀

    Google DeepMind發布Genie 2打造交互式3D虛擬世界

    的交互式體驗。 據了解,Genie 2是一個自回歸潛在擴散模型,它基于大型視頻數據集進行訓練。通過自動編碼器,視頻中的潛在幀被傳遞到大型Transformer動力學
    的頭像 發表于 12-05 14:16 ?975次閱讀

    NVIDIA Edify幫助開發者創建自定義模型

    內容生成器 — 無論是生成語言、2D 圖像、3D 模型還是視頻 — 為創意社區提供了各種工具,可
    的頭像 發表于 11-20 09:24 ?528次閱讀

    字節跳動自研視頻生成模型Seaweed開放

    近日,字節跳動旗下的AI內容平臺即夢AI傳來新消息,宣布自研的視頻生成模型Seaweed即日起正式面向平臺用戶開放使用。這一舉措標志著字節跳動在AI
    的頭像 發表于 11-11 14:31 ?582次閱讀

    火山引擎推出豆包·視頻生成模型

    在近期舉辦的2024火山引擎AI創新巡展上,火山引擎總裁譚待隆重推出了豆包·視頻生成模型,這一舉措標志著火山引擎在視頻內容生成領域邁出了重要
    的頭像 發表于 09-25 14:11 ?554次閱讀

    歡創播報 騰訊元寶首發3D生成應用

    1 騰訊元寶首發3D生成應用 只需一張照片,便能迅速打造獨一無二的3D角色。7月16日,騰訊旗下大模型應用“騰訊元寶”上線了“
    的頭像 發表于 07-18 11:39 ?1148次閱讀
    歡創播報 騰訊元寶首發<b class='flag-5'>3D</b><b class='flag-5'>生成</b>應用

    Runway發布Gen-3 Alpha視頻生成模型

    專為電影和圖像內容創作者提供生成AI工具的Runway公司近日宣布,其最新的Gen-3 Alpha視頻生成模型已經正式問世。這款
    的頭像 發表于 06-19 09:25 ?805次閱讀