精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

借助NVIDIA技術,用AI賦能3D內容生成

麗臺科技 ? 來源:NVIDIA英偉達企業解決方案 ? 2023-03-30 11:04 ? 次閱讀

KIRI Innovations是一家面向全球市場的 AI 公司,致力于通過前沿技術賦能 3D 內容制作,降低 3D 內容生產的門檻。公司擁有 3D 重建引擎 KIRI Engine,通過手機拍照即可實現對物體的超寫實 3D 建模。

bff8019c-ce96-11ed-bfe3-dac502259ad0.jpg

KIRI Engine 生成的 3D 模型素材 擁有逼真的紋理材質信息 上線短短幾個月的時間內,KIRI Engine 全球用戶已突破 30 萬人,且還在快速增長中,其中包括 Google、Roblox、EA、Epic Games、Meta 等元宇宙企業用戶。用戶通過 KIRI Engine App 或 KIRI Engine 網頁端將圍繞物體拍攝的照片上傳至云端進行處理,就可以獲得和現實物體一模一樣的 3D 模型素材,再將這些逼真的 3D 模型素材應用在各種包括 VR 場景、3D 游戲、影視特效在內的 3D 內容制作中。

c00947d6-ce96-11ed-bfe3-dac502259ad0.jpg

用戶使用 KIRI Engine 生成的 3D 模型 出現在各種 3D 游戲、VR 場景,甚至影視作品中 KIRI Engine 的背后,是一套部署在云端的神經網絡重建算法,能夠通過多角度照片集或視頻,對現實物體生成具有紋理材質信息和幾何信息的超寫實 3D 模型。這種重建算法的計算量非常巨大,使用傳統解決方案意味著消耗大量的算力資源和成本。KIRI Engine 使用NVIDIAGPU在云端進行計算,一片 GPU 負責進行復雜的神經網絡訓練,另一片 GPU 則負責模型推理,將訓練好的模型移至這片 GPU 主機上,通過輸入新的數據來獲得想要的結果,也會進行相對簡單的圖像處理和點云匹配計算任務,同時依靠NVIDIA CUDA進行加速,使得計算成本得以減少數百倍至每個模型幾角錢。 KIRI Engine 的核心價值不僅在于用更低的成本為 3D 開發者提供 3D 重建工具,更在于通過快速增長的用戶在云端積累海量 3D 數據集。隨著 AI 帶來的創作變革,AI 生成 3D 模型將會是下一個生成式 AI 的主戰場,而高度標準化的 3D 數據集是 AI 生成 3D 模型的必要條件。在生成式 AI 全面到來的時代,KIRI 正在面對一個更大的市場和全新的挑戰。

如何兼顧降低計算成本

與提升 3D 重建水平

傳統的照片 3D 建模技術對 CPU 非常依賴,但 CPU 的硬件限制使得這種方法的成本過高,所以其應用領域主要是資金充裕的大型企業和政府項目。人們與信息的交互方式正在因 VR/XR 的技術突破而經歷從 2D 向 3D,和從信息互聯到空間互聯的范式轉移。這種范式轉移將極大帶動市場對 3D 內容的需求,顯然過去高成本的 3D 建模技術無法適應市場的變化。因此,需要探索一種新的計算方式,在滿足不斷增加的 3D 重建需求的同時,還要顛覆性地降低計算成本。

c01890b0-ce96-11ed-bfe3-dac502259ad0.png

three.js 腳本在 Github 的周下載量 three.js 腳本作為制作 3D 內容必不可少的工具之一,其下載量趨勢能側面反映出全球 3D 內容的增長趨勢;而從表中可以看出 three.js 腳本在 Github 的周下載量在一年的時間內翻了一倍,以此足以看出 3D 化的范式轉移在以驚人的速度滲透人們的交互方式。 在算法層面,KIRI 開創性地使用了神經網絡和視覺算法混合計算的方法。這樣的優勢在于神經網絡重建能夠更好地還原一些無法被視覺算法重建的物體,例如高度反光或透明的物體,但對于特征點足夠多的物體,視覺算法能夠捕捉到更多的表面細節。 因為神經網絡的加入,使用 GPU 是必然的選擇,因此使用 CPU+GPU 異構計算,盡管擁有 CPU+GPU 的服務器價格大概會是同級別的 CPU 價格的 2 倍,但計算時間可以大概節約 11 倍。(用機器學習進行 3D 模型的紋理貼圖計算,CPU 需耗時 1600 秒,但 GPU 只需 130 秒。) 同時對 3D 重建任務進行 CUDA 加速并加入擴/縮容機制 。在計算任務少的時候只使用單臺 GPU 確保運行穩定,計算任務一旦開始變多,云架構能夠自動擴容,最多使用數十臺服務器并行運算。這樣一來,通過 CUDA 加速的神經網絡算法能夠在大幅度降低單次運行的時間成本,而擴/縮容機制在確保用戶體驗的同時避免資源浪費。

NVIDIA 為 KIRI 提供高效穩定算力支持

基于以上考量,KIRI 選擇 NVIDIA 的產品生態來提供支持。因為 NVIDIA 產品生態的多樣性能夠滿足全部技術需求,且提供高效穩定的算力支持。 NVIDIA CUDA:通過 CUDA 進行計算加速是 KIRI Engine 得以高效且低成本運行的重要原因之一。在傳統純 CPU 運行環境里,哪怕是運行最簡單的 3D 重建算法也需要花費 20-60 分鐘的時間。而通過 CUDA 加速后,KIRI 目前的重建算法只需要 5 分鐘。(甚至 KIRI 正在努力嘗試達到 25 秒內生成 3D 模型的加速。) NVIDIA GPU:KIRI 使用 NVIDIA GPU 來進行神經網絡模型的訓練。神經輻射場重建模型往往需要數個小時才能完成訓練,但通過 GPU 與 CUDA 的配合,再加上 KIRI 對算法的優化,目前在 KIRI Engine 上完成神經輻射場模型訓練只需要 25 分鐘。( KIRI 也在努力對架構和算法進行優化,力爭兩個月內能夠將神經網絡模型的訓練縮減到 5 分鐘以內。)

審核編輯 :李倩

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • NVIDIA
    +關注

    關注

    14

    文章

    4940

    瀏覽量

    102815
  • AI
    AI
    +關注

    關注

    87

    文章

    30146

    瀏覽量

    268414

原文標題:借助 NVIDIA 技術,用 AI 賦能 3D 內容生成

文章出處:【微信號:Leadtek,微信公眾號:麗臺科技】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    中興通訊全場景AI終端應用與裸眼3D新品亮相

    ”的產品戰略與理念,終端業務六大AI主題展示吸引了眾多關注,內容覆蓋全球領先的AI裸眼3D、AI同聲傳譯和方言互譯、
    的頭像 發表于 10-15 10:00 ?708次閱讀

    使用NVIDIA Edify助力的服務創建3D資產和虛擬環境照明

    使用 NVIDIA Edify 助力的服務創建 3D 資產和虛擬環境照明,或是減半生成圖像時間。
    的頭像 發表于 08-02 15:22 ?443次閱讀

    歡創播報 騰訊元寶首發3D生成應用

    App。 騰訊元寶APP發布時,就圍繞工作效率場景、日常生活等場景提供了豐富的應用,并有創建個人智能體等個性化體驗,“3D角色夢工廠”則將大模型生成技術3D應用結合,進一步創新了元寶
    的頭像 發表于 07-18 11:39 ?722次閱讀
    歡創播報 騰訊元寶首發<b class='flag-5'>3D</b><b class='flag-5'>生成</b>應用

    Meta推出革命性3D Gen AI模型:1分鐘內生成高質量3D內容

    在科技日新月異的今天,Meta再次引領創新潮流,宣布了一項令人矚目的技術突破——3D Gen AI模型的誕生。這款先進的模型以其前所未有的高效性與卓越品質,重新定義了3D
    的頭像 發表于 07-04 18:12 ?990次閱讀

    奧比中光3D相機打造高質量、低成本的3D動作捕捉與3D動畫內容生成方案

    高質量、低成本的3D動作捕捉與3D動畫內容生成方案。 Moverse公司總部位于希臘塞薩洛尼基,是三維動畫相關媒體和娛樂行業的一家科技創業公司?;趭W比中光
    的頭像 發表于 06-25 16:37 ?1026次閱讀

    借助NVIDIA Omniverse加速汽車行業3D營銷內容制作

    借助 NVIDIA Omniverse? Enterprise,比特視界加快了制作周期、改善了與團隊和客戶的協作并降低了項目的總體成本。
    的頭像 發表于 05-16 10:27 ?1023次閱讀
    <b class='flag-5'>借助</b><b class='flag-5'>NVIDIA</b> Omniverse加速汽車行業<b class='flag-5'>3D</b>營銷<b class='flag-5'>內容</b>制作

    3C薄片自動化上料,3D視覺技術如何?

    隨著制造業的快速發展,3C行業對薄片類零件的上料需求日益增長。傳統的上料方式往往依賴于人工操作,效率低下且存在誤差。為了解決這一問題,3D視覺技術應運而生,為3C薄片自動化上料提供了強
    的頭像 發表于 04-17 14:29 ?413次閱讀
    <b class='flag-5'>3</b>C薄片自動化上料,<b class='flag-5'>3D</b>視覺<b class='flag-5'>技術</b>如何<b class='flag-5'>賦</b><b class='flag-5'>能</b>?

    NVIDIA生成AI研究實現在1秒內生成3D形狀

    NVIDIA 研究人員使 LATTE3D (一款最新文本轉 3D 生成AI 模型)實現雙倍加速。
    的頭像 發表于 03-27 10:28 ?467次閱讀
    <b class='flag-5'>NVIDIA</b><b class='flag-5'>生成</b>式<b class='flag-5'>AI</b>研究實現在1秒內<b class='flag-5'>生成</b><b class='flag-5'>3D</b>形狀

    NVIDIA Edify多模態架構升級,引領視覺生成AI新紀元

    NVIDIA近日宣布,其用于視覺生成AI的多模態架構Edify迎來重大更新,為開發者和視覺內容提供商帶來前所未有的新功能。其中,3D資產
    的頭像 發表于 03-27 10:22 ?412次閱讀

    NVIDIA Edify為視覺內容提供商帶來3D生成AI和全新圖像控件

    用于視覺生成AI 的多模態架構 NVIDIA Edify 正在邁入全新維度。
    的頭像 發表于 03-26 09:49 ?682次閱讀

    Stability AI推出全新Stable Video 3D模型

    近日,Stability AI 推出了全新的 Stable Video 3D 模型,該模型以其獨特的功能吸引了眾多關注。此模型具備從單張圖像中生成多視圖3D視頻的能力,為視頻制作領域帶
    的頭像 發表于 03-22 10:30 ?786次閱讀

    Adobe Substance 3D整合AI功能:基于文本生成紋理、背景

    Substance 3D Stager是以Adobe Dimension為基礎改造而成,使用者可直觀地進行3D場景構建,包括模型、材質和燈光等要素。借助其強大功能,能夠生成極具觀賞性的
    的頭像 發表于 03-20 10:28 ?668次閱讀

    Adobe提出DMV3D3D生成只需30秒!讓文本、圖像都動起來的新方法!

    因此,本文研究者的目標是實現快速、逼真和通用的 3D 生成。為此,他們提出了 DMV3D。DMV3D 是一種全新的單階段的全類別擴散模型,
    的頭像 發表于 01-30 16:20 ?810次閱讀
    Adobe提出DMV<b class='flag-5'>3D</b>:<b class='flag-5'>3D</b><b class='flag-5'>生成</b>只需30秒!讓文本、圖像都動起來的新方法!

    3D人體生成模型HumanGaussian實現原理

    和驅動等。為了自動化 3D 內容生成,此前的一些典型工作(比如 DreamFusion [1] )提出了分數蒸餾采樣 (Score Distillation Sampling),通過優化 3D
    的頭像 發表于 12-20 16:37 ?1519次閱讀
    <b class='flag-5'>3D</b>人體<b class='flag-5'>生成</b>模型HumanGaussian實現原理

    阿迪達斯與 Covision Media 使用 AINVIDIA RTX 創建逼真的 3D 內容

    Covision Media 正在使用 AINVIDIA RTX 改進 3D 掃描流程和 3D 內容創建。 Covis
    的頭像 發表于 11-28 18:45 ?627次閱讀
    阿迪達斯與 Covision Media 使用 <b class='flag-5'>AI</b> 和 <b class='flag-5'>NVIDIA</b> RTX 創建逼真的 <b class='flag-5'>3D</b> <b class='flag-5'>內容</b>