精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

GTC23 | 使用 NVIDIA Jetson Orin Nano 開發套件開發 AI 機器人及智能視覺系統

NVIDIA英偉達企業解決方案 ? 來源:未知 ? 2023-03-29 03:40 ? 次閱讀

NVIDIA Jetson Orin Nano Developer Kit為創建入門級 AI 機器人智能無人機和智能視覺系統設定了一個新標準,同時簡化了NVIDIA Jetson Orin Nano系列的入門。這款開發套件緊湊的設計、眾多的連接器以及高達 40 TOPS 的 AI 性能,非常適合將您富有遠見的概念轉化為現實。

這款開發套件由一個 Jetson Orin Nano 8GB 模塊和一個參考載板組成,可容納所有 NVIDIA Jetson Orin Nano 和 NVIDIA Jetson Orin NX 模塊,為下一代邊緣 AI 產品的原型設計提供了理想的平臺。

Jetson Orin Nano 8GB 模塊采用NVIDIA Ampere architectureGPU,具有 1024 個 CUDA 內核、32 個第三代 Tensor Core和一個 6 核 Arm CPU ,可實現多個并發 AI 應用管線和高性能推理。開發套件載板擁有廣泛的連接器陣列,包括兩個 MIPI CSI 連接器,支持多達四個通道的相機模塊,實現了比以前更高的分辨率和幀速率。

上一代 Jetson Nano 開發套件讓 AI 變得平易近人。而新的 Jetson Orin Nano 開發套件以 80 倍的性能提高了入門級 AI 開發的門檻,使開發人員能夠運行任何類型的現代 AI 模型,包括 Transformer 和高級機器人模型。與上一代 Jetson Nano 相比,不僅大大提高了 AI 性能,Jetson Orin Nano 還提供了 5.4 倍的 CUDA 計算能力、6.6 倍的 CPU 性能和每瓦 50 倍的性能。

c5e990cc-cd9f-11ed-bfe3-dac502259ad0.jpg

圖 1 NVIDIA Jetson Orin Nano 和 NVIDIA Jetson Nano 的性能和效率比較

NVIDIA Jetson Orin Nano 開發套件功能

NVIDIA Jetson Orin Nano 開發套件包括一個特殊的 NVIDIA Orin Nano 8GB 模塊,帶有 SD 卡插槽、參考載板、預裝散熱器/風扇、19V 直流電源和一個基于 M.2-Key E 的無線網絡模塊。除了可啟動的 microSD 卡插槽外,載板下側還提供了兩個 M.2 Key-M NVMe 插槽,用于高速存儲。

c60136be-cd9f-11ed-bfe3-dac502259ad0.png

圖 2 Jetson Orin Nano 開發套件包括一個 Jetson Orin Nano 8GB 計算模塊、參考載板、散熱器/風扇、直流電源和 802.11ac / abgn WLAN + BT 模塊

表 1 和表 2 顯示了套件載板的主要功能和接口

c6345544-cd9f-11ed-bfe3-dac502259ad0.png

表 1 NVIDIA Jetson Orin Nano 開發套件模塊說明

c64e01b0-cd9f-11ed-bfe3-dac502259ad0.png

表 2 NVIDIA Jetson Orin Nano 開發套件載板規格

Jetson Orin Nano 開發套件現在可以預訂,將于 4 月開始發貨。欲查閱 Jetson Orin Nano 技術文檔、參考設計文件和軟件,請訪問 Jetson Download Center (https://developer.nvidia.com/embedded/downloads) 。

Jetson Orin Nano 運行所有現代 AI 模型

Jetson Orin Nano 開發套件具有高達 40 TOPS 的 AI 性能,可以運行所有現代 AI 模型。這一計算上的重大飛躍使要求最苛刻的 AI 應用成為可能,包括在邊緣運行 Transformer 模型,這在此前是不可能的。

Transformer 模型是近來生成式 AI 應用程序的基礎,如正在席卷世界的 ChatGPT 和 DALL-E。Transformer 模型通過跟蹤序列數據中元素之間的關系來學習上下文和意義,無需大型標記數據集。

今天就開始著手吧:

  • City Segmentation (https://catalog.ngc.nvidia.com/orgs/nvidia/teams/tao/models/citysemsegformer) 用于將城市景觀劃分為不同類別

  • PeopleNet Transformer(https://catalog.ngc.nvidia.com/orgs/nvidia/teams/tao/models/peoplenet_transformer) 基于 Deformable Detection Transformer

  • BERT (https://docs.nvidia.com/deeplearning/riva/user-guide/docs/reference/models/nlp.html#bert) 用于自然語言處理

Jetson 軟件加速 AI 和 TTM

Jetson Orin Nano 開發套件具有特定于用例的可用應用程序框架,可運行 NVIDIA AI 軟件堆棧。其中包括用于機器人的 NVIDIA Isaac 、用于視覺 AI 的 NVIDIA DeepStream 和用于會話 AI 的 NVIDIA Riva。使用 NVIDIA Omniverse Replicator 進行合成數據生成(SDG )可以節省大量時間,使用 NVIDIA TAO Toolkit 可以從 NGC 目錄中微調預訓練的 AI 模型。

圖 3 顯示了基于 Jetson Orin Nano 使用即將推出的 NVIDIA JetPack 5.1.1 運行一些計算機視覺基準測試的結果。這些結果表明開發套件提高了入門級計算機視覺的標準。測試包括 NGC 的一些密集 INT8 和 FP16 預訓練模型,以及 Industry Resnet-50 基準。基準測試包括以下內容:

  • NVIDIA PeopleNet v2.5用于最高精度人員檢測

  • NVIDIA ActionRecognitionNet二維和三維模型

  • NVIDIA LPRNet用于車牌識別

  • 用于多人體態判斷的NVIDIA DashCamNet BodyPoseNet

  • ResNet-50( 224 × 224 )物體檢測模型

c6696644-cd9f-11ed-bfe3-dac502259ad0.jpg

圖 3 對 Jetson Nano 和 Jetson Orin Nano 8GB預訓練模型進行基準測試的結果

Jetson Orin Nano 開發套件是一個多功能平臺,支持使用 NVIDIA TAO Toolkit 4.0 訓練的模型,很快還將支持 TAO Toolkit 5.0 中新發布的模型。使用 TAO Toolkit 5.0,開發人員可以利用幾種最先進的視覺 Transformer 模型進行圖像分類、對象檢測和分割用例。了解更多信息,請參閱:

https://developer.nvidia.com/blog/access-the-latest-in-vision-ai-model-development-workflows-with-nvidia-tao-toolkit-5-0/

NVIDIA Jetson Orin Nano 和 NVIDIA DeepStream 是邊緣應用的理想組合,如智能零售、智能城市十字路口和工業自動化。隨著 DeepStream 即將推出的版本以及 GXF 運行時的引入,Jetson Orin Nano 將是運行 AI 圖形的理想平臺,這些圖形需要與確定性系統緊密集成,在工廠自動化用例中很常見。

此外,想要快速熟悉 DeepStream,您可以使用最新版本的 Jetson Graph Composer 構建應用程序,并通過單擊按鈕將其部署到 Jetson Orin Nano。

c69303aa-cd9f-11ed-bfe3-dac502259ad0.jpg

圖 4 在 DeepStream Graph Composer 中構建應用程序,并將其部署到 Jetson Orin Nano

在 NVIDIA Jetson Orin 上使用

NVIDIA Isaac 加速機器人應用

NVIDIA Isaac 機器人平臺是一個強大的端到端平臺,用于開發、模擬和部署 AI 機器人。特別是硬件加速包NVIDIA Isaac ROS,使 ROS 2 開發人員更容易在 Jetson Orin Nano 開發套件上構建高性能解決方案。新的 NVIDIA Isaac ROS DP 優化了 ROS 2 節點處理管線,可以在 Jetson Orin 平臺上執行。它還提供了新的基于 DNN 的 GEMS ,旨在提高吞吐量。

圖 4 顯示了使用即將發布的 NVIDIA Isaac ROS DP3 在 Jetson Orin Nano 上運行這些機器人軟件包的結果。性能是在負載情況下測量的,包括 RCL 中的消息傳輸成本,用于指示真實世界性能的實際基準測試。測試包括圖表中所示的算法(圖 4 ),包括:

  • Visual SLAM使機器人能夠通過跟蹤環境周圍的視覺特征,基于圖像計算其位置和運動

  • April Tags用于 AprilTag 檢測和姿態判斷

  • Image Detection

  • Image Segmentation

  • Proximity Segmentation確定障礙物是否在近場內,并避免在導航過程中與障礙物碰撞

  • Stereo Disparity用于拍攝立體輸入圖像并生成視差圖,用于機器人導航

c6c27a7c-cd9f-11ed-bfe3-dac502259ad0.jpg

圖 5 NVIDIA Jetson Orin Nano 8GB 上NVIDIA Isaac ROS GEMs 的性能、延遲和分辨率

了解如何開始使用 NVIDIA Jetson Orin Nano 開發套件:

開始構建下一代應用程序原型,預訂 NVIDIA Jetson Orin Nano 開發套件(https://www.nvidia.com/en-us/autonomous-machines/embedded-systems/jetson-orin/)并安裝最新的 NVIDIA JetPack。

c6e4f8c2-cd9f-11ed-bfe3-dac502259ad0.jpg

圖 6 NVIDIA Jetson Orin Nano 開發套件

全線可用于量產的 NVIDIA Jetson Orin 系列模塊現已上市,包括 Jetson AGX Orin 系列、 Jetson Orin NX 系列和 Jetson Orin Nano 系列。Jetson AGX Orin 開發套件現已升級,包含 64GB 內存。

額外資源:

有關 NVIDIA Jetson Orin Nano 開發套件的更多信息,請觀看 NVIDIA GTC23 分會:Connect with the Experts: A Deep-Dive Q&A on Jetson Orin and Edge AI (https://www.nvidia.com/gtc/session-catalog/?tab.catalogallsessionstab=16566177511100015Kus&search=CWES52132#/session/1670472065129001rf2z).

要了解有關該模塊的更多信息,請參閱 Solving Entry-Level Edge AI Challenges with NVIDIA Jetson Orin Nano (https://developer.nvidia.com/blog/solving-entry-level-edge-ai-challenges-with-nvidia-jetson-orin-nano/#:~:text=Jetson%20Orin%20Nano%20series%20%20%20%20,CPU%20%20...%20%2014%20more%20rows%20) 和 Jetson Orin Nano Series Data Sheet (https://developer.nvidia.com/embedded/downloads#?search=Jetson%20Orin%20Nano%20Series%20Module%20Data%20Sheet).

訪問 NVIDIA Embedded Developer 頁面 (https://developer.nvidia.com/embedded-computing) 和 forums (https://forums.developer.nvidia.com/c/agx-autonomous-machines/jetson-embedded-systems/70) 以獲得社區專家的幫助。

c711dde2-cd9f-11ed-bfe3-dac502259ad0.png ?

掃描海報二維碼,或點擊“閱讀原文”,即可觀看 NVIDIA 創始人兼首席執行官黃仁勛 GTC23 主題演講重播!

c72240d8-cd9f-11ed-bfe3-dac502259ad0.jpg


原文標題:GTC23 | 使用 NVIDIA Jetson Orin Nano 開發套件開發 AI 機器人及智能視覺系統

文章出處:【微信公眾號:NVIDIA英偉達企業解決方案】歡迎添加關注!文章轉載請注明出處。


聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 英偉達
    +關注

    關注

    22

    文章

    3749

    瀏覽量

    90857

原文標題:GTC23 | 使用 NVIDIA Jetson Orin Nano 開發套件開發 AI 機器人及智能視覺系統

文章出處:【微信號:NVIDIA-Enterprise,微信公眾號:NVIDIA英偉達企業解決方案】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    【書籍評測活動NO.51】具身智能機器人系統 | 了解AI的下一個浪潮!

    情況為例,具身智能機器人的核心元器件(包括 3D 視覺傳感器、六維力傳感器、微型傳動系統、靈巧手與精密力控系統、高性能 驅控關節模組、融合通
    發表于 11-11 10:20

    使用NVIDIA Jetson打造機器人導盲犬

    Selin Alara Ornek 是一名富有遠見的高中生。她使用機器學習和 NVIDIA Jetson邊緣 AI機器人平臺,為視障人士
    的頭像 發表于 11-09 13:51 ?191次閱讀

    使用機器學習和NVIDIA Jetson邊緣AI機器人平臺打造機器人導盲犬

    Selin Alara Ornek 是一名富有遠見的高中生。她使用機器學習和 NVIDIA Jetson 邊緣 AI機器人平臺,為視障人
    的頭像 發表于 11-08 10:05 ?327次閱讀

    使用全新NVIDIA AI Blueprint開發視覺AI智能

    為提高生產力、優化流程和創造更加安全的空間,埃森哲、戴爾科技和聯想等公司正在使用全新 NVIDIA AI Blueprint 開發視覺 AI
    的頭像 發表于 11-06 13:58 ?319次閱讀

    解鎖機器人視覺與人工智能的潛力,從“盲人機器”改造成有視覺能力的機器人(上)

    正如人類依賴眼睛和大腦來解讀世界,機器人也需要自己的視覺系統來有效運作。沒有視覺機器人就如同蒙上雙眼的人類,僅能執行預編程的命令,容易碰撞障礙物,并犯下代價高昂的錯誤。這正是
    的頭像 發表于 10-12 09:56 ?333次閱讀
    解鎖<b class='flag-5'>機器人</b><b class='flag-5'>視覺</b>與人工<b class='flag-5'>智能</b>的潛力,從“盲人<b class='flag-5'>機器</b>”改造成有<b class='flag-5'>視覺</b>能力的<b class='flag-5'>機器人</b>(上)

    NVIDIA RTX AI套件簡化AI驅動的應用開發

    NVIDIA 于近日發布 NVIDIA RTX AI套件,這一工具和 SDK 集合能夠幫助 Windows 應用開發者定制、優化和部署適用于
    的頭像 發表于 09-06 14:45 ?403次閱讀

    【xG24 Matter開發套件試用體驗】深入了解Silicon Labs xG24 Matter開發套件

    今天把收到的xG24 Matter開發套件給大家做個詳細的介紹,Silicon Labs-芯科科技公司最新推出的一款具有智能機器學習硬件加速功能的無線物聯網產品評估xG24 Matter開發
    發表于 08-27 20:23

    中科創達旗下創通聯達Qualcomm RB3 Gen 2 Lite開發套件上市銷售

    日前,中科創達旗下創通聯達(Thundercomm)宣布Qualcomm RB3 Gen 2 Lite 開發套件在其官網商城正式上市銷售。該開發套件是專為高性能計算、高易用性而設計的物聯網開發套件,旨在推動
    的頭像 發表于 08-20 09:21 ?546次閱讀

    【xG24 Matter開發套件試用體驗】初識xG24 Matter開發套件

    今天帶剛收到xG24 Matter開發套件的快遞,為大家做個xG24 Matter開發套件的視頻介紹,帶大家認識一下這款xG24 Matter開發套件。 EFR32xG24 Explorer
    發表于 07-11 23:31

    全球機器人開發領域采用NVIDIA 機器人開發和生產

    機器人開發領域的領先企業正在采用NVIDIA Isaac機器人平臺來研究、開發和生產下一代 AI
    的頭像 發表于 06-03 18:25 ?1190次閱讀

    【LicheeRV-Nano開發套件試用體驗】+智能平板開發

    首先感謝Sipeed矽速科技和電子發燒友給與的這次機會,得以試用LicheeRV-Nano開發套件,并與大家共同分享與學習。 鑒于試用報告格式調整,后面亦按要求展現。 申請理由: 個人多年嵌入式
    發表于 03-06 23:05

    分析 丨AI算法愈加復雜,但是機器視覺開發門檻在降低

    準確判斷。此外,AI大模型近兩年受到關注,也可能被引入機器視覺領域,在跨模態理解和推理等方面展現出更強能力。 AI算法的復雜程度越來越高,機器
    的頭像 發表于 02-19 16:49 ?635次閱讀
    分析 丨<b class='flag-5'>AI</b>算法愈加復雜,但是<b class='flag-5'>機器</b><b class='flag-5'>視覺</b>的<b class='flag-5'>開發</b>門檻在降低

    NVIDIA Isaac平臺為AI機器人開發提供支持

    在今日的CES特別演講中,NVIDIA機器人和邊緣計算副總裁Deepu Talla揭示了NVIDIA及其合作伙伴如何將生成式AI機器人技術
    的頭像 發表于 01-09 15:00 ?1059次閱讀

    使用 NVIDIA Isaac 仿真并定位 Husky 機器人

    如何使用 ROS 2 Husky 官方軟件包將該機器人導入 NVIDIA Isaac Sim 并創建仿真。 本 Demo 中的 Husky 機器人配備了 NVIDIA
    的頭像 發表于 12-26 18:05 ?1261次閱讀
    使用 <b class='flag-5'>NVIDIA</b> Isaac 仿真并定位 Husky <b class='flag-5'>機器人</b>

    基于聆思CSK6視覺AI開發套件實現剪子包袱錘游戲

    本文來自極術社區聆思CSK6視覺AI開發套件試用活動文章。作者用聆思CSK6芯片支持的手勢識別能力結合8X8點陣實現一款剪子包袱錘的游戲。
    的頭像 發表于 12-05 09:56 ?1177次閱讀
    基于聆思CSK6<b class='flag-5'>視覺</b><b class='flag-5'>AI</b><b class='flag-5'>開發套件</b>實現剪子包袱錘游戲