NVIDIA 帶來知乎精彩問答甄選系列,將為您精選知乎上有關 NVIDIA 產品的精彩問答。
本期為問答甄選第十二期 ——查看NVIDIA Jetson相關精彩問題
以下兩個知乎甄選問答將為您了解NVIDIA Jetson相關內容帶來更加精彩的解答!
Q:
選用什么樣的系統或平臺開發機器人/機器臂?
A:
隨著人工智能技術的快速發展,開發機器人/機器臂的平臺或者系統也是越來越多,不同背景知識和不同需求的開發者對于平臺的性能要求也是各不相同。在這種情況下,NVIDIA 的開發平臺可一定不要錯過,總有一款方案適合你!
使用基于 Omniverse Enterprise 平臺的 Isaac Sim 工具進行虛擬仿真
在現實世界中制造機器人需要從頭開始創建數據集,既費時又費錢,而且會減緩部署速度。
因此,為了降低成本和加快部署,開發人員正在轉向合成數據生成(SDG)、預訓練 AI 模型、遷移學習和機器人仿真這幾種方式。
NVIDIA OVX服務器上運行的 Omniverse Cloud 平臺即服務,為世界各地的 Azure 開發人員帶來各種先進的功能,使企業能夠擴展 SDG 等機器人仿真工作負載,并為開發團隊提供持續集成和交付能力,讓他們在使用 Isaac Sim 的同時能夠在一個共享的資源庫中修改代碼。
Isaac Sim是一個機器人仿真應用和 SDG 工具,驅動逼真的、物理準確的虛擬環境。在 NVIDIA Omniverse 平臺的賦能下,Isaac Sim 使全球團隊能夠開展遠程協作,一起構建、訓練、仿真、驗證和部署機器人。
除了現有的基于云的方法,如在自管理容器中使用 Isaac Sim,或者在虛擬工作站或AWS RoboMaker 等全代管服務上使用 Isaac Sim 等,Omniverse Cloud 將通過 Azure 為企業提供更多的云選項。
而工程師可以通過接入 Isaac Sim 中的 SDG 引擎Omniverse Replicator來建立生產級合成數據集,用于訓練強大深度學習感知模型。
使用 Jetson Orin 打造高效率、高性能邊緣 AI 和機器人
NVIDIA Jetson Orin 模組現已可用于量產,可支持各種邊緣 AI 和機器人技術應用,包括可提供每秒 40 萬億次運算(TOPS)AI 性能的最小 Jetson 模組Jetson Orin Nano,以及為先進自主機器提供 275 TOPS 性能的Jetson AGX Orin。
與上一代 Jetson Nano 相比,全新 Jetson Orin Nano 開發者套件的性能提高了 80 倍,使開發人員能夠運行先進的轉換器和機器人模型。由于每瓦性能提高了 50 倍,剛開始使用 Jetson Orin Nano 模組的開發人員可以構建和部署節能的入門級 AI 機器人、智能無人機,以及智能視覺系統等。
在 Jetson 平臺上運行的NVIDIA Isaac ROS和DeepStream等特定應用框架與云框架緊密集成,如 Omniverse 平臺上的 Isaac Sim 和NVIDIA Metropolis等。開發人員還可使用最新NVIDIA TAO工具套件對 NVIDIA NGC 產品目錄中的預訓練 AI 模型進行微調,縮短部署時間。
已有超過 100 萬名開發人員和 6000 多家客戶選擇 NVIDIA Jetson 平臺。70 多家 Jetson 生態合作伙伴正在提供基于 Orin 的解決方案,以及覆蓋硬件、AI 軟件和應用設計服務、傳感器、連接和開發者工具的全方位支持。
Q:
如何制作一個機器人?
A:
提到制作一個機器人,許多人都會認為是一件非常高大上的事情,但其實并沒有那么困難,就像風靡全球的漫威電影《鋼鐵俠》中的主人公一樣,我們也可以自己動手制作一個機器人。接下來 NVIDIA 就為大家帶來創客 Kris Kersey 的故事,他真的自己制作出了《鋼鐵俠》中的超級英雄頭盔。
Kris Kersey 是一名擁有 20 多年經驗的嵌入式軟件開發人員,同時也是一個擁有 3 萬多名訂閱者的 YouTube 教育頻道主播,以及漫畫與 COSPLAY 狂熱愛好者。
他在自己的首個項目中使用NVIDIA Jetson 邊緣 AI 和機器人技術平臺將這些興趣和專長糅合到一起,完整還原了《鋼鐵俠》中的超級英雄頭盔。
這個 3D 打印頭盔 HUD 配備了計算機視覺功能,可以像電影中那樣顯示用戶所見之物的信息。
NVIDIA Jetson 平臺負責處理來自兩個攝像頭的數據(每個眼槽一個),這兩個攝像頭可以“看到”頭盔佩戴者目光所及的東西。然后,HUD 會顯示當前溫度、濕度、高度和 GPS 位置等信息,還可以基于用于物體檢測的深度神經網絡,對用戶視野中的物體進行分類。
為了與他人分享這份快樂,Kersey 在他的 YouTube 頻道—— Kersey Fabrications 上分享了整個制作流程。
他表示,超級英雄電影和科幻小說都提醒自己,實現尖端技術需要跨學科協作。
他還提到:“就像這個項目一樣,一般情況下藝術家和故事講述者負責發揮自己的想象力,構思出精彩的想法,然后由科學家和工程師把這些想法變成現實”。
Kersey 曾在佐治亞州的南方理工大學(現隸屬于肯尼索州立大學學習計算機科學,他在嵌入式微處理器架構方面積累了豐富的工作經驗,且專門研究與 NVIDIA Jetson 平臺兼容的 Linux 操作系統。
Kersey 表示:“在 Jetson 平臺上編寫軟件不需要學習新的編程語言或操作系統,所以對我來說是很容易的。”
白天,他是一家亞特蘭大初創企業的軟件工程師。晚上,他在自己的個人創客空間做自己的項目。
“我的車庫從不是用來停車的。”相反,他的車庫中充滿著讓他的奇思妙想得以實現的各種工具、電路板和其他設備。
Kersey 小時候就癡迷于技術。他的母親是一位計算機輔助繪圖和機械設計教師。
“從很小的時候起,我就可以擺弄她用的電腦,我對電腦十分著迷。堂兄曾給了我一臺舊的 8 位電腦,剛開始不太會用,我就掏出說明書讀完整本,學會了基本的編程。”
后來,在幫助兒子完成一個科學奧林匹克競賽項目時,Kersey 開始接觸 3D 打印。
他表示:“從那時候起,我開始真正喜歡上了 3D 打印,不過我兒子不怎么喜歡。”
2018 年,Kersey 開設了自己的 YouTube 頻道,主要分享 3D 打印方面的內容。在此過程中,他逐漸成為了一名資深創客,同時也將個人所學教給觀眾。
Kersey 完整還原的 3D 打印無線鋼鐵俠頭盔,簡直與這個經典電影系列中的頭盔如出一轍,就連頭盔的打磨和上色也是他親力親為完成。
頭盔模型以NVIDIA Jetson Xavier NX開發套件為核心,驅動頭盔的 HUD。
他提到:“為了讓頭盔戴起來與《鋼鐵俠》中的一樣拉風,必須擁有實時、低延遲、高分辨率和高幀數的特點。屏幕上還必須顯示大量信息,這就需要有強大的圖形處理器,所以我選擇了 Jetson 平臺。”
Jetson 開發者套件配備了強大的板載NVIDIA GPU和 AI 功能來加速嵌入式應用。
Kersey 還使用NVIDIA TensorRT軟件開發套件,讓項目實現了低延遲、高吞吐量的高性能深度學習推理。
為了打造出新一代頭盔 HUD,Kersey 使用了NVIDIA Jetson Orin Nano開發者套件,并表示這個項目“直到最后一刻才見分曉”。NVIDIA Jetson Orin Nano 套件于 2022 年 9 月推出,為創建入門級 AI 機器人、智能相機等制定了新的標準。
Kersey 表示,從打開 Jetson Orin Nano 包裝盒到部署和運行軟件,只花了他兩個小時。
他目前想要使用Jetson Orin NX 16GB系統級模組升級項目,并從鋁制鋼鐵俠手炮(Repulsor)原型開始,打造一整套包含頭盔的鋼鐵俠盔甲。
他表示很快將開源該項目的代碼,這樣其他人也可以輕松地把自己變成超級英雄。
更多精彩問答,點擊下方小程序,關注 NVIDIA 知乎賬號!
NVIDIA 知乎精彩問答甄選往期精彩內容
更多精彩仍在繼續...
敬請關注
原文標題:NVIDIA 知乎精彩問答甄選 | 查看 NVIDIA Jetson 相關精彩問答
文章出處:【微信公眾號:NVIDIA英偉達】歡迎添加關注!文章轉載請注明出處。
-
英偉達
+關注
關注
22文章
3749瀏覽量
90863
原文標題:NVIDIA 知乎精彩問答甄選 | 查看 NVIDIA Jetson 相關精彩問答
文章出處:【微信號:NVIDIA_China,微信公眾號:NVIDIA英偉達】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論