在亞特蘭大工作的 Kris Kersey 使用 NVIDIA Jetson 邊緣 AI 和機(jī)器人技術(shù)平臺(tái)，為超級(jí)英雄裝備打造了平視顯示器 (HUD)。

Kris Kersey 是一名擁有 20 多年經(jīng)驗(yàn)的嵌入式軟件開(kāi)發(fā)人員，同時(shí)也是一個(gè)擁有 3 萬(wàn)多名訂閱者的 YouTube 教育頻道主播，以及漫畫(huà)與 COSPLAY 狂熱愛(ài)好者。

他在自己的首個(gè)項(xiàng)目中使用 NVIDIA Jetson 邊緣 AI 和機(jī)器人技術(shù)平臺(tái)將這些興趣和專長(zhǎng)糅合到一起，完整還原了他最喜歡的漫威電影之一——《鋼鐵俠》中的超級(jí)英雄頭盔。

這個(gè) 3D 打印頭盔的 HUD 配備了計(jì)算機(jī)視覺(jué)功能，可以像電影中那樣顯示用戶所見(jiàn)之物的信息。

NVIDIA Jetson 平臺(tái)負(fù)責(zé)處理來(lái)自兩個(gè)攝像頭的數(shù)據(jù)（每個(gè)眼槽一個(gè)），這兩個(gè)攝像頭可以“看到”頭盔佩戴者目光所及的東西。然后，HUD 會(huì)顯示當(dāng)前溫度、濕度、高度和 GPS 位置等信息，還可以基于用于物體檢測(cè)的深度神經(jīng)網(wǎng)絡(luò)，對(duì)用戶視野中的物體進(jìn)行分類。

為了與他人分享這份快樂(lè)，Kersey 在他的 YouTube 頻道—— Kersey Fabrications 上分享了整個(gè)制作流程。

他表示，超級(jí)英雄電影和科幻小說(shuō)都提醒自己，實(shí)現(xiàn)尖端技術(shù)需要跨學(xué)科協(xié)作。

他還提到：“就像這個(gè)項(xiàng)目一樣，一般情況下藝術(shù)家和故事講述者負(fù)責(zé)發(fā)揮自己的想象力，構(gòu)思出精彩的想法，然后由科學(xué)家和工程師把這些想法變成現(xiàn)實(shí)”。

創(chuàng)客介紹

Kersey 曾在佐治亞州的南方理工大學(xué)（現(xiàn)隸屬于肯尼索州立大學(xué)）學(xué)習(xí)計(jì)算機(jī)科學(xué)，他在嵌入式微處理器和架構(gòu)方面積累了豐富的工作經(jīng)驗(yàn)，且專門研究與 NVIDIA Jetson 平臺(tái)兼容的 Linux 操作系統(tǒng)。

Kersey 表示：“在 Jetson 平臺(tái)上編寫軟件不需要學(xué)習(xí)新的編程語(yǔ)言或操作系統(tǒng)，所以對(duì)我來(lái)說(shuō)是很容易的。”

白天，他是一家亞特蘭大初創(chuàng)企業(yè)的軟件工程師。晚上，他在自己的個(gè)人創(chuàng)客空間做自己的項(xiàng)目。

“我的車庫(kù)從不是用來(lái)停車的。”

相反，他的車庫(kù)中充滿著讓他的奇思妙想得以實(shí)現(xiàn)的各種工具、電路板和其他設(shè)備。

Kersey 強(qiáng)調(diào)自己最重視的是家人。他喜歡和家人一起下棋、看電影和爬山。

靈感來(lái)源

Kersey 小時(shí)候就癡迷于技術(shù)。他的母親是一位計(jì)算機(jī)輔助繪圖和機(jī)械設(shè)計(jì)教師。

“從很小的時(shí)候起，我就可以擺弄她用的電腦，我對(duì)電腦十分著迷。堂兄曾給了我一臺(tái)舊的 8 位電腦，剛開(kāi)始不太會(huì)用，我就掏出說(shuō)明書(shū)讀完整本，學(xué)會(huì)了基本的編程。”

后來(lái)，在幫助兒子完成一個(gè)科學(xué)奧林匹克競(jìng)賽項(xiàng)目時(shí)，Kersey 開(kāi)始接觸 3D 打印。

他表示：“從那時(shí)候起，我開(kāi)始真正喜歡上了 3D 打印，不過(guò)我兒子不怎么喜歡。”

2018 年，Kersey 開(kāi)設(shè)了自己的 YouTube 頻道，主要分享 3D 打印方面的內(nèi)容。在此過(guò)程中，他逐漸成為了一名資深創(chuàng)客，同時(shí)也將個(gè)人所學(xué)教給觀眾。

NVIDIA Jetson 賦能超級(jí)英雄項(xiàng)目

Kersey 完整還原的 3D 打印無(wú)線鋼鐵俠頭盔，簡(jiǎn)直與這個(gè)經(jīng)典電影系列中的頭盔如出一轍，就連頭盔的打磨和上色也是他親力親為完成。

頭盔模型以 NVIDIA Jetson Xavier NX 開(kāi)發(fā)套件為核心，驅(qū)動(dòng)頭盔的 HUD。

他提到：“為了讓頭盔戴起來(lái)與《鋼鐵俠》中的一樣拉風(fēng)，必須擁有實(shí)時(shí)、低延遲、高分辨率和高幀數(shù)的特點(diǎn)。屏幕上還必須顯示大量信息，這就需要有強(qiáng)大的圖形處理器，所以我選擇了 Jetson 平臺(tái)。”

Jetson 開(kāi)發(fā)者套件配備了強(qiáng)大的板載 NVIDIA GPU 和 AI 功能來(lái)加速嵌入式應(yīng)用。

Kersey 還使用 NVIDIA TensorRT 軟件開(kāi)發(fā)套件，讓項(xiàng)目實(shí)現(xiàn)了低延遲、高吞吐量的高性能深度學(xué)習(xí)推理。

為了打造出新一代頭盔 HUD，Kersey 使用了 NVIDIA Jetson Orin Nano 開(kāi)發(fā)者套件，并表示這個(gè)項(xiàng)目“直到最后一刻才見(jiàn)分曉”。NVIDIA Jetson Orin Nano 套件于 2022 年 9 月推出，為創(chuàng)建入門級(jí) AI 機(jī)器人、智能相機(jī)等制定了新的標(biāo)準(zhǔn)。

Kersey 表示，從打開(kāi) Jetson Orin Nano 包裝盒到部署和運(yùn)行軟件，只花了他兩個(gè)小時(shí)。

他目前想要使用 Jetson Orin NX 16GB 系統(tǒng)級(jí)模組升級(jí)項(xiàng)目，并從鋁制鋼鐵俠手炮 (Repulsor) 原型開(kāi)始，打造一整套包含頭盔的鋼鐵俠盔甲。

他表示很快將開(kāi)源該項(xiàng)目的代碼，這樣其他人也可以輕松地把自己變成超級(jí)英雄。

當(dāng)被問(wèn)及鋼鐵俠是否是他最喜歡的超級(jí)英雄時(shí)，Kersey 笑著說(shuō)：“現(xiàn)在是啦！”

進(jìn)一步了解更多關(guān)于 NVIDIA Jetson 平臺(tái)的信息：

https://www.nvidia.com/en-us/autonomous-machines/embedded-systems/

即刻點(diǎn)擊“閱讀原文”，在 NVIDIA On-Demand 上觀看 GTC 精選回放，包括主題演講相關(guān)精選、中國(guó)本地精選內(nèi)容、生成式 AI 專題以及全球各行業(yè)及領(lǐng)域最新成果！