描述

?

天網(wǎng)資助法案獲得通過(guò)。

制造機(jī)器的創(chuàng)造者 314Reactor 用一臺(tái)單板計(jì)算機(jī)制造了兩個(gè)終結(jié)者頭骨。

他們的使命是：制作一個(gè)酷炫的終結(jié)者頭像，使用機(jī)器學(xué)習(xí)來(lái)觀察和說(shuō)話。

第一個(gè)終結(jié)者是Raspbinator ，在 2018 年......在 Raspberry Pi 4 之前。它非常酷。

第二個(gè)是使用 Nvidia Jetson Nano 制作的，當(dāng)時(shí)它是新的。

和以前一樣，Pi 基金會(huì)能夠制造新的 Raspberry Pi。更強(qiáng)大的單板計(jì)算機(jī)。

只是他們什么時(shí)候會(huì)用一個(gè)來(lái)制作一個(gè)新的終結(jié)者頭骨的問(wèn)題……

握住 CPU 的底座卡舌。

我終于得到了一個(gè)很好的終結(jié)者頭骨，它在屏幕上準(zhǔn)確無(wú)誤，還能夠安裝技術(shù)，甚至可以通過(guò)其中一個(gè)眼窩插入攝像頭，你可以在這里找到一個(gè)。

我能夠在那里戳出一個(gè) LED 并將其用作 Raspberry Pi 相機(jī)的良好眼窩。里面還有電池和一些可以使 LED 閃爍的電子設(shè)備；我不得不把它全部去掉。

主要處理單元是帶有 8GB RAM 的 Raspberry Pi 4，這非常重要，因?yàn)樵擁?xiàng)目使用大量軟件和 ML 東西，因此會(huì)使用相當(dāng)多的 RAM。

最重要的是，我使用的是 Adafruit 的非常方便的 Braincraft HAT，它的設(shè)計(jì)考慮到了 RPi 上的 ML。它有一個(gè)內(nèi)置麥克風(fēng)和連接揚(yáng)聲器和其他東西的接口，非常適合這個(gè)項(xiàng)目。

您可以在此處找到 HAT 所需的所有安裝內(nèi)容。

當(dāng)然，我正在使用相機(jī)讓頭骨看到，我使用的是較小的相機(jī)；為 Pi Zero 制作；這是為了更容易裝入頭骨并通過(guò)眼窩觀察，并使用適配器使其連接到全尺寸 Pi。

還有一些其他東西，可以在“東西”部分找到，例如帶連接器的加長(zhǎng)相機(jī)電纜和 SD 卡擴(kuò)展器，以便在 SD 卡安裝在頭骨中時(shí)更容易訪問(wèn)。

測(cè)試硬件、帶有 Braincraft HAT 的 Pi、揚(yáng)聲器和攝像頭：

連接揚(yáng)聲器：

對(duì)準(zhǔn)和安裝相機(jī)：

快速瀏覽一下背面：

SD卡擴(kuò)展：

你幾乎可以看到相機(jī)的眼睛看著你......可怕：

我還使用本教程將剩余的紅色 LED 連接到 Raspberry Pi 中：

那個(gè) veroboard 是用一些粘性魔術(shù)貼固定的。

頭骨能夠看到：

其中一些照片是在我制作原型并使用更大的 Raspberry Pi 相機(jī)時(shí)拍攝的，因此可能與最終結(jié)果有所不同。

我還發(fā)現(xiàn)頭骨會(huì)一直向后傾斜，所以我為它定制了一個(gè)支架，以防止它傾斜；就像荷馬曾經(jīng)發(fā)明的那把椅子：

還有一些粘性魔術(shù)貼有助于將 RPi 更好地固定到頭骨上。

我也在使用沒(méi)有紅外線濾鏡的相機(jī)，所以顏色可能看起來(lái)很奇怪。但它似乎確實(shí)是常態(tài)，因?yàn)槲铱吹狡渌?Pi4 與該模型的運(yùn)行相同。

但它確實(shí)可以輕松地成功檢測(cè)到物體和人類，然后你可以與它交談，它會(huì)做出回應(yīng)（并不總是做出有意義的回應(yīng)）。它也可能會(huì)誤解對(duì)它說(shuō)的話，但這在 STT 中是可以預(yù)料到的；特別是在本地運(yùn)行時(shí)。

STT 響應(yīng)也需要很長(zhǎng)時(shí)間來(lái)處理，當(dāng) Soran 單獨(dú)運(yùn)行時(shí)它只需要幾秒鐘，但當(dāng)所有其他東西同時(shí)運(yùn)行時(shí)可能需要幾分鐘。所以肯定需要對(duì)代碼進(jìn)行一些優(yōu)化和修復(fù)；但也可能是 Pi 4 在這里被推到了極限。

有趣的是，物體檢測(cè)和視覺(jué)似乎都以相同的速度工作——所以不確定為什么當(dāng)其他一切都在進(jìn)行時(shí)語(yǔ)音推理如此緩慢；我需要查看是否可以讓 STT 在另一個(gè)核心上運(yùn)行，或者找出它運(yùn)行如此緩慢的原因。

當(dāng)然，響應(yīng)的質(zhì)量還取決于聊天機(jī)器人接受訓(xùn)練的訓(xùn)練數(shù)據(jù)以及 STT 是否正常運(yùn)行。

幸運(yùn)的是，Braincraft HAT 上的風(fēng)扇使 CPU 保持涼爽——它通常不會(huì)超過(guò) 60 攝氏度。

這是視覺(jué)能力的視圖，類似于 HK Tank：

當(dāng)紅外攝像機(jī)處于特定條件并且實(shí)際上看起來(lái)像終結(jié)者視覺(jué)時(shí)，這會(huì)顯示出來(lái)。您還可以查看任務(wù)參數(shù)、它當(dāng)前正在做什么、已完成的事件列表等。

這是檢測(cè)到有人后的截圖：

這里還有一些炫耀鏡頭：

正如右眼所見(jiàn)，樹(shù)莓派的電源 LED 燈也亮了起來(lái)；這是一個(gè)很酷的意外效果。

看起來(lái)很 80 年代，很酷。

雖然里面和后面有點(diǎn)亂：

因此，我需要找到一種更好的方法來(lái)為項(xiàng)目的下一次發(fā)展安裝所有內(nèi)容，并使其成為一個(gè)更加一體化但可拆解的單元：

2029年，如果我沒(méi)記錯(cuò)的話。

因此，如前所述，目前這一切都有些棘手，需要在安裝/設(shè)置以及代碼優(yōu)化方面做大量工作。因此，請(qǐng)務(wù)必將此視為正在進(jìn)行的項(xiàng)目的開(kāi)始，我將隨著時(shí)間的推移更新該項(xiàng)目并在此處發(fā)布結(jié)果。

此外，隨著更新的硬件發(fā)布，我將考慮為其增加更多的功能/內(nèi)存；我考慮過(guò)一些 Raspberry Pi 的替代品；但我不確定它們的兼容性和文檔 - 但如果有人有任何好的建議請(qǐng)告訴我！

擁有更多 RAM 可以擴(kuò)展功能；例如為一些GPT-2句子生成添加 Text Machina，以真正增強(qiáng)和混淆其回復(fù)。

如果有可用的互聯(lián)網(wǎng)連接，我什至可以將GPT-3接入其中；這可能會(huì)導(dǎo)致一些非常酷的互動(dòng)。

更多的 CPU 能力將有助于視覺(jué)處理和多任務(wù)處理能力；希望允許更快的答復(fù)。

我認(rèn)為最重要的事情之一是使用空心終結(jié)者頭骨的美感——我一直在尋找這樣的東西有一段時(shí)間了，但我只發(fā)現(xiàn)了那些太小或沒(méi)有眼睛的允許相機(jī)透視的插座。所以這是我夢(mèng)想創(chuàng)造終結(jié)者的一大步。

將來(lái)我想使用串行輸出將這一切連接到一些機(jī)器人電子設(shè)備上，并為它獲得一個(gè)大的外骨骼；真的把天網(wǎng)踢掉了。

我的想法和最初的代碼始于 2015 年，這是從 Raspbinator 到現(xiàn)在的旅程：

連續(xù) 3 個(gè)：

非常非常酷。

因此，如前所述，請(qǐng)務(wù)必密切關(guān)注對(duì)此的更新 - 我不會(huì)使用當(dāng)前的頭骨作為基礎(chǔ)，隨著事情的進(jìn)展和我的新想法而開(kāi)發(fā)更多。我將作為新項(xiàng)目上傳重要更新。

請(qǐng)讓我知道您的想法，感謝閱讀，如果您有任何建議可以幫助我改進(jìn)項(xiàng)目，請(qǐng)告訴我！

?