描述

這個(gè)項(xiàng)目是關(guān)于什么的？

該設(shè)備使用攝像頭和經(jīng)過(guò)訓(xùn)練的神經(jīng)網(wǎng)絡(luò)模型來(lái)識(shí)別我何時(shí)坐在燈旁邊并將其打開(kāi)。

它可以識(shí)別模式，可以計(jì)算人數(shù)，還可以針對(duì)特定命令進(jìn)行訓(xùn)練。此外，這可以節(jié)省我們不在場(chǎng)時(shí)的能量切換。

怎么運(yùn)行的？

Spresense 主板使用攝像頭和經(jīng)過(guò)訓(xùn)練的模型來(lái)檢測(cè)用戶(hù)何時(shí)在場(chǎng)。通過(guò)將 Spresense 巧妙地放置在房間的角落，它可以在用戶(hù)穿過(guò)房間時(shí)打開(kāi)和關(guān)閉燈。為此，Spresense 連接到充當(dāng)開(kāi)關(guān)的繼電器。這允許用戶(hù)在不接觸開(kāi)關(guān)的情況下四處走動(dòng)，并更好地利用能源。此應(yīng)用需要 Spresense 主板 + Spresense 相機(jī)板。

原型

構(gòu)建原型的步驟和軟件

?

創(chuàng)建數(shù)據(jù)集

首先我們需要選擇興趣區(qū)域。在這種情況下，應(yīng)使用以下代碼將 56x56 像素調(diào)整為 28x28。

興趣區(qū)

?

然后我們需要記錄至少 600 張照片，一半是有人坐著的，另一半只是沙發(fā)。用不同的光照條件記錄它們。將create_dataset.ino修改為您感興趣的區(qū)域。

img.clipAndResizeImageByHW(small, lefttop_x, lefttop_y,
                    rightbottom_x, rightbottom_y, out_height, out_width)

錄制完成后，從 SD 卡中復(fù)制圖像并將它們分類(lèi)在兩個(gè)文件夾中。

用于創(chuàng)建數(shù)據(jù)集的文件夾結(jié)構(gòu)

?

現(xiàn)在，在 Neural Network Console 中單擊 DATASET > Create Dataset > Image Classification 并添加指定

數(shù)據(jù)集常用選項(xiàng)

?

訓(xùn)練模型

找到更適合您的問(wèn)題的模型。這對(duì)我有用。

使用的神經(jīng)網(wǎng)絡(luò)層配置

?

然后，運(yùn)行訓(xùn)練，運(yùn)行評(píng)估，導(dǎo)出 NNB 模型并粘貼到 SD 卡中。在我的例子中，模型小于 5 KB！

推理

使用您感興趣的區(qū)域修改inference.ino上的以下行并運(yùn)行它！

img.clipAndResizeImageByHW(small, lefttop_x, lefttop_y,
                    rightbottom_x, rightbottom_y, out_height, out_width)

如您在下一張照片中所見(jiàn)，我使用帶光耦合器的 3.3V 繼電器來(lái)切換燈。

總裝

?

?