Firefly DL小巧輕便，嵌入式深度學(xué)習(xí)加速部署

近年來，機(jī)器視覺系統(tǒng)越來越多地基于可變條件進(jìn)行自動化決策。開發(fā)這些系統(tǒng)所需的時間和精力可能會讓人望而卻步。而深度學(xué)習(xí)的出現(xiàn)正在改變這一局面，并使自動化決策觸手可及。開源庫、Nvidia硬件和FLIR相機(jī)等資源正在幫助實(shí)現(xiàn)這一變化。

走進(jìn)深度學(xué)習(xí)

“一張圖片勝過千言萬語”這句話在機(jī)器視覺領(lǐng)域里從未像今天這樣真實(shí)。機(jī)器視覺可以將數(shù)千甚至數(shù)百萬行代碼用簡單地經(jīng)過圖片和少量編碼訓(xùn)練后的的神經(jīng)網(wǎng)絡(luò)所代替。

深度學(xué)習(xí)是一種機(jī)器學(xué)習(xí)形式，它使用在輸入和輸出節(jié)點(diǎn)之間有許多“深層”層的神經(jīng)網(wǎng)絡(luò)。通過在大數(shù)據(jù)集上訓(xùn)練網(wǎng)絡(luò)，可以創(chuàng)建一個模型，用于根據(jù)輸入數(shù)據(jù)進(jìn)行準(zhǔn)確預(yù)測。在用于深度學(xué)習(xí)的神經(jīng)網(wǎng)絡(luò)中，每一層的輸出都被反饋到下一層的輸入。通過改變層之間連接的權(quán)重來迭代優(yōu)化模型。在每個周期中，對模型預(yù)測準(zhǔn)確性的反饋用于指導(dǎo)連接權(quán)重的變化。

深度學(xué)習(xí)有多個不同權(quán)重的神經(jīng)元“層”幫助神經(jīng)網(wǎng)絡(luò)做出決策。深度學(xué)習(xí)可以分為訓(xùn)練和推斷兩個階段。

在訓(xùn)練階段，通過確定神經(jīng)元和神經(jīng)網(wǎng)絡(luò)層的數(shù)量，并使之接觸已被標(biāo)簽化的訓(xùn)練數(shù)據(jù)。有了這些數(shù)據(jù)，神經(jīng)網(wǎng)絡(luò)就可以自己學(xué)習(xí)什么是“好”或“壞”。例如，進(jìn)行水果分級時 ，先向神經(jīng)網(wǎng)絡(luò)展示標(biāo)有“A級”、“B級”、“C級”等標(biāo)簽的水果圖像，然后神經(jīng)網(wǎng)絡(luò)計(jì)算出每個等級的特性；比如大小、形狀、顏色、顏色的一致性等等。我們不需要手動定義這些特征，甚至不需要大小程度進(jìn)行編程，神經(jīng)網(wǎng)絡(luò)將會自行訓(xùn)練。訓(xùn)練階段完成后，便獲得經(jīng)過訓(xùn)練的神經(jīng)網(wǎng)絡(luò)。

使用某一神經(jīng)網(wǎng)絡(luò)對新圖像進(jìn)行評估以做出決策的過程稱為推斷。當(dāng)向訓(xùn)練過的神經(jīng)網(wǎng)絡(luò)呈現(xiàn)一個新的圖像時，它會提供一個推斷（即答案）：例如“A級，可信度為95%。”

Firefly DL

深度學(xué)習(xí)是系統(tǒng)設(shè)計(jì)者快速自動化復(fù)雜和主觀決策、提供更高質(zhì)量產(chǎn)品和提高生產(chǎn)力的強(qiáng)大工具。部署深度學(xué)習(xí)神經(jīng)網(wǎng)絡(luò)的一項(xiàng)值得關(guān)注的優(yōu)勢在于它允許通過少量硬件和處理功率在邊緣作出復(fù)雜決定——低成本 ARM 或 FPGA 基礎(chǔ)系統(tǒng)和全新推斷工業(yè)相機(jī)，如 FLIR Firefly DL 可以做到。

使用Neuro技術(shù)將經(jīng)過訓(xùn)練的神經(jīng)網(wǎng)絡(luò)部署到FLIR的Firefly DL上，并通過在沒有主機(jī)的情況下在相機(jī)上做出決策來降低系統(tǒng)成本和復(fù)雜性。Firefly DL相機(jī)體積小、重量輕、功耗低，是嵌入移動、桌面和手持系統(tǒng)的理想選擇。

主要特征

深度學(xué)習(xí)加快部署&新的可能性：通過深度學(xué)習(xí)快速開發(fā)和部署具有挑戰(zhàn)性的自動化問題的準(zhǔn)確解決方案。相機(jī)上的深度學(xué)習(xí)推理：通過將經(jīng)過培訓(xùn)的網(wǎng)絡(luò)部署到Firefly DL相機(jī)，減少系統(tǒng)成本和復(fù)雜性，從而無需使用主機(jī)系統(tǒng)執(zhí)行分類任務(wù)。非常適合嵌入緊湊型便攜式設(shè)備：27mm×27mm×14mm的小包裝，僅2W功耗和20g重量。

光譜范圍

目前，F(xiàn)irefly DL系列工業(yè)相機(jī)根據(jù)鏡頭接口劃分6個型號，F(xiàn)FY-U3-16S2-DL的感光光譜有彩色和黑白。

應(yīng)用領(lǐng)域

邊緣推理；攝像頭質(zhì)量檢查；目標(biāo)檢測和跟蹤；無人機(jī)與機(jī)器人防撞。