博客專欄

EEPW首頁 > 博客 > 無人機(jī)+ AI 圖像分析:里斯本大學(xué)高效檢測(cè)林業(yè)害蟲

無人機(jī)+ AI 圖像分析:里斯本大學(xué)高效檢測(cè)林業(yè)害蟲

發(fā)布人:數(shù)據(jù)派THU 時(shí)間:2023-06-10 來源:工程師 發(fā)布文章
早期發(fā)現(xiàn)蟲害對(duì)于因地制宜采取防控措施至關(guān)重要。盡管遙感技術(shù)可用于快速掃描大面積區(qū)域,但面對(duì)低強(qiáng)度信號(hào)或難以檢測(cè)的物體,其效果并不盡如人意。因此,里斯本大學(xué)研究人員將無人機(jī)與 AI 圖像分析相結(jié)合,在此基礎(chǔ)上測(cè)試了兩種深度學(xué)習(xí)方法—— FRCNN 及 YOLO 來檢測(cè)早期松異舟蛾巢穴,并且效果顯著。


當(dāng)下,森林資源減少和環(huán)境惡化愈加嚴(yán)重,森林害蟲已然成為全球森林保護(hù)的重要挑戰(zhàn)之一。其中,松異舟蛾 (Thaumetopoea pityocampa) 這類具有破壞力的害蟲引起了廣泛重視。松異舟蛾主要分布在歐洲南部、地中海和北非地區(qū),其幼蟲會(huì)在松樹的樹干和枝條上鉆洞啃食,破壞松樹的生長(zhǎng)和發(fā)育。
為了早期檢測(cè)和防控松異舟蛾,里斯本大學(xué) (University of Lisbon) 研究人員比較了兩種深度學(xué)習(xí)算法,以解決無人機(jī)圖像中的巢穴識(shí)別難題。目前該研究已發(fā)布在《NeoBiota》期刊,標(biāo)題為「Testing early detection of pine processionary moth Thaumetopoea pityocampa nests using UAV-based methods」。
圖片該研究成果已發(fā)表在《NeoBiota》上

論文地址:https://neobiota.pensoft.net/article/95692/
實(shí)驗(yàn)概述
過往,科研人員通常借助遙感技術(shù)(衛(wèi)星等)和多光譜相機(jī)結(jié)合,得到一定區(qū)域內(nèi)的森林覆蓋圖像,并從樹冠顏色、死樹位置等信息判斷整體蟲害情況。然而,由于圖像分辨率很低,無法檢測(cè)到單個(gè)樹木蟲害情況。因此,本實(shí)驗(yàn)中研究人員提出了由無人機(jī)采集圖像的方式。這樣,無人機(jī)能夠接近單個(gè)樹木并對(duì)它們進(jìn)行更細(xì)致的掃描和采集。
研究人員在無人機(jī)獲取的圖像上,測(cè)試了兩種深度學(xué)習(xí)方法——Faster R-CNN (FRNN) 及 YOLO 來檢測(cè)早期松異舟蛾巢穴(以下簡(jiǎn)稱巢穴),具體實(shí)驗(yàn)過程如下:
研究選址 
研究人員在法國、意大利和葡萄牙各選擇了 1 個(gè)研究地點(diǎn)。如圖 1 所示,這 3 個(gè)地點(diǎn)之間樹齡、密度等特征均不相同。
圖片圖 1:研究地點(diǎn)情況
a:葡萄牙松樹林
b:法國松樹林
c:意大利黑松林
在 3 個(gè)地點(diǎn)中,研究人員都采用了地面計(jì)數(shù) (2 名觀察員分別目測(cè)樹木兩側(cè)) 來檢測(cè)巢穴數(shù)量,除此之外,圖 1b 所示的法國松樹林中,研究人員還站在一個(gè)位于樹冠上方 2 米的移動(dòng)平臺(tái)上,來檢測(cè)巢穴數(shù)量。
數(shù)據(jù)集 
研究人員使用了無人機(jī)加高清攝像頭的方式采集了 3 個(gè)樣地的圖像,其中高清 (HD) 攝像機(jī) (RGB HD SONY Alpha 7R) 最佳應(yīng)用性能方案確定為:采用具有 35mm 焦距和至少 36 Mpix 分辨率的 RGB HD 傳感器,而無人機(jī)則選擇了 DJI Matrice 300 多旋翼無人機(jī)平臺(tái),并制定了 80% 的航跡內(nèi)部和橫跨航跡的重疊度。
最終,研究人員得到了無人機(jī)收集的 22,904 張圖像作為數(shù)據(jù)集,并通過數(shù)據(jù)增強(qiáng)技術(shù),如改變亮度、色調(diào)、噪聲及圖像壓縮等操作無人機(jī)圖像,生成新的數(shù)據(jù)集,使模型更好地學(xué)習(xí)和泛化。其中,該數(shù)據(jù)集的 80% 用于模型訓(xùn)練,20% 用于測(cè)試。
 實(shí)驗(yàn)過程
無人機(jī)模型 
考慮到一些巢穴只能從側(cè)面看到,研究人員用模型檢測(cè)主要針對(duì)的是單張無人機(jī)正射圖像而非全局正射圖像,因?yàn)槿謭D像是垂直視角,容易造成遺漏。無人機(jī)正射圖像是指通過對(duì)無人機(jī)采集的圖像進(jìn)行處理,使其在地圖上的位置和比例與現(xiàn)實(shí)世界中的位置和比例一致。
研究團(tuán)隊(duì)訓(xùn)練了基于 FRCNN 和 YOLO 的兩種深度學(xué)習(xí)模型,同時(shí)為了評(píng)估模型檢測(cè)無人機(jī)圖像的結(jié)果,還配備 1 名觀測(cè)員對(duì)每張圖像上的巢穴數(shù)量進(jìn)行了視覺評(píng)估。
研究人員使用了 F1 得分具體衡量模型與人眼檢測(cè) (human eye) 在無人機(jī)、地面圖像上的性能。其中 F1 得分計(jì)算公式如下圖:
圖片圖 2:F1 計(jì)算公式
F1 得分是精確率和召回率的調(diào)和平均值,可用來評(píng)估模型的準(zhǔn)確性和完整性。其取值范圍為 0 到 1,越接近 1 表示模型的性能越好。
實(shí)驗(yàn)結(jié)果 
研究人員將 FRCNN 及 YOLO 模型與人眼檢測(cè)進(jìn)行了比較,測(cè)試了模型在檢測(cè)樹上有無巢穴存在 (% infested trees) 和巢穴數(shù)量 (No. PPM nests) 的性能。
圖片表 1:不同方式檢測(cè)松異舟蛾巢穴情況
如表 1 所示,通過地面計(jì)數(shù),人眼對(duì)整個(gè)研究范圍內(nèi)樹木一共目測(cè)到 665 個(gè)巢穴;而通過目測(cè)無人機(jī)圖像,則檢測(cè)到 222 個(gè)巢穴。研究人員認(rèn)為造成二者差異的原因是地面目測(cè)具有多維觀測(cè)角度,而無人機(jī)局限于從上方進(jìn)行拍攝。不過,無人機(jī)圖像具有其自身優(yōu)勢(shì),因?yàn)榈孛嬖敿?xì)檢測(cè)需要耗費(fèi)較高成本,而無人機(jī)可以告知人們存在的風(fēng)險(xiǎn)并進(jìn)一步采取行動(dòng)進(jìn)行詳細(xì)的地面檢測(cè)。
下圖是兩種模型在 3 個(gè)樣地?zé)o人機(jī)圖像上的巢穴存在檢測(cè)和每棵樹上巢穴數(shù)量檢測(cè)的 F1 得分。
圖片圖 3:兩種模型對(duì)無人機(jī)圖像檢測(cè) F1 得分
a:檢測(cè)無人機(jī)圖像上的巢穴存在
b:檢測(cè)每棵樹上巢穴數(shù)量
如圖 3 所示,檢測(cè)無人機(jī)圖像上的巢穴,YOLO 模型 F1 得分高達(dá) 0.826,檢測(cè)每棵樹上巢穴數(shù)量,YOLO 模型 F1 得分高達(dá) 0.696。同時(shí),研究人員發(fā)現(xiàn) YOLO 模型的檢測(cè)性能高于 FRCNN。下圖是在不同研究地點(diǎn)(不同松樹品種),兩種模型在檢測(cè)無人機(jī)圖像時(shí)的 F1 得分。
圖片圖 4:不同研究地點(diǎn),兩種模型 F1 得分
a: 檢測(cè)無人機(jī)圖像上的巢穴存在b: 檢測(cè)每棵樹上巢穴數(shù)量
如圖 4 所示,在 3 個(gè)樣地,無論是檢測(cè)巢穴存在還是檢測(cè)每棵樹上巢穴的數(shù)量,YOLO 模型 F1 得分均優(yōu)于 FRCNN 模型。
綜上,研究人員提出,無人機(jī)和 AI 模型相結(jié)合能夠有效地對(duì)松異舟蛾巢穴進(jìn)行早期檢測(cè)。其中,無人機(jī)有如下優(yōu)點(diǎn):

  • 高效性:無人機(jī)可以快速地覆蓋大面積的地區(qū),收集大量的數(shù)據(jù)。
  • 高精度:無人機(jī)搭載的高分辨率相機(jī)可以捕捉到非常精細(xì)的圖像和視頻,從而使無人機(jī)可以提供高精度的數(shù)據(jù)。

針對(duì)無人機(jī)圖像上的巢穴檢測(cè)及巢穴數(shù)量檢測(cè),YOLO 模型都表現(xiàn)優(yōu)異。這表明相關(guān)技術(shù)的結(jié)合,在監(jiān)測(cè)和管理森林中的害蟲和病害方面具有重要意義,同時(shí)也為保護(hù)森林生態(tài)系統(tǒng)提供了新的思路。
 無人機(jī)+ AI:科技領(lǐng)域的重要趨勢(shì)
目前看來,無人機(jī)+ AI 已成為國內(nèi)外森林保護(hù)發(fā)展的共識(shí)。通過無人機(jī)的高空視角和人工智能的分析,研究人員執(zhí)行任務(wù)時(shí)能夠更高效、準(zhǔn)確和自動(dòng)化,從而改善森林保護(hù)效率。

聚焦國內(nèi),中國科學(xué)院發(fā)布的「森林病蟲害遙感監(jiān)測(cè)——從衛(wèi)星到無人機(jī)」報(bào)告中詳細(xì)介紹了森林病蟲害的類型、發(fā)展階段以及檢測(cè)方法,并提出未來森林保護(hù)工作的重要方向之一正是發(fā)展預(yù)測(cè)模型,實(shí)現(xiàn)預(yù)測(cè)和檢測(cè)方法的無縫對(duì)接,這與本論文的研究成果不謀而合。

報(bào)告地址:

https://bit.ly/3oJgDWf


可以看到,無人機(jī)+ AI 為森林保護(hù)工作帶來了新的機(jī)遇和挑戰(zhàn),為提升效率和保護(hù)森林資源發(fā)揮了重要作用。然而,無人機(jī)與人工智能的融合同時(shí)也面臨一系列挑戰(zhàn)。一方面,需要不斷推動(dòng)無人機(jī)和人工智能的發(fā)展,提高性能和穩(wěn)定性。另一方面,在數(shù)據(jù)安全和隱私保護(hù)方面,需要相關(guān)政策和規(guī)范,以確保無人機(jī)和人工智能應(yīng)用能安全地處理和存儲(chǔ)數(shù)據(jù)。

*博客內(nèi)容為網(wǎng)友個(gè)人發(fā)布,僅代表博主個(gè)人觀點(diǎn),如有侵權(quán)請(qǐng)聯(lián)系工作人員刪除。



關(guān)鍵詞: AI

相關(guān)推薦

技術(shù)專區(qū)

關(guān)閉