基于高速雙DSP的柔性機(jī)載實(shí)時(shí)圖像跟蹤系統(tǒng)研究

摘要：給出了以兩片高性能TMS320C6414作為核心處理器，并輔以FPGA來(lái)實(shí)現(xiàn)系統(tǒng)邏輯時(shí)序控制，從而組成雙DSP柔性機(jī)載實(shí)時(shí)圖像處理系統(tǒng)的設(shè)計(jì)方案。同時(shí)對(duì)系統(tǒng)的硬件資源選擇及工作流程進(jìn)行了討論。

關(guān)鍵詞：DSP；并行處理；FPGA；柔性；超高速

１ 引言

利用可見(jiàn)光成像與紅外成像傳感器實(shí)現(xiàn)實(shí)時(shí)目標(biāo)成像跟蹤是精確制導(dǎo)武器及機(jī)載成像光電系統(tǒng)研究的核心技術(shù)。伴隨著實(shí)戰(zhàn)環(huán)境日益復(fù)雜以及偽裝、隱身等目標(biāo)特性控制技術(shù)的飛速發(fā)展，機(jī)載實(shí)時(shí)圖像跟蹤系統(tǒng)的應(yīng)用也日益廣泛與深入。當(dāng)跟蹤目標(biāo)并非一般地面慢速目標(biāo)，而是其它快速運(yùn)動(dòng)目標(biāo)?如：低空導(dǎo)彈、無(wú)人駕駛飛機(jī)等?時(shí)，系統(tǒng)將要求現(xiàn)有機(jī)載實(shí)時(shí)圖像跟蹤系統(tǒng)具有更高的技術(shù)性能。基于此，為了進(jìn)一步提高現(xiàn)有機(jī)載光電跟蹤系統(tǒng)在實(shí)戰(zhàn)環(huán)境中，針對(duì)復(fù)雜場(chǎng)景下快速運(yùn)動(dòng)目標(biāo)實(shí)施實(shí)時(shí)跟蹤的魯棒性與穩(wěn)定性，筆者提出以雙ＤＳＰ和ＦＰ-ＧＡ為核心來(lái)構(gòu)建主從式超高速并行處理體系的設(shè)計(jì)思想，并研究開(kāi)發(fā)了基于雙ＤＳＰ的新型柔性機(jī)載實(shí)時(shí)圖像跟蹤系統(tǒng)。一方面，采用雙ＤＳＰ體系結(jié)構(gòu)實(shí)現(xiàn)系統(tǒng)任務(wù)的并行劃分使本系統(tǒng)具備極高的運(yùn)算處理速度；另一方面，現(xiàn)場(chǎng)可編程邏輯器件ＦＰＧＡ的引入使系統(tǒng)的靈活性也得到極大的提高。而將兩者結(jié)合可使本系統(tǒng)充分體現(xiàn)新一代機(jī)載實(shí)時(shí)圖像跟蹤系統(tǒng)更快速、更精確、更靈活的特點(diǎn)。

圖1

２ ＴＭＳ３２０Ｃ６４１４的結(jié)構(gòu)特點(diǎn)

美國(guó)德州儀器公司（ＴＩ）推出的新一代數(shù)字信號(hào)處理器ＴＭＳ３２０Ｃ６４１４（以下簡(jiǎn)稱Ｃ６４１４）的主頻為４００ＭＨｚ～７００ＭＨｚ，其數(shù)據(jù)處理能力為３２００ＭＩＰＳ～５７６０ＭＩＰＳ。該器件的結(jié)構(gòu)框圖如圖１所示。其主要特點(diǎn)如下：

（１）ＤＳＰ內(nèi)核采用超長(zhǎng)指令字（ＶＬＩＷ）體系結(jié)構(gòu)，有８?jìng)€(gè)功能單元、６４個(gè)３２ｂｉｔ通用寄存器，一個(gè)時(shí)鐘周期可同時(shí)執(zhí)行８條指令，運(yùn)算能力可以達(dá)到５７６０ＭＩＰＳ；

（２）為了使數(shù)據(jù)能滿足超高速ＤＳＰ內(nèi)核的需求，Ｃ６４１４采用了兩級(jí)超高速緩沖存儲(chǔ)器，即１６ｋ Ｂｙｔｅ的一級(jí)數(shù)據(jù)Ｃａｃｈｅ、１６ｋ Ｂｙｔｅ的一級(jí)程序Ｃａｃｈｅ和１０２４ｋ Ｂｙｔｅ的數(shù)據(jù)和程序統(tǒng)一內(nèi)存。

（３）增加了直接處理打包數(shù)據(jù)指令，可建立無(wú)縫的數(shù)據(jù)流，以提高指令集的效率；

（４）每個(gè)功能單元在硬件上都增加了附加功能，從而增強(qiáng)了指令集的正交性。

３ 系統(tǒng)硬件設(shè)計(jì)

本光電成像跟蹤系統(tǒng)硬件平臺(tái)由六部分組成：圖像采集與預(yù)處理模塊、同步分離模塊、ＦＰＧＡ邏輯控制模塊、雙ＤＳＰ＋雙口ＲＡＭ 圖像處理模塊、異步通信模塊和圖形顯示模塊。其系統(tǒng)原理框圖如２所示。從圖２可以知道：紅外探測(cè)器及可見(jiàn)光攝像儀輸出的模擬視頻信號(hào)經(jīng)多路信號(hào)選擇芯片導(dǎo)入之后，經(jīng)箝位、放大、濾波以及去同步頭等預(yù)處理后，一路經(jīng)Ａ／Ｄ轉(zhuǎn)換器將模擬視頻轉(zhuǎn)換為８ｂｉｔ數(shù)字信號(hào)并導(dǎo)入片外視頻緩存１、２，而后等待ＦＰＧＡ?xí)r序控制ＤＳＰ外部中斷，以便將全部緩存數(shù)據(jù)搬移到ＤＳＰ片內(nèi)的２級(jí)緩存，再通過(guò)系統(tǒng)任務(wù)劃分實(shí)現(xiàn)數(shù)據(jù)重組，然后分別在主從ＤＳＰ進(jìn)行同步并行數(shù)據(jù)處理，并將中間結(jié)果由主ＤＳＰ綜合，最后在完成后續(xù)運(yùn)算后給出最終匹配結(jié)果。與此同時(shí)，主ＤＳＰ則通過(guò)寫圖形顯示緩存將目標(biāo)匹配位置信息傳遞到外界；另一路模擬信號(hào)先導(dǎo)入同步分離器，然后提取行場(chǎng)同步信號(hào)送交ＦＰＧＡ作為時(shí)基，以產(chǎn)生系統(tǒng)各級(jí)時(shí)序控制信號(hào)；第三路模擬信號(hào)送給圖形疊加電路作為輸入疊加信號(hào)之一，當(dāng)場(chǎng)正程來(lái)到時(shí)，ＦＰＧＡ中斷控制并讀出圖形存儲(chǔ)器數(shù)據(jù)，同時(shí)在ＦＰＧＡ片內(nèi)實(shí)現(xiàn)讀入數(shù)據(jù)的并／串轉(zhuǎn)換后移位輸出至圖形疊加電路，此時(shí)兩路信號(hào)將會(huì)合送入視頻監(jiān)視器，從而完成視頻圖像上圖形的顯示。整個(gè)系統(tǒng)工作期間，每隔８０ｍｓ主ＤＳＰ還通過(guò)異步收發(fā)器與外部上位機(jī)進(jìn)行串行通信，以便系統(tǒng)能夠?qū)崟r(shí)接收外部命令與目標(biāo)參數(shù)?進(jìn)而調(diào)整跟蹤系統(tǒng)的工作狀態(tài)。

３．１ 圖像采集與預(yù)處理模塊

本系統(tǒng)中的多路選擇器件選用ＣＤ４０５２芯片。它能根據(jù)不同的工作場(chǎng)合來(lái)切換紅外／可見(jiàn)光視頻輸入；視頻預(yù)處理電路采用ＡＤ８１７進(jìn)行視頻信號(hào)的放大，以得到更清晰的信號(hào)來(lái)進(jìn)行視頻處理；Ａ／Ｄ芯片選用ＡＤ公司的ＡＤ９２２５，輸出的８ｂｉｔ數(shù)字視頻信號(hào)送入７４ＬＳ２４５進(jìn)行數(shù)據(jù)鎖存。

３．２ 同步分離模塊

系統(tǒng)采用一款專門的視頻同步分離器ＬＭ１８８１來(lái)從標(biāo)準(zhǔn)的負(fù)同步ＮＴＳＣ(ＰＡＬ或ＳＥＣＡＭ)視頻信號(hào)中分離出有效的行／場(chǎng)同步信號(hào)，并將其送入ＦＰＧＡ以產(chǎn)生系統(tǒng)的各級(jí)邏輯控制輸出。

３．３ ＦＰＧＡ邏輯控制模塊

由于系統(tǒng)中各個(gè)芯片的功能相對(duì)獨(dú)立，要協(xié)調(diào)這些芯片的運(yùn)作?就需要一片起控制邏輯作用的可編程芯片，為此，筆者選用了ＡＬＴＥＲＡＬ公司的ＥＰＦ１０Ｋ３０Ａ，該芯片有２４６個(gè)用戶Ｉ／Ｏ口、３００００個(gè)典型門、２１６個(gè)邏輯陣列塊、１７２８?jìng)€(gè)邏輯單元?不僅能滿足系統(tǒng)的控制要求，而且也可以為將來(lái)系統(tǒng)的功能擴(kuò)展提供控制邏輯。在這個(gè)光電跟蹤系統(tǒng)中，ＦＰＧＡ主要用來(lái)完成如下幾方面的工作：

（１）生成Ａ／Ｄ采樣控制時(shí)鐘，實(shí)現(xiàn)模擬視頻的正確采樣；

（２）提供字符圖形存儲(chǔ)器地址及片選／讀控制信號(hào)，并在場(chǎng)正程到來(lái)時(shí)，控制圖形數(shù)據(jù)的讀出；

（３）提供視頻數(shù)據(jù)緩存器地址及片選／寫控制信號(hào)，控制視頻數(shù)據(jù)的連續(xù)寫入；

（４）產(chǎn)生外部中斷４至雙ＤＳＰ，當(dāng)數(shù)據(jù)寫滿視頻圖像高速緩存預(yù)定空間時(shí)，控制主從ＤＳＰ以將數(shù)據(jù)塊快速搬移至片內(nèi)２級(jí)緩存；

（５）產(chǎn)生外部中斷７至主ＤＳＰ，并在每個(gè)場(chǎng)逆程時(shí)刻來(lái)到時(shí)，控制主ＤＳＰ擦、寫字符圖形存儲(chǔ)器數(shù)據(jù)；

（６）產(chǎn)生一并／串轉(zhuǎn)換電路，以將并行讀入的字符圖形數(shù)據(jù)串行移位輸出至圖形疊加電路，從而實(shí)現(xiàn)“＋”、“□”圖形在視頻圖像上的疊加。

其ＦＰＧＡ內(nèi)部結(jié)構(gòu)框圖如圖３所示。

３．４ 雙ＤＳＰ＋雙口ＲＡＭ 圖像處理模塊

高速并行數(shù)字信號(hào)處理電路以雙ＤＳＰ為并行運(yùn)算處理核心單元，并輔以雙口ＲＡＭ來(lái)實(shí)現(xiàn)視頻圖像的高速緩存，從而完成大運(yùn)算量的高速實(shí)時(shí)目標(biāo)跟蹤處理任務(wù)。該并行處理系統(tǒng)的組成與功能分述如下：

ａ． 視頻圖像高速緩存子模塊

為了實(shí)現(xiàn)圖像的實(shí)時(shí)采集與高速處理，本系統(tǒng)用兩片雙口ＲＡＭ組成相互獨(dú)立的視頻緩存，分別對(duì)應(yīng)主／從ＤＳＰ處理器。設(shè)計(jì)時(shí)選用ＩＤＴ公司的３．３Ｖ 異步雙口ＰＲＡＭ ＩＤＴ７０Ｖ６５７，同時(shí)與ＤＳＰ接口采用ＡＳＲＡＭ方式。由于ＥＭＩＦ的ＡＳＲＡＭ接口支持３２Ｂｉｔ的數(shù)據(jù)接口，因此，利用ＩＤＴ７０Ｖ６５７構(gòu)成不完全地址結(jié)構(gòu)來(lái)存取數(shù)據(jù)能夠更好地實(shí)現(xiàn)８Ｂｉｔ鎖存數(shù)據(jù)與Ｃ６４１４的接口，而無(wú)須對(duì)ＤＰＲＡＭ進(jìn)行寬度擴(kuò)展。同時(shí)亦可減少ＤＳＰ讀取外部數(shù)據(jù)的時(shí)間開(kāi)銷。

ＩＤＴ７０Ｖ６５７的大小是３２Ｋ３６Ｂｉｔ?系統(tǒng)采用將兩個(gè)ＤＰＲＡＭ各劃分為前后兩個(gè)半場(chǎng)的方式來(lái)實(shí)現(xiàn)存取數(shù)據(jù)時(shí)的乒乓切換。即在系統(tǒng)工作的任一時(shí)刻，當(dāng)對(duì)ＤＰＲＡＭ前半場(chǎng)寫入數(shù)據(jù)時(shí)，使ＤＰＲＡＭ后半場(chǎng)向ＤＳＰ讀出數(shù)據(jù)。當(dāng)前半場(chǎng)寫滿視頻數(shù)據(jù)時(shí)，由ＦＰＧＡ給ＤＳＰ發(fā)出中斷信號(hào)，以通知ＤＳＰ讀出ＤＰＲＡＭ前半場(chǎng)所寫入數(shù)據(jù)，同時(shí)，將Ａ／Ｄ轉(zhuǎn)換器的數(shù)據(jù)寫入ＤＰＲＡＭ后半場(chǎng)緩沖空間，如此反復(fù)進(jìn)行來(lái)實(shí)現(xiàn)數(shù)據(jù)的讀出與寫入同步操作。

ｂ． 雙ＤＳＰ高速信號(hào)處理系統(tǒng)

ＴＭＳ３２０Ｃ６４１４－６００型ＤＳＰ的主頻高達(dá)６００ＭＨｚ，在超高速實(shí)時(shí)圖像處理領(lǐng)域有著非常出色的性能。本系統(tǒng)的雙ＤＳＰ高速實(shí)時(shí)信號(hào)處理系統(tǒng)就以２片Ｃ６４１４－６００ ＤＳＰ芯片為核心組成鄰域圖像并行處理機(jī)，并通過(guò)系統(tǒng)任務(wù)的劃分與分解實(shí)現(xiàn)同步并行運(yùn)算處理。其系統(tǒng)框圖如圖４所示。

在本系統(tǒng)中，主ＤＳＰ完成的主要功能如下：

（１） 實(shí)現(xiàn)外部緩存數(shù)據(jù)到片內(nèi)的搬移，為ＤＳＰ高速批處理開(kāi)辟片內(nèi)二級(jí)緩存；

（２） 實(shí)現(xiàn)與外部上位機(jī)的即時(shí)通訊，接收外部命令與目標(biāo)參數(shù)；

（３） 實(shí)現(xiàn)與從ＤＳＰ的即時(shí)通信，下傳命令字與目標(biāo)參數(shù)以及獲取中間結(jié)果；

（４） 運(yùn)行系統(tǒng)跟蹤算法，承擔(dān)系統(tǒng)核心運(yùn)算任務(wù)的一半；

（５） 與ＦＰＧＡ建立即時(shí)通信，實(shí)現(xiàn)系統(tǒng)程序模塊的調(diào)度與協(xié)調(diào)；

從ＤＳＰ完成的主要功能是：

(１) 實(shí)現(xiàn)外部緩存數(shù)據(jù)到片內(nèi)的搬移，為ＤＳＰ高速批處理開(kāi)辟片內(nèi)二級(jí)緩存；

（２）運(yùn)行系統(tǒng)跟蹤算法，承擔(dān)系統(tǒng)核心運(yùn)算任務(wù)的一半；

（３）實(shí)現(xiàn)與主ＤＳＰ的即時(shí)通信，上傳匹配運(yùn)算中間結(jié)果；

（４）與ＦＰＧＡ建立即時(shí)通信，實(shí)現(xiàn)系統(tǒng)程序模塊的調(diào)度與協(xié)調(diào)。

雙ＤＳＰ處理系統(tǒng)的柔性特色體現(xiàn)在：可依據(jù)實(shí)時(shí)環(huán)境需要加載不同的跟蹤算法來(lái)實(shí)現(xiàn)目標(biāo)跟蹤。算法運(yùn)行之初,兩片Ｃ６４１４－６００都在ＦＰＧＡ的控制下，通過(guò)ＥＭＩＦＡ口以ＥＤＭＡ方式，分若干次,依系統(tǒng)跟蹤算法而定?將外部視頻緩存中的數(shù)據(jù)（一場(chǎng)圖像）依次讀入ＤＳＰ的Ｌ２片內(nèi)緩存中；算法運(yùn)行之后,主從ＤＳＰ則通過(guò)ＭｃＢＳＰ直接互接來(lái)實(shí)現(xiàn)雙ＤＳＰ間的高速同步通信?以便交換數(shù)據(jù)處理結(jié)果。

系統(tǒng)設(shè)計(jì)中，Ｆｌａｓｈ ＲＯＭ選用ＡＭＤ公司的ＡＭ２９ＬＶ８００（１Ｍ８Ｂｉｔ）來(lái)把ＦＬＡＳＨ映射到ＤＳＰ統(tǒng)一編址地址空間ＥＭＩＦＢ口的ＣＥ１空間。當(dāng)系統(tǒng)上電復(fù)位后，該地址空間為首先引導(dǎo)區(qū)域，這樣即可將應(yīng)用程序代碼加載到片內(nèi)高速執(zhí)行，從而實(shí)現(xiàn)系統(tǒng)的脫機(jī)運(yùn)行。

３．５ 異步通信模塊

本系統(tǒng)與外部上位機(jī)的異步通信主要通過(guò)主ＤＳＰ的ＭｃＢＳＰ。Ｃ６０００的ＭｃＢＳＰ是一個(gè)功能非常強(qiáng)大的標(biāo)準(zhǔn)串口,支持全雙工串行通信，它的雙緩沖數(shù)據(jù)寄存器允許連續(xù)的數(shù)據(jù)流,可與多達(dá)１２８?jìng)€(gè)通道進(jìn)行收發(fā)通信。通過(guò)對(duì)ＭｃＢＳＰ的ＳＰＣＲ、ＲＣＲ、ＸＣＲ、ＳＲＧＲ、ＰＣＲ寄存器的配置可實(shí)現(xiàn)系統(tǒng)通信時(shí)收發(fā)數(shù)據(jù)的幀同步和時(shí)鐘同步。

由于外部上位機(jī)的通訊機(jī)制是ＲＳ４２２標(biāo)準(zhǔn)，而ＤＳＰ與外部通信只提供ＲＳ２３２接口，故應(yīng)采用一片ＭＡＸ３０７４芯片來(lái)實(shí)現(xiàn)ＲＳ４２２到ＲＳ２３２的轉(zhuǎn)換。ＭＡＸ３０７４是ＭＡＸＩＭ公司生產(chǎn)的一款專門用于ＲＳ４２２／４８５至ＲＳ２３２的轉(zhuǎn)接芯片，采用３．３Ｖ供電，這與Ｃ６０００ ＤＳＰ 外圍供電電壓一致，連接非常方便，不再需要多余的電壓適配器。另一方面，由于ＭｃＢＳＰ為同步串口，為了實(shí)現(xiàn)ＭｃＢＳＰ與ＲＳ２３２的無(wú)縫連接，可通過(guò)軟件加入發(fā)送擴(kuò)展算法與接收壓縮算法，從而實(shí)現(xiàn)ＤＳＰ與上位機(jī)異步串口通信協(xié)議的握手。

３．６ 圖形顯示模塊

該模塊由圖形存儲(chǔ)器、圖形疊加電路和視頻監(jiān)視器組成。圖形存儲(chǔ)器選擇ＩＤＴ公司的７０Ｖ０８（６４Ｋ８Ｂｉｔｓ）ＤＰＲＡＭ來(lái)存儲(chǔ)標(biāo)識(shí)目標(biāo)匹配位置的圖形數(shù)據(jù)。圖形疊加電路用于實(shí)現(xiàn)視頻與圖形的疊加，并最終由視頻監(jiān)視器顯示疊加結(jié)果。

４　系統(tǒng)工作流程

本系統(tǒng)的軟件工作模式包括復(fù)位和初始化模式、運(yùn)行模式、系統(tǒng)維護(hù)模式，可由系統(tǒng)程序來(lái)控制三種模式的切換。

在復(fù)位和初始化模式下，系統(tǒng)啟動(dòng)后將由主從ＤＳＰ同步實(shí)現(xiàn)程序搬移,把程序代碼搬移到片內(nèi)并運(yùn)行系統(tǒng)程序，從而初始化主從ＤＳＰ的運(yùn)行環(huán)境并設(shè)置相關(guān)參數(shù)。

運(yùn)行模式下，雙ＤＳＰ一方面獨(dú)立響應(yīng)并處理ＦＰＧＡ中斷、運(yùn)行核心跟蹤算法并實(shí)現(xiàn)子系統(tǒng)內(nèi)的進(jìn)程調(diào)度；另一方面通過(guò)主從ＤＳＰ串口間的互連響應(yīng)中斷以及主ＤＳＰ串口與遠(yuǎn)程主機(jī)的通訊等功能來(lái)實(shí)現(xiàn)雙ＤＳＰ子系統(tǒng)間和雙ＤＳＰ系統(tǒng)與外部主機(jī)的進(jìn)程調(diào)度。

系統(tǒng)維護(hù)模式下，主從ＤＳＰ在進(jìn)行系統(tǒng)自檢后，可由遠(yuǎn)程主機(jī)通過(guò)ＲＳ４２２接口與主ＤＳＰ進(jìn)行通訊，以實(shí)現(xiàn)程序的更新下載和參數(shù)修改等功能。圖５為系統(tǒng)軟件工作流程框圖。

５　結(jié)束語(yǔ)

筆者對(duì)該系統(tǒng)的實(shí)時(shí)性進(jìn)行了仿真測(cè)試，結(jié)果分析表明：

（１）單ＤＳＰ只能實(shí)現(xiàn)開(kāi)窗搜索，高速場(chǎng)合下一旦目標(biāo)逃逸搜索區(qū)，將導(dǎo)致目標(biāo)丟失；而本系統(tǒng)能夠?qū)崿F(xiàn)基于整場(chǎng)搜索的大運(yùn)算量高速處理，從而加大了被跟蹤目標(biāo)搜索區(qū)的動(dòng)態(tài)范圍，避免了目標(biāo)丟失情況的發(fā)生，進(jìn)一步提高了實(shí)時(shí)跟蹤的可靠性。

（２）傳統(tǒng)單ＤＳＰ系統(tǒng)一般只能實(shí)現(xiàn)基于一幀的匹配性能，而本系統(tǒng)可實(shí)現(xiàn)基于逐場(chǎng)的跟蹤匹配，進(jìn)一步提高了跟蹤系統(tǒng)的實(shí)時(shí)性。

（３）根據(jù)實(shí)際場(chǎng)合的需要，本系統(tǒng)可通過(guò)軟件選擇加載跟蹤算法，從而極大的增強(qiáng)了系統(tǒng)的通用性和易維護(hù)性，體現(xiàn)出柔性處理系統(tǒng)的特色。

由此可見(jiàn)，雙ＤＳＰ柔性處理系統(tǒng)為復(fù)雜場(chǎng)景下快速移動(dòng)目標(biāo)的高速識(shí)別與跟蹤提供了一個(gè)有效的實(shí)現(xiàn)方案,同時(shí)也為機(jī)載實(shí)時(shí)圖像跟蹤系統(tǒng)提供了新的高速處理平臺(tái)。