虛擬觸摸屏系統(tǒng)的實(shí)現(xiàn)方案

1 引言

　　目前，普通觸摸屏主要有紅外線式、電阻式、表面聲波式、電容式等類型，然而這些類型的大屏幕尤其是超大屏幕觸摸屏產(chǎn)品，均存在價(jià)格昂貴、通用性差、穩(wěn)定性差、準(zhǔn)確性差的問(wèn)題。現(xiàn)在實(shí)現(xiàn)了一種基于攝像頭的虛擬觸摸屏系統(tǒng)，改變了傳統(tǒng)的觸摸屏的實(shí)現(xiàn)技術(shù)，它由多個(gè)攝像頭拍攝手指在虛擬觸摸屏上的移動(dòng)和點(diǎn)擊操作，從拍攝的圖像中將人手區(qū)域分割出來(lái)，進(jìn)而提取手指的邊緣輪廓，將手指輪廓的B 樣條曲線的第4 個(gè)控制點(diǎn)定義為手指位置，由二維坐標(biāo)射影變換公式轉(zhuǎn)換進(jìn)而獲得手指在顯示屏幕上的位置坐標(biāo)。這一技術(shù)方案本質(zhì)是用多個(gè)攝像頭將手指及觸摸屏的三維圖像轉(zhuǎn)換成多個(gè)二維圖像，進(jìn)而從這些二維圖像中識(shí)別出手指及手指的移動(dòng)、點(diǎn)擊等動(dòng)作。因?yàn)榕臄z的圖像必須包含顯示屏幕，所以攝像頭必須放置在顯示屏幕的前方，對(duì)于大屏幕觸摸屏必然存在人體遮擋無(wú)法識(shí)別手指的問(wèn)題。該文設(shè)計(jì)的虛擬觸摸屏系統(tǒng)由一維圖像采集裝置采集手指在虛擬觸摸屏上的一維數(shù)據(jù)，由多個(gè)一維數(shù)據(jù)識(shí)別手指在二維虛擬觸摸屏上的位置坐標(biāo)，從而完成人機(jī)交互。

　　2 系統(tǒng)概述

　　虛擬觸摸屏系統(tǒng)由至少兩個(gè)一維圖像采集裝置、顯示屏和數(shù)據(jù)處理裝置組成。一維圖像采集裝置設(shè)置在虛擬觸摸屏的四周，每個(gè)一維圖像采集裝置獲取的一維圖像所在面與虛擬觸摸屏處于同一平面;虛擬觸摸屏與顯示屏幕的形狀和尺寸完全相同，虛擬觸摸屏與顯示屏幕處在同一平面內(nèi)，或虛擬觸摸屏處于顯示屏幕的正前方且平行于顯示屏幕;多個(gè)一維圖像采集裝置將手指在虛擬觸摸屏上的位置和點(diǎn)擊動(dòng)作轉(zhuǎn)換成多個(gè)一維圖像中的點(diǎn)及點(diǎn)的有無(wú)，數(shù)據(jù)處理裝置根據(jù)一維圖像中點(diǎn)的信息識(shí)別手指在虛擬觸摸屏中的兩維直角坐標(biāo)，并執(zhí)行相應(yīng)的操作，完成人機(jī)交互功能。它結(jié)構(gòu)簡(jiǎn)單，實(shí)現(xiàn)方便，造價(jià)低廉，解決了使用圖像技術(shù)實(shí)現(xiàn)的普通觸摸屏存在的人體遮擋手指的問(wèn)題，特別適用于大屏幕觸摸系統(tǒng)。一維圖像采集裝置采用一維線性傳感器，配合設(shè)置鏡頭、信號(hào)轉(zhuǎn)換和接口電路實(shí)現(xiàn);或采用兩維圖像采集裝置攝像頭，以攝像頭采集到的兩維圖像中的一行或一列的圖像數(shù)據(jù)作為所需的一維圖像數(shù)據(jù)。

　　系統(tǒng)結(jié)構(gòu)如圖1所示。

　　與已有技術(shù)相比，該設(shè)計(jì)的優(yōu)點(diǎn)體現(xiàn)在：

　　(1)圖像采集裝置設(shè)置在虛擬觸摸屏的四周，其拍攝方向與虛擬觸摸屏平行，從根本上解決了人體遮擋引起手指無(wú)法識(shí)別的問(wèn)題，尤其是因其避免了人體遮擋的問(wèn)題，因而可以擴(kuò)展到投影屏幕、普通墻面等任何大屏幕，通用性好。

　　(2)只需進(jìn)行一維圖像數(shù)據(jù)的處理，相比于二維圖像的數(shù)據(jù)處理，其過(guò)程大為簡(jiǎn)化、算法簡(jiǎn)單。

　　(3)采用一維線性傳感器，配合設(shè)置鏡頭、信號(hào)轉(zhuǎn)換和接口電路，其配置簡(jiǎn)單，價(jià)格便宜。

　　(4)也可以采用兩維圖像采集裝置攝像頭，以兩維圖像中的一行或一列的圖像數(shù)據(jù)作為所需的一維圖像數(shù)據(jù)，易于實(shí)施。

　　(5)一般情況下只要使用兩個(gè)圖像采集裝置。使用兩個(gè)以上圖像采集裝置可以減小圖像采集裝置與顯示屏之間的距離，對(duì)于較大屏幕來(lái)說(shuō)，可以使整個(gè)系統(tǒng)更加緊湊。

　　3 實(shí)現(xiàn)原理

　　由于攝像頭價(jià)格便宜，易于獲得，于是將系統(tǒng)結(jié)構(gòu)圖中的一維圖像采集裝置由攝像頭來(lái)替代，由其拍攝的二維圖像中的一維圖像數(shù)據(jù)來(lái)識(shí)別二維顯示屏幕上的位置坐標(biāo)。由于攝像頭鏡片與虛擬觸摸屏垂直，當(dāng)用戶進(jìn)行手指觸摸操作時(shí)，手指的運(yùn)動(dòng)平面與虛擬觸摸屏平行，因此手指在虛擬觸摸屏上的運(yùn)動(dòng)軌跡一直顯示在攝像頭所拍攝圖像的某條確定直線上。手指在二維顯示屏幕平面上的運(yùn)動(dòng)，轉(zhuǎn)換為手指點(diǎn)在攝像頭拍攝的兩幅圖像的某條確定直線上的移動(dòng)。左右攝像頭拍攝的兩幅圖像中直線上的點(diǎn)和二維顯示屏平面中的某點(diǎn)存在一一對(duì)應(yīng)的關(guān)系。如圖3所示，問(wèn)題即轉(zhuǎn)換為根據(jù)兩幅圖像中手指移動(dòng)直線上的點(diǎn)的位置來(lái)唯一確定用戶手指觸摸的二維平面上的點(diǎn)坐標(biāo)。其實(shí)質(zhì)為由兩個(gè)一維坐標(biāo)點(diǎn)和一些初始角度值來(lái)唯一確定二維平面內(nèi)的一點(diǎn)坐標(biāo)。

　　下面以左邊攝像頭為例說(shuō)明轉(zhuǎn)換過(guò)程，右邊攝像頭類似。

　　假設(shè)虛擬觸摸屏是如圖4所示的矩形區(qū)域，以左下角為原點(diǎn)，建立二維坐標(biāo)平面x、y。左邊攝像頭c1位于虛擬觸摸屏左上角某處，其視角范圍應(yīng)包含整個(gè)矩陣區(qū)域，將c1與矩形的4個(gè)頂點(diǎn)連接構(gòu)成攝像頭拍攝各點(diǎn)的光線方向，以經(jīng)過(guò)左下角和右上角頂點(diǎn)的光線方向?yàn)檠琧1為頂點(diǎn)作一個(gè)等腰三角形，底為虛線所示的(u1，u2)。當(dāng)手指在矩形區(qū)域內(nèi)任意一點(diǎn)觸摸時(shí)，其在攝像頭所拍攝的圖像中均表現(xiàn)為虛線上的一點(diǎn)，手指在二維虛擬觸摸屏上的移動(dòng)投影到圖像上不會(huì)超過(guò)這條虛線(u1，u2)范圍，這是算法關(guān)注的興趣區(qū)域，區(qū)域以外的部分不需要處理。因此以u(píng)1為原點(diǎn)沿著虛線方向建立一維坐標(biāo)x1，右邊攝像頭拍攝圖像中的一維坐標(biāo)x2類似設(shè)立。