(一)“通用式三維即時成像技術(shù)”的研制目的和主要思路

   目前能夠自動實現(xiàn)三維立體圖像視覺測量的系統(tǒng),一般采用的技術(shù)手段是線激光光截圖測量技術(shù)或雙目加結(jié)構(gòu)光的測量技術(shù)。

   這些技術(shù)的主要問題是:①在室外陽光下使用時,可對成像造成強烈干擾,不能滿足成像質(zhì)量要求;②這些方式對于吸光面、大曲面、強反射光滑面,不能形成良好反射,影響檢測效果;③當(dāng)激光功率太小時,測量深度會減小,測量精度會下降,當(dāng)激光功率加大時,又容易造成使用者或被測物的傷害;④采用結(jié)構(gòu)光等主動成像方式只能是在結(jié)構(gòu)光照到的位置進行檢測,對于結(jié)構(gòu)光之間的空隙,無法形成三維測量數(shù)據(jù),做到對被測物細(xì)部特征的三維成像;⑤由于結(jié)構(gòu)光照到的部位和其它照不到的位置在成像時的高對比度要求,使被測物的顏色和紋理無法同步測量和展示。

   考慮到上述問題,采用基于雙目視覺測量技術(shù)中的被動式純光學(xué)成像的技術(shù),是符合“機器眼”三維成像目標(biāo)要求的技術(shù)。單純使用雙目匹配算法實現(xiàn)三維立體圖像計算,目前廣泛應(yīng)用在航測領(lǐng)域,但該方法在計算三維時,需要人工干預(yù),且大都采用后期處理的方式,難以采用一套程序自動完成。

   雙目加結(jié)構(gòu)光這種三維測量方式,就像求解一個線性方程組,要得到解,方程的數(shù)量與變量的數(shù)量至少必須一致,如果方程數(shù)量不足,就變成了不定解方程,就需要增加方程數(shù)量或再給出其它的已知條件。結(jié)構(gòu)光等三維成像時的輔助手段,都可以理解為增加了額外的解方程前的已知條件,由于有了這些已知條件的存在,雖然足以能夠得出方程解,但這些手段的多樣性和復(fù)雜性,使這樣的三維測量難以滿足通用性的要求,同時,極大限制了該類測量系統(tǒng)的應(yīng)用范圍和測量效果。

   按照畫法幾何的原理,描述三維物體時一般采用的是三視圖的方式。如果只用兩個視圖,在一些空間結(jié)構(gòu)體的理解上難免會出現(xiàn)歧義。對于純雙目匹配必然帶來歧義性這樣的命題,雖然目前還沒有嚴(yán)格意義上的幾何學(xué)證明,但從目前涌現(xiàn)的三維實時測量系統(tǒng)中大量采用雙目加結(jié)構(gòu)光的模式來看,依靠純雙目三維測量確實難以實現(xiàn)自動化實時檢測。其可能的原因就是由于雙目匹配空間幾何解算的條件不足,造成了匹配上可能的歧義。

   目前流行的雙目或多目圖像測量系統(tǒng),一般采用的方式是將各相機呈角度布置,這樣能夠擴大測量視場范圍,提高測量精度。但在圖像匹配運算時需要根據(jù)相機間的夾角以及被視物的空間位置,首先在采集圖像上計算出匹配極線??臻g位置不同,極線在圖像上的角度不同,成為了一條斜率不固定的斜線。圖像匹配時,就需要按照這條斜率不固定的斜線進行像素搜索和匹配,搜尋范圍不能確定,運算工作量大。

   基于以上思考,北京清影公司設(shè)計開發(fā)了一套建立在四像機組平面陣列基礎(chǔ)上的純圖像三維測量系統(tǒng),該系統(tǒng)至少包括一組組成2×2陣列的四臺數(shù)碼相機,其運算過程是對像機組采集的圖像進行匹配運算;根據(jù)匹配好的像素點像坐標(biāo),計算各個像素點的空間位置坐標(biāo);根據(jù)空間位置坐標(biāo),形成三維點云數(shù)據(jù);建立三維點云圖形,進行三維立體重現(xiàn)。

(二)“通用式三維即時成像技術(shù)”介紹

   “通用式三維即時成像技術(shù)”采用四像機組平面陣列硬件形式,后臺配置通用三維算法,能夠全自動、快速完成對相機視場內(nèi)被視物體空間關(guān)系的解構(gòu)。北京清影公司經(jīng)過一年努力,已經(jīng)完成了全套軟硬件系統(tǒng)的研制,包括:專用三維相機、三維運算軟件和三維立體顯示軟件等。在普通光照條件下,在不到1秒時間內(nèi)實現(xiàn)被視環(huán)境的三維快速成像。同時,申請了11項發(fā)明,已經(jīng)獲得1項發(fā)明和5項實用新型授權(quán),打造出以“通用式三維即時成像技術(shù)”為核心的完整技術(shù)體系。

   “通用式三維即時成像技術(shù)”的三維運算,是采用幾何學(xué)的方法完成。其具體步驟是將相機組的四幅同步圖像的幅與幅之間,按像素點逐點在水平和垂直方向進行兩兩匹配運算。四組圖像之間通過幾何關(guān)系形成關(guān)聯(lián),互相印證,排除那些不符合幾何投影規(guī)律的匹配關(guān)系以后,技術(shù)上完全能夠?qū)崿F(xiàn)運算的通用化,消除雙目匹配存在的歧義性問題,實現(xiàn)像素間確定和的匹配。匹配完成后,通過匹配像素點的視差計算,直接得出被視點的三維空間坐標(biāo),以三維點云形式實現(xiàn)三維顯示。

   以上方法,可以用物理定理來類比理解。例如物體運動滿足牛頓定理的前提條件是光滑平面且不考慮風(fēng)的阻力等條件,圖像間的匹配也是同樣。當(dāng)四相機呈矩形陣列平行布置時,相鄰兩相機之間的像素匹配就簡化為水平或垂直匹配,這樣匹配運算就由全圖面運算變?yōu)樗交虼怪钡闹本€運算,匹配范圍由面縮小為一條直線,增加了空間解算的確定性,極大提高了運算速度。當(dāng)四組圖像兩兩匹配時,就類似于把四個匹配過程在空間相交為逐個確定的點。形成確定且三維空間解算幾何結(jié)構(gòu)。

   “通用式三維即時成像技術(shù)”通過空間幾何的解算,直接跨過各類圖像處理的復(fù)雜算法,實現(xiàn)利用多目相機純圖像解算,直接測量被視環(huán)境中物體的三維尺寸。該方法簡單、快速、準(zhǔn)確,可實現(xiàn)標(biāo)準(zhǔn)化程序運算。該技術(shù)采用四像機組平面陣列的方式,在任何光照條件下,對任何物體,采用完全相同的匹配算法和步驟就可以實現(xiàn)被視物的三維測量。實現(xiàn)了真正的“所見即所得”的三維機器視覺。

   (三)“通用式三維即時成像技術(shù)”主要功能

   “通用式三維即時成像技術(shù)”的主要功能表現(xiàn)在以下幾個方面:


   1、 使用普通工業(yè)相機搭建多目相機組,實現(xiàn)任意環(huán)境的下光學(xué)被動三維成像,不依賴于結(jié)構(gòu)光、事先標(biāo)定等任何輔助手段;

   2、 能夠?qū)崟r抓取被視物的主要視覺特征,秒級時間內(nèi)直接得到物體輪廓及其空間三維數(shù)據(jù),快速實現(xiàn)物體與背景的分離和切割;  

   3、  硬件結(jié)構(gòu)簡單、軟件完全通用、操作使用方便。徹底擺脫對專業(yè)人員、專業(yè)設(shè)備和專業(yè)技能的依賴,傻瓜相機式的操作體驗,隨時隨地的三維測量結(jié)果輸出;  

   4、 硬件采用工業(yè)相機組,技術(shù)成熟可靠、成本低,成像作業(yè)過程簡單。  

   (四)“通用式三維即時成像技術(shù)”應(yīng)用前景  

   機器視覺作為人工智能與工業(yè)4.0領(lǐng)域的關(guān)鍵技術(shù),在今后5~10年內(nèi)將迎來井噴式的發(fā)展,其廣泛的應(yīng)用范圍,有望創(chuàng)造出千億、以至萬億級的市場機遇。  
  “通用式三維即時成像技術(shù)”作為一種具有高度通用性、靈活性的視覺感知技術(shù),在以下應(yīng)用方面,提供了一種全新用戶體驗,極大提升了人工智能的成長空間:


   可應(yīng)用于無人汽車,作為主要視覺裝置部分替代當(dāng)前使用的景深相機和激光雷達;

   可與智能手機相結(jié)合,形成普通用戶均可以操作使用的便攜式三維成像終端,供警察、律師、醫(yī)生、電商、建筑設(shè)計師、機械工程師等專業(yè)人士使用;

   可應(yīng)用于AR、VR以及3D打印領(lǐng)域,作為主要的前端視覺成像設(shè)備,快速、低成本地搭建景物的三維圖像;

   可應(yīng)用于軍事領(lǐng)域,配置在單兵頭盔、戰(zhàn)車和戰(zhàn)機上,實現(xiàn)對復(fù)雜戰(zhàn)場環(huán)境的快速偵測感知;

   可應(yīng)用于公安反恐與金融支付領(lǐng)域,對人臉實現(xiàn)三維建模和任意角度的二維識別;

   可配置給各種類型的機器人作為視覺感知終端使用,通過提供完整的視覺信息,極大提升無人系統(tǒng)的智能化程度。  

   “通用式三維即時成像技術(shù)”,我們的一小步,機器視覺的一大步。

通用式三維即時成像技術(shù)-機器視覺_視覺檢測設(shè)備_3D視覺_缺陷檢測

圖1、清影三維立體相機

通用式三維即時成像技術(shù)-機器視覺_視覺檢測設(shè)備_3D視覺_缺陷檢測


圖2、樓房照片
通用式三維即時成像技術(shù)-機器視覺_視覺檢測設(shè)備_3D視覺_缺陷檢測

圖3、樓房3維立體照片


通用式三維即時成像技術(shù)-機器視覺_視覺檢測設(shè)備_3D視覺_缺陷檢測

圖4、花的三維立體照片


通用式三維即時成像技術(shù)-機器視覺_視覺檢測設(shè)備_3D視覺_缺陷檢測

圖5、花的照片