近年來，伴隨著3D傳感行業(yè)的迅猛發(fā)展，機器視覺迎來轟轟烈烈的第四次視覺革命。許多機器人公司也都開始了3D視覺的研究，本次的應(yīng)用案例來自勃肯特機器人，其采用了結(jié)構(gòu)光相機配合自主研發(fā)的串并混聯(lián)六軸機器人，完成3D視覺相關(guān)檢測項目，據(jù)了解即將投入實際應(yīng)用階段。
視覺升維迎來歷史性的技術(shù)爆發(fā)，讓其他三次視覺革命都略顯黯然失色，第四次視覺革命最大的特點體現(xiàn)在機器直接從之前的2D平面“視界”進化到3D立體“視界”，刷臉支付、Face ID、VR、無人便利店、智能機器人等人工智能產(chǎn)品從實驗室走向普羅大眾身邊，頻頻以“未來產(chǎn)品”姿態(tài)曝光，其背后起到關(guān)鍵作用的黑科技便是3D視覺技術(shù)，3D視覺技術(shù)也已經(jīng)成為人工智能界的新寵。
人類利用科技提升機器的視覺能力，模擬人的雙眼，這聽起來似乎沒什么了不起。但是在商業(yè)應(yīng)用中，3D視覺的影響力不亞于在亞馬遜森林攪動風(fēng)暴的蝴蝶，以目前火爆市場的支付寶刷臉支付為例，拿目前出貨量最多的3D視覺代表性企業(yè)奧比中光來說，搭載了其3D結(jié)構(gòu)光的刷臉支付產(chǎn)品，能夠通過點陣投影儀把數(shù)萬個光點投射到用戶的面部，通過3D攝像頭找到對應(yīng)光點，再利用三角測量原理計算出光點的深度信息，從而達到3D面部識別的效果并完成支付。
相比過去2D視覺的人臉識別，3D視覺能輕易識破平面照片或者視頻等欺騙，讓支付的安全性和便捷性得到革命性升級。同時在機器視覺技術(shù)的幫助下，刷臉支付能夠帶來更好的體驗，大大降低安全隱患。
工業(yè)機器人領(lǐng)域獲取外界物體三維信息的傳感器主要有以下三種，傳統(tǒng)RGB雙目相機、結(jié)構(gòu)光相機、TOF相機。
三種主流三維信息獲取設(shè)備，圖源：勃肯特機器人
應(yīng)用場景主要集中在三大板塊：
（1）通過3D視覺快速準(zhǔn)確的對紙箱進行尺寸測量，完成物流行業(yè)隨機尺寸紙箱的拆垛和碼垛；
（2）在生產(chǎn)線上，多種型號的工件往往會被雜亂無章的堆放在料框里，同時這些工件的形狀外觀差異很大，通過3D視覺可準(zhǔn)確獲取料框內(nèi)物體的三維輪廓特征信息，機器人可快速精準(zhǔn)的完成多品類工件的分揀；
（3）在輕工行業(yè)，通過3D視覺獲取物體的三維輪廓信息，KUKA機器人維修，使機器人高速高精度完成涂膠、噴涂等相關(guān)工作。
三種技術(shù)方案對比，圖源：勃肯特機器人
與3D視覺的立體成像相得益彰，混聯(lián)六軸由3P-3R結(jié)構(gòu)組成，即三自由度的并聯(lián)機構(gòu)與三自由度的串聯(lián)機構(gòu)組成，實現(xiàn)了6自由度更大空間的運行，在保持了原有并聯(lián)機構(gòu)特點之外，增加了拾取物品位姿隨機、末端擺放自由靈活、理料與分揀雙工藝結(jié)合的特點。
勃肯特的解決方案中，運用3D相機完成立體物料的視覺信息捕捉后，可實現(xiàn)機器人根據(jù)物料在三維空間內(nèi)的位置與角度判斷，解決了以往機器人只能進行平面抓取的弊端，可實現(xiàn)對堆疊來料的快速理料，同時也開拓了對不規(guī)則、不平整來料進行涂膠、注塑等工藝，豐富了更多應(yīng)用場景。
勃肯特串并混聯(lián)六軸機器人，圖源：勃肯特機器人
勃肯特自主研發(fā)機器人控制器與結(jié)構(gòu)光3D相機，圖源：勃肯特機器人
據(jù)了解，，類似于傳統(tǒng)2D視覺，工業(yè)機器人維修，勃肯特自主研發(fā)機器人控制器與結(jié)構(gòu)光3D相機首先對相機進行標(biāo)定，采用Eye to hand的安裝方式，在完成相機內(nèi)參標(biāo)定后，結(jié)合棋盤格對相機外參進行標(biāo)定。外參數(shù)標(biāo)定即確定相機與外界的平移和旋轉(zhuǎn)關(guān)系。利用經(jīng)典的ＡＸ＝ＸＢ齊次坐標(biāo)求解方法，讓機器人末端在棋盤格上移動多個位置，記錄其坐標(biāo)值，求出轉(zhuǎn)換矩陣，完成相機標(biāo)定。
然后對點云預(yù)處理，去除外界干擾產(chǎn)生的噪點后，通過對點云進行平面分割和目標(biāo)提取，完成場景中目標(biāo)物體的分割及其特征的提取。并且通過特定算法完成目標(biāo)物體的位姿估計和優(yōu)化，最終完成串并混聯(lián)六軸機器人在3D視覺作用下對不同形狀物體快速精準(zhǔn)的分揀。
相機采集的原始圖像，m.dekuna.com，圖源：勃肯特機器人
相機采集的深度圖像，圖源：勃肯特機器人
感謝勃肯特機器人提供的以上案例內(nèi)容。勃肯特機器人研究院團隊成立于2019年3月份，成員平均年齡26歲，其中碩士占比超過一半，在內(nèi)部有“最高智商”團隊之稱。先后成功主導(dǎo)及參與完成“異型煙智能分揀碼垛項目”、“并聯(lián)6軸Stewart平臺”、“鎮(zhèn)江工廠智能信息化管理系統(tǒng)”、“統(tǒng)籌分揀”、“BeMotion 控制器”多個項目的算法研發(fā)。隨著該項技術(shù)項目的成功落地，可以預(yù)見的是，勃肯特將憑借自己的“眼睛”配合串并混聯(lián)六軸機器人不斷探索客戶的實際應(yīng)用領(lǐng)域，提供更多高精度的解決處理方案，練就更符合客戶需求的“金睛火眼”。