不斷發展的3D成像融合了立體視覺、激光三角測量、結構光和飛行時間等新技術,將幫助終端用戶和原始設備制造商解決新的具有挑戰性的成像問題。
3D視覺技術必須發展并適應不斷變化的市場條件,尤其是在加速變革的時期。例如,全球爆發的新冠肺炎疫情幾乎改變了生活的方方面面。不同類型的3D技術適用于同行不同的任務和應用無論是立體視覺、激光三角測量、結構光、飛行時間(ToF)還是其他技術,3D成像技術都在向更多市場發展和擴展,幫助終端用戶和原始設備制造商解決新的具有挑戰性的成像問題。
使用三維區域掃描技術
由于新冠肺炎疫情的爆發,人們以前所未有的需求轉向電商平臺,這對參與物流、倉儲、包裝的公司提出了巨大的挑戰,這些公司被迫不斷擴大運營的規模和業務,許多物流和倉儲應用——包括貨物的交付、倉儲和包裝,這些很大程度上依賴于各種類型的3D成像技術。
“集裝箱揀選應用需要實現區域掃描和3D點云。雖然容器拾取是最廣為人知的事實,但它是最難實現的3D類型之一。”Integro Technologies首席視覺系統架構師David Dechow表示,“目前,大多數集裝箱揀選無法滿足所有客戶的需求,因為它需要極高的速度、隨機揀選以及像人一樣移動的機器人。”
使用飛行時間計算和測量
雖然立體視覺、結構光等區域掃描的3D技術可能有助于集裝箱揀選的應用,但飛行時間(ToF)技術更有助于完成測量和計算箱子尺寸等任務。
LUCID Vision Labs的新Helios2 ToF相機針對物流、物料搬運和機器人應用。與舊版Helios相比,新相機透光率提升2.5倍,3D精度提升50%以上。客戶需求是公司不斷突破技術極限的動力。LUCID公司創始人兼總裁Rod Barman表示:“考慮到這一點,我們將最新技術集成到設計的產品中,以應對當前和未來潛在的應用挑戰,例如尺寸測量、機器人和AGV。”
對于康耐視來說,物流領域3D應用最大的需求就是箱體尺寸標注,尤其是零件在運動的時候。過去,在這樣的應用中,通常使用多個激光器和一個外部攝像機來幫助捕獲圖像。然而,現在,通過一個類似于3D-A1000的系統,結合了2D和3D的智能相機可以從網絡界面快速標注尺寸。
康耐視3D產品高級總監兼業務經理John Keating解釋說,“使用A1000系統可以簡化設置。這是一個基于網絡的界面,但它仍然是一個視線攝像頭,提供了一個簡單的設置練習。”部署3D應用越容易,人們對3D的擔憂就越少。
基廷表示,隨著客戶在3D-A1000上的成功,在物流領域開辟了新的3D應用,例如在經典的空托盤場景中定位物體,這是一個長期以來都很難的應用。
對于Matrox Imaging公司3D傳感器產品經理Mathieu Larouche來說,傳統應用(如用于取貨和碼垛箱子的視覺引導機器人以及箱子尺寸測量)也是3D成像背后的重要驅動力。為了讓客戶更方便,Matrox還積極參與了對膝電公司GenDC模塊的支持,旨在規范3D相機/傳感器與應用軟件之間的組件數據交換。
就市場的潛在影響而言,Larouche認為,3D成像一個潛在的有趣領域是將深度學習應用于3D成像,以促進后者的使用。
循環時間注意事項
CapSen Robotics首席執行官賈里德格洛弗(Jared Glover)表示,包裝也越來越依賴3D視覺,但最終用戶和原始設備制造商必須提前考慮周期時間要求,以避免任何問題。
在許多3D視覺引導的機器人應用中,機器人在拾取或釋放貨物時以不同的方式移動。例如,與重復相同動作的機器人相比,三維視覺引導機器人的周期時間不太穩定,這就是為什么在生產線設計中考慮這一因素很重要。應在揀選機器人之前和之后建立額外的緩沖區,或者如果有必要達到一定的周期時間而沒有偏差,則應增加額外的機器人作為冗余。
該公司在設計其CapSen PiC集裝箱揀選產品時考慮了這些周期時間。該系統采用高度加速的專有GPU數學庫、并行圖像處理和運動控制,在傳統6軸機器人上實現了低至2秒的循環時間。基廷說:“考慮到這樣的場景,箱子里裝滿了瓶子,必須處理傾斜等問題。“當瓶子四處移動時,2D視覺會有問題,但三維視覺提供了理解深度的能力。”與傳統系統相比,康耐視全新的In-Sight 3D-L4000嵌入式視覺系統能夠讓用戶直接將視覺工具應用到零部件的3D圖像中,可以提供更高的精度,從而擴展了可以執行的檢查類型。
康耐視在幫助客戶快速解決包裝問題方面具有巨大潛力。例如,當客戶需要看到較低級別混合的特定區域下方時,3D成像解決了這個問題。
為工廠內外的軟件打開新的大門。
一些可能被認為是傳統機器視覺的應用也受益于3D視覺。以鐵路檢查為例。高速、連續振動和惡劣的環境條件可能會給三維鐵路檢測的應用帶來困難。但是,如果安裝正確,通過檢查軌道輪廓和輪輞的磨損和損壞,將有助于防止事故并確保安全可靠的運行。這是Photonfocus基于三角測量的相機的一個流行應用,它使用一個外部激光器和一個單獨的相機,而不是一個集成單元。
Photonfocus為這類應用提供了一些特定的優勢,包括名為LinLog的相機固件功能,該功能允許相機實時執行高動態范圍成像。用戶可以通過使用LinLog來獲得明亮和黑暗的條件,LinLog為檢查目的提供了平均圖像。
檢測多條激光線輪廓是一項復雜的檢測任務。Photonfocus通過其多峰值線性濾波器算法提供了這一功能。例如,激光束被鏡子反射時,會四處反彈,形成一條主線和許多副線。Photonfocus算法可以幫助OEM找到合適的激光線進行檢查。
“我們在3D算法方面有豐富的經驗,并且總是根據客戶的需求進行改進,”Photonfocus的固件/設計經理烈斗蓮哈特說例如,當掃描金屬或玻璃時,反射的固有問題可以在算法中解決。這是我們為客戶并行檢測多條線路的主要原因之一,也是我們的3D解決方案與其他幾個市場一起部署在鐵路檢測的原因。"
對于希望開發自己的專用3D成像系統的機器制造商和系統集成商來說,Euresys Open eVision軟件中包含的Easy3D庫等軟件工具可以幫助他們開發3D機器視覺檢測應用。該公司美洲區銷售和支持副總裁Mike Cyros解釋說,例如,如果客戶想要使用一條或兩條投射到移動表面上的激光線來實現3D成像系統,則需要提取激光線,然后將其轉換為3D處理和分析所需的高度圖或3D點云。
他說:“除了Easy3D軟件庫,Euresys還通過我們的Coaxlink Quad 3D-LLE圖像采集卡為這類應用提供現成的硬件,該卡可以自動、即時地從CoaXPress相機中提取激光線。“我們沒有提供功能固定的完整3D解決方案,而是為客戶提供必要的構建模塊,讓他們更容易構建自己的3D視覺系統。”Easy3D軟件和Coaxlink Quad 3D-LLE為系統開發人員提供了一系列易于使用的功能。
不斷發展的三維成像技術
3D成像技術持續發展,可能達到拐點。約翰基廷建議人們開始將3D視為一個通用術語,指的是以不同方式創建3D圖像的不同設備的集合,就像2D相機以不同方式創建2D圖像一樣。
“3D不能被視為單一類型的技術,因為我們有基于激光的方法、飛行時間、立體視覺等類型。”他說,“我認為人們開始動搖他們對3D的先入為主的想法,并將開始以與2D更相似的方式考慮它。”
甚至有時候3D成像技術的名字也不一樣。市場上很多公司都不會用同一個名字來稱呼自己的產品,但是用其他名字的解決方案還是可以提高生產力的,這才是最重要的。