項(xiàng)目背景:某大型快遞公司分揀線,每個(gè)工位使用人工從混合堆疊的快遞包裹中揀選出來,并將有面單的一面朝上放置在傳送帶上。
技術(shù)分析:實(shí)現(xiàn)無人抓取、分類、面單識(shí)別
Ø混合包裹有箱子、軟包、信封件
Ø需要對(duì)面單有無進(jìn)行檢測(cè)
Ø包裹上有黑色、反光膠帶
解決方案:深度學(xué)習(xí)檢測(cè)分類,3D識(shí)別定位引導(dǎo)機(jī)器人抓取
Ø通過深度學(xué)習(xí)對(duì)包裹檢測(cè)識(shí)別分類、檢測(cè)面單
Ø通過3D點(diǎn)云精確定位抓取中心
Ø通過運(yùn)動(dòng)旋轉(zhuǎn)控制尋找側(cè)面面單
常用的3D視覺技術(shù)包括:
n雙目立體視覺和結(jié)構(gòu)光
nToF (Time-of-Flight)
n激光三角測(cè)量法
每項(xiàng)技術(shù)根據(jù)不同的原理來記錄三維信息,它們均有不同的優(yōu)點(diǎn)和缺點(diǎn)。
3D視覺區(qū)別于2D視覺的一個(gè)顯著特征是,除了顯示對(duì)象的X 和Y 值外,還可以提供記錄場(chǎng)景或?qū)ο蟮纳疃戎?。這為解決復(fù)雜任務(wù)提供了全新的可能。
其應(yīng)用領(lǐng)域包括上下料、隨機(jī)揀選、混合分揀、混合碼卸垛、裝箱、軌跡規(guī)劃、組裝和裝配、尺寸測(cè)量、三維重建等。