人工智能

微鏈DaoAI視覺模型應(yīng)用:開關(guān)蓋抓取

ainet.cn   2025年01月22日

微鏈道愛專注于 AI 視覺是下一代人工智能機(jī)器人研究企業(yè)。在視覺大模型、虛擬世界構(gòu)建、高速 3D 成像、機(jī)器人智能運(yùn)動控制等領(lǐng)域,已經(jīng)積累豐富的學(xué)術(shù)和行業(yè)經(jīng)驗(yàn)。DaoAI World 是一個(gè)集數(shù)據(jù)標(biāo)注、模型訓(xùn)練為一體的AI視覺應(yīng)用研發(fā)團(tuán)隊(duì)協(xié)作平臺,最快半小時(shí)內(nèi)可以訓(xùn)練一個(gè)AI視覺應(yīng)用智能體。詳情請見https://www.welinkirt.com/

挑  戰(zhàn)

下料情景一:
以托盤形式上料,但會因抖動錯(cuò)位,使原來在托盤上的物料離開托盤的位置疊在其他物料上方。需要我 們識別出錯(cuò)位的物料及在托盤上的物料。

下料情景二:

從托盤抓到指定位置。需要旋轉(zhuǎn)一定角度后(logo以指定角度碼放),放到固定的位置 。

解決方案

  • 使用3DC mini相機(jī)采集3D及2D數(shù)據(jù)。

  • 使用eye to hand方式(相機(jī)使用支架固定在來料區(qū)上方) 。

  • 布置一臺工控機(jī)來使用vision視覺系統(tǒng)進(jìn)行點(diǎn)云數(shù)據(jù)處理。

  • 使用4軸機(jī)器人抓取。其中會優(yōu)先抓取散落的開關(guān),將其放在指定位置以供后續(xù)下料。

  • 視覺與機(jī)器人用TCP方式通訊,將物體的位置信息發(fā)送給機(jī)器人。

  • 使用2D進(jìn)行特征識別(logo方向)。

  • 使用3D確定物件空間位置并判斷是否重疊。

相機(jī)詳細(xì)參數(shù)及外觀

方案細(xì)節(jié)說明

  • 機(jī)器人末端執(zhí)行器采用氣動吸盤的方式進(jìn)行抓取。

  • 抓取整體節(jié)拍為1200個(gè)/小時(shí)。

  • 每個(gè)物體的時(shí)間在3s左右,(其中機(jī)器人運(yùn)動時(shí)間在兩秒,視覺時(shí)間1s/件)。

  • 機(jī)器人與視覺采用TCP通訊方式(12位的字符串)。

  • 相機(jī)以支架方式固定在來料上方。

(來源微鏈機(jī)器人視覺研究)

標(biāo)簽:微鏈道愛 我要反饋 
泰科電子ECK、ECP系列高壓直流接觸器白皮書下載
ABB協(xié)作機(jī)器人,自動化從未如此簡單
優(yōu)傲機(jī)器人下載中心
億萬克
專題報(bào)道
聚力同行 · 新智“碳”索
聚力同行 · 新智“碳”索

“新華社-智能·零碳”項(xiàng)目策劃以“聚力同行·新智‘碳’索”為主題的新能源專題,主要圍繞光伏、儲能、鋰電、氫能、風(fēng)能五大新... [更多]

2025中國國際機(jī)床展覽會
2025中國國際機(jī)床展覽會

4月21至26日,以“融合創(chuàng)新,數(shù)智未來”為主題的第十九屆中國國際機(jī)床展覽會在首都國際會展中心盛大舉辦。憑借場館的卓越服... [更多]

2023-2024 智能·零碳成果展映
2023-2024 智能·零碳成果展映

“2023-2024智能·零碳成果展映”展示國內(nèi)外企業(yè)推進(jìn)“雙碳”實(shí)踐的最新成果,鼓勵(lì)更多企業(yè)、科研機(jī)構(gòu)、投資機(jī)構(gòu)等廣泛... [更多]