0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

淺析機(jī)器人智能抓取系統(tǒng)的幾種主流的解決方案

電子工程師 ? 來(lái)源:COBOT機(jī)器人大腦、新機(jī)器視 ? 作者:COBOT機(jī)器人大腦、 ? 2021-03-29 15:16 ? 次閱讀

機(jī)器人學(xué)習(xí)中的經(jīng)典問(wèn)題之一便是分揀:在一堆無(wú)序擺放的物品堆中,取出目標(biāo)物品。在快遞分揀員看來(lái),這幾乎是一個(gè)不需要思考的過(guò)程,但對(duì)于機(jī)械臂而言,這意味著復(fù)雜的矩陣計(jì)算。 事實(shí)上,對(duì)于人類(lèi)需要耗費(fèi)大量時(shí)間的數(shù)理難題,用智能系統(tǒng)處理起來(lái)就顯得十分容易,但在幾乎不需要思考的情況下就能做出的分選動(dòng)作,則是全世界機(jī)機(jī)器人研究專(zhuān)家關(guān)注的熱點(diǎn)。

機(jī)械臂抓取需要確定每段機(jī)械臂的位姿 首先,機(jī)械臂需要視覺(jué)伺服系統(tǒng),來(lái)確定物體的位置,根據(jù)末端執(zhí)行器(手)和視覺(jué)傳感器(眼)的相對(duì)位置,可分為Eye-to-Hand和Eye-in-Hand兩種系統(tǒng)。 Eye-to-Hand的分離式分布,視野固定不變,如果相機(jī)的標(biāo)定精度高的話,那么視覺(jué)定位于抓取的精度也越高。 Eye-in-Hand則將機(jī)械臂與視覺(jué)傳感器固定在一起,視野隨機(jī)械臂的移動(dòng)而改變,傳感器越近時(shí)精度越高,但過(guò)于靠近時(shí)則可能使目標(biāo)超出視野范圍。

精密的視覺(jué)系統(tǒng)與靈活機(jī)械臂的配合,才能完成一次完美的抓取,而這正是當(dāng)前機(jī)器人操作中的核心難題,歸納起來(lái)就是這么一件事:找到合適的抓取點(diǎn)(或吸附點(diǎn)),抓住它。之后的轉(zhuǎn)運(yùn)執(zhí)行,則屬于運(yùn)動(dòng)規(guī)劃的分支。 目前幾種主流的解決方案 Model-based(基于模型的方法) 這種方法很好理解,即知道要抓什么,事先采用實(shí)物掃描的方式,提前將模型的數(shù)據(jù)給到機(jī)器人系統(tǒng),機(jī)器在實(shí)際抓取中就只需要進(jìn)行較少的運(yùn)算:

1. 離線計(jì)算:根據(jù)搭載的末端類(lèi)型,對(duì)每一個(gè)物體模型計(jì)算局部抓取點(diǎn);

2. 在線感知:通過(guò)RGB或點(diǎn)云圖,計(jì)算出每個(gè)物體的三維位姿;

3. 計(jì)算抓取點(diǎn):在真實(shí)世界的坐標(biāo)系下,根據(jù)防碰撞等要求,選取每個(gè)物體的最佳抓取點(diǎn)。

RGB顏色空間由紅綠藍(lán)三種基本色組成,疊加成任意色彩,同樣地,任意一種顏色也可以拆解為三種基本色的組合,機(jī)器人通過(guò)顏色坐標(biāo)值來(lái)理解“顏色”。這種方式與人眼識(shí)別顏色的方向相似,在顯示屏上廣泛采用。

CGrasp 對(duì)精密軸承的無(wú)序抓取 Half-Model-based(半模型的方法) 在這種訓(xùn)練方式中,不需要完全預(yù)知抓取的物體,但是需要大量類(lèi)似的物體來(lái)訓(xùn)練算法,讓算法得以在物品堆中有效對(duì)圖像進(jìn)行“分割”,識(shí)別出物體的邊緣。這種訓(xùn)練方式,需要這些流程:

1.離線訓(xùn)練圖像分割算法,即把圖片里的像素按物體區(qū)分出來(lái),此類(lèi)工作一般由專(zhuān)門(mén)的數(shù)據(jù)標(biāo)注員來(lái)處理,按工程師的需求,標(biāo)注出海量圖片中的不同細(xì)節(jié);

2.在線處理圖像分割,在人工標(biāo)注出的物體上,尋找合適的抓取點(diǎn)。 這是一種目前應(yīng)用較為廣泛的方式,也是機(jī)械臂抓取得以推進(jìn)的主要推力。機(jī)械臂技術(shù)發(fā)展緩慢,但計(jì)算機(jī)視覺(jué)的圖像分割則進(jìn)展迅速,也從側(cè)面撬動(dòng)了機(jī)器人、無(wú)人駕駛等行業(yè)的發(fā)展。

Model-free(自由模型) 這種訓(xùn)練方式不涉及到“物體”的概念,機(jī)器直接從RGB圖像或點(diǎn)云圖上計(jì)算出合適的抓取點(diǎn),基本思路就是在圖像上找到Antipodal(對(duì)映點(diǎn)),即有可能“抓的起來(lái)”的點(diǎn),逐步訓(xùn)練出抓取策略。這種訓(xùn)練方式往往讓機(jī)器手大量嘗試不同種類(lèi)的物品,進(jìn)行self-supervisedlearning,Google的Arm Farm,即為其中的代表之一。

Google Arm Farm 值得注意的是,對(duì)于機(jī)械手而言,不同形狀的物品,抓取難度有天壤之別。即便是同樣形狀的物體,由于表面反光度和環(huán)境光照的影響,在不同場(chǎng)景的抓取難度也大相徑庭。從實(shí)驗(yàn)室到商業(yè)落地,其中有相當(dāng)一段路要走。

高精密度的相機(jī)研發(fā),是機(jī)器人“感知”物體的第一步。 實(shí)際商業(yè)場(chǎng)景中,最麻煩的物體總是“下一個(gè)物體”。工業(yè)機(jī)器人要真正融入實(shí)際生產(chǎn)體系,只有具備聰明的大腦,針對(duì)不同工況做出柔性的調(diào)整,才能拓寬工業(yè)機(jī)器人的使用場(chǎng)景。

編輯:jq

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 機(jī)器人
    +關(guān)注

    關(guān)注

    210

    文章

    27989

    瀏覽量

    205535

原文標(biāo)題:機(jī)器人智能抓取系統(tǒng):目前幾種主流的解決方案

文章出處:【微信號(hào):AMTBBS,微信公眾號(hào):世界先進(jìn)制造技術(shù)論壇】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    智能移動(dòng)機(jī)器人

    富唯智能移動(dòng)機(jī)器人分為復(fù)合機(jī)器人和轉(zhuǎn)運(yùn)機(jī)器人,搭載ICD核心控制器,實(shí)現(xiàn)一體化控制,最快可實(shí)現(xiàn)15分鐘現(xiàn)場(chǎng)機(jī)器人的快速部署,無(wú)縫對(duì)接產(chǎn)線,配
    的頭像 發(fā)表于 08-27 17:22 ?238次閱讀
    <b class='flag-5'>智能</b>移動(dòng)<b class='flag-5'>機(jī)器人</b>

    ROS讓機(jī)器人開(kāi)發(fā)更便捷,基于RK3568J+Debian系統(tǒng)發(fā)布!

    化的快速發(fā)展,智能機(jī)器人設(shè)備已成為工業(yè)自動(dòng)化體系的佼佼者,而智能機(jī)器人設(shè)備核心—ROS系統(tǒng),是機(jī)器人
    發(fā)表于 07-09 11:38

    Al大模型機(jī)器人

    金航標(biāo)kinghelm薩科微slkor總經(jīng)理宋仕強(qiáng)介紹說(shuō),薩科微Al大模型機(jī)器人有哪些的優(yōu)勢(shì)?薩科微AI大模型機(jī)器人由清華大學(xué)畢業(yè)的天才少年N博士和王博士團(tuán)隊(duì)開(kāi)發(fā),與同行相比具有許多優(yōu)勢(shì):語(yǔ)言
    發(fā)表于 07-05 08:52

    基于FPGA EtherCAT的六自由度機(jī)器人視覺(jué)伺服控制設(shè)計(jì)

    ,為工業(yè)自動(dòng)化提供了一套切實(shí)可行的方案。 本文針對(duì)基于機(jī)器視覺(jué)的工業(yè)機(jī)器人進(jìn)行研究,主要工作包括以下幾點(diǎn): (1)設(shè)計(jì)了基于 伊瑟特的六自由度機(jī)器人視覺(jué)伺服控制
    發(fā)表于 05-29 16:17

    富唯智能案例|3D視覺(jué)引導(dǎo)機(jī)器人抓取鞋墊上下料

    隨著制造業(yè)對(duì)自動(dòng)化、智能化需求的不斷提升,如何實(shí)現(xiàn)鞋墊上下料的精準(zhǔn)、高效操作成為了企業(yè)亟待解決的問(wèn)題。傳統(tǒng)的上下料方式往往依賴(lài)人工,存在效率低下、精度不足等問(wèn)題。而富唯智能的3D視覺(jué)引導(dǎo)機(jī)器人
    的頭像 發(fā)表于 04-08 16:57 ?330次閱讀
    富唯<b class='flag-5'>智能</b>案例|3D視覺(jué)引導(dǎo)<b class='flag-5'>機(jī)器人</b><b class='flag-5'>抓取</b>鞋墊上下料

    機(jī)器視覺(jué)運(yùn)動(dòng)控制一體機(jī)在光伏匯流焊機(jī)器人系統(tǒng)解決方案

    生產(chǎn)線的柔性和自動(dòng)化水平。此外,我們的解決方案通過(guò)降低廢品率有效減少能源消耗,助力實(shí)現(xiàn)環(huán)保和可持續(xù)發(fā)展目標(biāo)。借助我們高度集成的硬件和易用的RTFuse機(jī)器人系統(tǒng)平臺(tái),讓客戶享受到快速的投資回報(bào),真正實(shí)現(xiàn)高效、環(huán)保的
    發(fā)表于 02-28 15:01

    工業(yè)機(jī)器人系統(tǒng)集成整體解決方案商中設(shè)智能在新三板正式掛牌

    2月19日,工業(yè)機(jī)器人系統(tǒng)集成整體解決方案商中設(shè)智能在新三板正式掛牌。這也是繼2019年終止掛牌后,中設(shè)智能再次掛牌新三板。
    的頭像 發(fā)表于 02-22 14:44 ?950次閱讀
    工業(yè)<b class='flag-5'>機(jī)器人</b><b class='flag-5'>系統(tǒng)</b>集成整體<b class='flag-5'>解決方案</b>商中設(shè)<b class='flag-5'>智能</b>在新三板正式掛牌

    智能變電站智能集中控制系統(tǒng)及軌道機(jī)器人集成設(shè)計(jì)解決方案

    智能變電站智能集中控制系統(tǒng)及軌道機(jī)器人的集成設(shè)計(jì)解決方案,通過(guò)系統(tǒng)架構(gòu)設(shè)計(jì)、功能劃分和結(jié)合特點(diǎn)的
    的頭像 發(fā)表于 01-30 09:37 ?481次閱讀

    廣和通AI解決方案“智”賦室外機(jī)器人邁向新天地!

    。復(fù)雜的室外環(huán)境對(duì)機(jī)器人要求更高,這對(duì)應(yīng)用于室外機(jī)器人的廣和通AI解決方案提出更高要求。室外作業(yè)機(jī)器人通常包含割草機(jī)器人、戶外清潔
    的頭像 發(fā)表于 01-18 11:51 ?463次閱讀
    廣和通AI<b class='flag-5'>解決方案</b>“智”賦室外<b class='flag-5'>機(jī)器人</b>邁向新天地!

    富唯智能機(jī)器人集成了協(xié)作機(jī)器人、移動(dòng)機(jī)器人和視覺(jué)引導(dǎo)技術(shù)

    富唯智能移動(dòng)機(jī)器人是一款擁有自主導(dǎo)航能力和物料轉(zhuǎn)移抓取功能的智能機(jī)器人,采用先進(jìn)的無(wú)線通信技術(shù)和高精度傳感器,能夠?qū)崿F(xiàn)自主導(dǎo)航和避障,完成生
    的頭像 發(fā)表于 01-17 11:58 ?354次閱讀

    科聰料箱移動(dòng)機(jī)器人整體解決方案

    。料箱機(jī)器人現(xiàn)場(chǎng)作業(yè)料箱機(jī)器人構(gòu)成科聰料箱機(jī)器人整體解決方案料箱式移動(dòng)機(jī)器人整體解決方案,根據(jù)移
    的頭像 發(fā)表于 12-19 16:32 ?637次閱讀
    科聰料箱移動(dòng)<b class='flag-5'>機(jī)器人</b>整體<b class='flag-5'>解決方案</b>

    基于視覺(jué)的自主導(dǎo)航移動(dòng)抓取機(jī)器人搭建方案

    經(jīng)過(guò)以上對(duì)移動(dòng)抓取機(jī)器人系統(tǒng)詳細(xì)的剖析,我們可以知道移動(dòng)抓取機(jī)器人系統(tǒng)并不是簡(jiǎn)單的“堆料”,而是
    發(fā)表于 12-19 15:09 ?610次閱讀
    基于視覺(jué)的自主導(dǎo)航移動(dòng)<b class='flag-5'>抓取</b><b class='flag-5'>機(jī)器人</b>搭建<b class='flag-5'>方案</b>

    ROS讓機(jī)器人開(kāi)發(fā)更便捷,基于RK3568J+Debian系統(tǒng)發(fā)布!

    ,以及包管理。它也提供用于獲取、編譯、編寫(xiě)、和跨計(jì)算機(jī)運(yùn)行代碼所需的工具和庫(kù)函數(shù)。圖1 隨著工業(yè)智能化的快速發(fā)展,智能機(jī)器人設(shè)備已成為工業(yè)自動(dòng)化體系的佼佼者,而智能
    發(fā)表于 11-30 16:01

    目前幾種主流機(jī)器人智能抓取系統(tǒng)方案

    機(jī)器人學(xué)習(xí)中的經(jīng)典問(wèn)題之一便是分揀:在一堆無(wú)序擺放的物品堆中,取出目標(biāo)物品。
    的頭像 發(fā)表于 11-14 14:20 ?1491次閱讀
    目前<b class='flag-5'>幾種</b><b class='flag-5'>主流</b>的<b class='flag-5'>機(jī)器人</b><b class='flag-5'>智能</b><b class='flag-5'>抓取</b><b class='flag-5'>系統(tǒng)</b><b class='flag-5'>方案</b>

    基于PC的機(jī)器人控制解決方案

    機(jī)器的設(shè)計(jì)包括多個(gè)基于PC的控制解決方案、運(yùn)動(dòng)控制硬件和具有運(yùn)動(dòng)功能的通用自動(dòng)化軟件。Labplas在15條生產(chǎn)線上配置了機(jī)器人。拾放機(jī)器人和其它運(yùn)動(dòng)軸配備了由EtherCAT伺服驅(qū)
    發(fā)表于 10-25 10:38 ?730次閱讀