0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

華為發(fā)明的機(jī)器人凝視追蹤方法,提高了機(jī)器人的擬人化程度

姚小熊27 ? 來源:愛集微 ? 作者:愛集微 ? 2020-10-12 13:45 ? 次閱讀

華為發(fā)明的機(jī)器人凝視追蹤技術(shù),通過顯示模塊來模擬真實(shí)的機(jī)器人面部輸出,結(jié)合多種偏轉(zhuǎn)角度測量方法,實(shí)現(xiàn)了平滑的凝視追蹤效果,提高了機(jī)器人的擬人化程度。

集微網(wǎng)消息,在現(xiàn)代社會的家庭中,越來越多的父母不能時(shí)刻陪伴孩子,而此時(shí)可以使用智能機(jī)器人進(jìn)行陪伴以及教育孩子。這種智能機(jī)器人可以與孩子進(jìn)行交流,并且可以基于不同的對話內(nèi)容學(xué)習(xí)、更新與孩子的交流方式,可以說非常的人性化。

擬人特性作為衡量機(jī)器人智能化的重要指標(biāo)之一,在人機(jī)交互的過程中,目標(biāo)跟隨以及凝視跟蹤行為的準(zhǔn)確性則直接反映機(jī)器人的擬人化程度,技術(shù)人員往往通過提高機(jī)器人的擬人化程度來提高用戶的使用體驗(yàn)。

而所謂的凝視追蹤技術(shù),就是在機(jī)器人和用戶進(jìn)行對話時(shí)捕捉用戶的眼睛位置并進(jìn)行凝視,因?yàn)槿藗冊谡勗挄r(shí)往往看著對方的眼睛,如果機(jī)器人也可以采用這樣的技術(shù),將會極大的提高其擬人化程度,并且?guī)Ыo用戶極佳的交流體驗(yàn)。

為了實(shí)現(xiàn)這個目的,華為在5月8日申請了一項(xiàng)名為“一種機(jī)器人的控制方法、裝置、機(jī)器人以及存儲介質(zhì)”的發(fā)明專利(申請?zhí)枺?02010382291.0),申請人為華為技術(shù)有限公司。

根據(jù)該專利目前公開的資料,讓我們一起來看看華為的這項(xiàng)凝視追蹤技術(shù)吧。

華為發(fā)明的機(jī)器人凝視追蹤方法,提高了機(jī)器人的擬人化程度

如上圖,為該專利中發(fā)明的機(jī)器人示意圖,其中包括具有模擬人形形態(tài)的a型機(jī)器人、模擬動物形態(tài)的b型機(jī)器人以及非生物形態(tài)的c型機(jī)器人,這些機(jī)器人雖然形狀各異,但是均具有運(yùn)動功能,可以進(jìn)行移動以及旋轉(zhuǎn)等運(yùn)動操作,其具體控制方法的實(shí)現(xiàn)如下圖所示。

華為發(fā)明的機(jī)器人凝視追蹤方法,提高了機(jī)器人的擬人化程度

可以看到,控制機(jī)器人運(yùn)動的過程分為三步,首先需要獲取目標(biāo)對象的位置信息,其次根據(jù)這個位置信息來控制機(jī)器人轉(zhuǎn)動。這個相對位置可以通過自動識別或者手動設(shè)置來確定,它是機(jī)器人與目標(biāo)對象之間的相對位置,例如正前方、右側(cè)等,也可以是具體多少角度的偏轉(zhuǎn),例如+60度或者-120度等。

有了相對位置信息后,機(jī)器人會根據(jù)自身的初始角度以及目標(biāo)對象的位姿確定目標(biāo)偏轉(zhuǎn)角度,例如人形機(jī)器人可以以其面部為正面。為了實(shí)現(xiàn)凝視追蹤的目的,可以將目標(biāo)偏轉(zhuǎn)角度設(shè)置為機(jī)器人看向的方向,這樣就可以使得機(jī)器人的視線對準(zhǔn)目標(biāo)對象,從而完成凝視追蹤。

并且值得一提的是,該專利采用顯示模塊的輸出畫面來完成凝視,這相比于馬達(dá)驅(qū)動的硬件凝視具有更高的響應(yīng)度,利用這種模擬的凝視界面,可以很好的實(shí)現(xiàn)平滑凝視追蹤效果。

華為發(fā)明的機(jī)器人凝視追蹤方法,提高了機(jī)器人的擬人化程度

具體的應(yīng)用案例如上圖所示,這是專利中提供的目標(biāo)偏轉(zhuǎn)角度的獲取示意圖,左側(cè)為機(jī)器人,右側(cè)為真人,對于凝視追蹤而言,最重要的就是將機(jī)器人的視線與目標(biāo)對象的視線進(jìn)行交匯,即處于同一平面內(nèi),因此機(jī)器人需要確定自身當(dāng)前的視線方向以及目標(biāo)對象的視線方法,并且可以基于兩個視線方向確定偏轉(zhuǎn)角度。

該專利提供了三種技術(shù)用于確定這個偏轉(zhuǎn)角度:基于距離傳感器、基于拍攝圖像以及基于語音信號的方式?;诰嚯x傳感器的方法就是通過距離探測單元采集的距離值構(gòu)建機(jī)器人所處場景下的深度圖,基于深度圖來確定當(dāng)前場景包含的對象,并根據(jù)目標(biāo)的輪廓線來確定目標(biāo)對象。

基于拍攝圖像的方法是通過輪廓識別算法提取該場景圖像內(nèi)包括的輪廓信息,并基于輪廓信息對場景圖像進(jìn)行劃分,通過主體類型識別來確定目標(biāo)對象。而基于語音信號的方法則是基于語音分析結(jié)果來確定是否有激活口令,通過口令來確定目標(biāo)對象。

這三種方式都可以用于完成凝視追蹤,并且可以利用多種方法進(jìn)行組合的方式來提高凝視追蹤的準(zhǔn)確率。此外,基于拍攝圖像的方法還需要對攝像模塊上采集的圖像進(jìn)行校準(zhǔn),從而在后續(xù)的凝視追蹤時(shí),可以使得機(jī)器人的眼部視線偏移到目標(biāo)對象的中心位置。

以上就是華為發(fā)明的機(jī)器人凝視追蹤方法,通過確定機(jī)器人與目標(biāo)之間的偏轉(zhuǎn)角度,并不斷調(diào)整顯示模塊的輸出內(nèi)容以及旋轉(zhuǎn)部件來實(shí)現(xiàn)凝視追蹤。此外,該技術(shù)基于三種確定偏轉(zhuǎn)角度的方法,無需借助馬達(dá)來驅(qū)動硬件,響應(yīng)時(shí)間較短,不僅實(shí)現(xiàn)了平滑凝視追蹤行為,也提高了機(jī)器人的擬人化程度。
責(zé)任編輯:YYX

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 機(jī)器人
    +關(guān)注

    關(guān)注

    210

    文章

    28003

    瀏覽量

    205561
  • 華為
    +關(guān)注

    關(guān)注

    215

    文章

    34200

    瀏覽量

    250631
收藏 人收藏

    評論

    相關(guān)推薦

    國內(nèi)外部分人形機(jī)器人企業(yè)一覽

    人形機(jī)器人的定義人形機(jī)器人是一種仿生機(jī)器人,指形狀及尺寸與人體相似,能夠仿人類運(yùn)動、表情、互動及動作的機(jī)器人,并具有一定程度的認(rèn)知和決策智能
    的頭像 發(fā)表于 10-22 17:05 ?226次閱讀
    國內(nèi)外部分人形<b class='flag-5'>機(jī)器人</b>企業(yè)一覽

    開源項(xiàng)目!用ESP32做一個可愛的無用機(jī)器人

    簡介 作者在完成碩士論文答辯后,利用空閑時(shí)間制作了一個他一直想做的機(jī)器人——可愛無用機(jī)器人。 無用機(jī)器人原理是一個連接到開關(guān)的電機(jī),通過邏輯門控制。當(dāng)開關(guān)被推到“開”時(shí),機(jī)器人啟動
    發(fā)表于 09-03 09:34

    碼垛機(jī)器人投產(chǎn)優(yōu)勢及選用方法

    ?碼垛機(jī)器人自動化設(shè)備車間的投產(chǎn)帶來了多方面的顯著優(yōu)勢。?首先,?它大大提高了生產(chǎn)效率,?能夠在24小時(shí)內(nèi)不間斷地工作,?且速度和精度遠(yuǎn)超人工,?從而縮短了生產(chǎn)周期?。?其次,?該設(shè)備顯著降低了企業(yè)
    的頭像 發(fā)表于 07-30 15:33 ?120次閱讀

    Al大模型機(jī)器人

    和迭代來不斷改進(jìn)自身性能。它們可以從用戶交互中學(xué)習(xí)并根據(jù)反饋進(jìn)行調(diào)整,以提高對話質(zhì)量和準(zhǔn)確性??啥ㄖ菩耘c整合性: AI大模型機(jī)器人可以根據(jù)特定需求進(jìn)行定制和整合,以滿足不同場景和應(yīng)用的要求。它們可以與其
    發(fā)表于 07-05 08:52

    abb機(jī)器人home點(diǎn)設(shè)置方法

    ABB機(jī)器人的home點(diǎn)設(shè)置是機(jī)器人編程和操作中非常重要的一環(huán),它關(guān)系到機(jī)器人的精度和穩(wěn)定性。本文將詳細(xì)介紹ABB機(jī)器人home點(diǎn)設(shè)置的方法
    的頭像 發(fā)表于 06-17 09:27 ?2288次閱讀

    基于FPGA EtherCAT的六自由度機(jī)器人視覺伺服控制設(shè)計(jì)

    和增強(qiáng)系統(tǒng)處理圖像的實(shí)時(shí)性,本文提出了一種伊瑟特的六自由度機(jī)器人視覺伺服控制系統(tǒng),將攝像頭集成到基于 Zynq的伊瑟特主站上,提高了視覺伺服的實(shí)時(shí)性.經(jīng)測試,該平臺能夠?qū)σ曈X檢測目標(biāo)的變化做出及時(shí)的反應(yīng)
    發(fā)表于 05-29 16:17

    其利天下技術(shù)·搭載無刷電機(jī)的掃地機(jī)器人的前景如何?

    大的吸力,有效清除各類污漬和顆粒物。同時(shí),低噪音設(shè)計(jì)使得機(jī)器在工作時(shí)不會打擾到家庭成員的休息或工作。此外,無刷電機(jī)的壽命更長,減少了用戶的維護(hù)成本,提高了產(chǎn)品的性價(jià)比。 2.掃地機(jī)器人智能化
    發(fā)表于 05-05 15:03

    華為云在人形機(jī)器人領(lǐng)域展開合作

    華為云與人形機(jī)器人領(lǐng)域的創(chuàng)新企業(yè)樂聚機(jī)器人近日達(dá)成合作,共同致力于探索“華為盤古大模型+夸父人形機(jī)器人”的全新應(yīng)用場景。這是
    的頭像 發(fā)表于 03-25 10:49 ?526次閱讀

    華為云攜手樂聚機(jī)器人,共探人形機(jī)器人智能新紀(jì)元

    近日,華為云計(jì)算技術(shù)有限公司與樂聚(深圳)機(jī)器人技術(shù)有限公司正式簽署戰(zhàn)略合作協(xié)議,標(biāo)志著雙方將共同開拓“華為盤古大模型+夸父人形機(jī)器人”的全新應(yīng)用場景。此舉不僅是
    的頭像 發(fā)表于 03-25 10:17 ?501次閱讀

    機(jī)器人焊接技術(shù)的應(yīng)用與發(fā)展前景

    和更低的成本。今天創(chuàng)想焊縫跟蹤系統(tǒng)小編和大家一起探討機(jī)器人焊接技術(shù)的應(yīng)用與發(fā)展前景。 ??一、機(jī)器人焊接技術(shù)的應(yīng)用 ??機(jī)器人焊接技術(shù)的應(yīng)用,使得焊接過程更加自動化、智能化,有效提高了
    的頭像 發(fā)表于 01-25 14:10 ?1060次閱讀
    <b class='flag-5'>機(jī)器人</b>焊接技術(shù)的應(yīng)用與發(fā)展前景

    LabVIEW的六軸工業(yè)機(jī)器人運(yùn)動控制系統(tǒng)

    。LabVIEW的可視化編程環(huán)境和強(qiáng)大的數(shù)據(jù)處理能力,使得復(fù)雜的運(yùn)動學(xué)算法和軌跡規(guī)劃得以順利實(shí)現(xiàn),顯著提高了工業(yè)機(jī)器人的控制精度和效率。 ? 這是LabVIEW的一個功能介紹,更多的使用方法與開發(fā)案例,歡迎登錄官網(wǎng),了解更多信息
    發(fā)表于 12-21 20:03

    機(jī)器人實(shí)現(xiàn)開發(fā)自由,探索精密工藝的機(jī)器人關(guān)節(jié)模組

    機(jī)器人關(guān)節(jié)是作為機(jī)器人各個部件之間相互連接的節(jié)點(diǎn),提供了必要的運(yùn)動自由度。關(guān)節(jié)模組用其精確度和可靠性,確保了機(jī)器人在各個領(lǐng)域的高效率和高質(zhì)量表現(xiàn)。一體化關(guān)節(jié)使得機(jī)器人能夠模
    的頭像 發(fā)表于 12-08 15:35 ?434次閱讀

    機(jī)器人建模方法和組成

    URDF:機(jī)器人建模方法 ROS是機(jī)器人操作系統(tǒng),當(dāng)然要給機(jī)器人使用啦,不過在使用之前,還得讓ROS認(rèn)識下我們使用的機(jī)器人,如何把一個
    的頭像 發(fā)表于 11-22 16:30 ?811次閱讀
    <b class='flag-5'>機(jī)器人</b>建模<b class='flag-5'>方法</b>和組成

    機(jī)器人阻抗控制有幾種方法

    在工業(yè)機(jī)器人中,阻抗控制是一種非常重要的控制方法,主要用于控制機(jī)器人的力和位。通過調(diào)整阻抗,機(jī)器人可以更好地適應(yīng)不同的操作環(huán)境和任務(wù)需求。 阻抗控制的基本思路是:建立一個期望的
    的頭像 發(fā)表于 11-08 18:08 ?1313次閱讀
    <b class='flag-5'>機(jī)器人</b>阻抗控制有幾種<b class='flag-5'>方法</b>

    機(jī)器人編程需要什么軟件?

    機(jī)器人編程需要什么軟件
    發(fā)表于 11-01 07:34