【ZiDongHua之自動(dòng)化學(xué)院派收錄關(guān)鍵詞:人形機(jī)器人 計(jì)算機(jī)視覺(jué) 傳感器 國(guó)地中心】
 
  聯(lián)合發(fā)布︱國(guó)地中心聯(lián)合清華大學(xué)發(fā)布便攜式人形機(jī)器人通用末端采集系統(tǒng)成果,并將發(fā)布相關(guān)標(biāo)準(zhǔn)
 
  引言
 
  當(dāng)下,人形機(jī)器人技術(shù)正以前所未有的速度改變著我們的生活與工作方式。作為該領(lǐng)域的核心議題之一,人形機(jī)器人的數(shù)據(jù)收集技術(shù)正日益受到廣泛關(guān)注。如何高效收集數(shù)據(jù),特別是高精度優(yōu)質(zhì)數(shù)據(jù),成為學(xué)術(shù)界及產(chǎn)業(yè)界高度關(guān)注的問(wèn)題。
 
  國(guó)地中心通過(guò)梳理行業(yè)內(nèi)數(shù)據(jù)收集的常用方式分析當(dāng)前痛點(diǎn),首次發(fā)布自主研發(fā)的便攜式人形機(jī)器人通用末端采集系統(tǒng)亮點(diǎn),并計(jì)劃聯(lián)合清華大學(xué)共同發(fā)布《便攜式人形機(jī)器人通用末端采集系統(tǒng)》標(biāo)準(zhǔn)。
 
  人形機(jī)器人數(shù)據(jù)收集的行業(yè)現(xiàn)狀
 
  當(dāng)下,人形機(jī)器人的遙控操控技術(shù)正以前所未有的速度發(fā)展。其中,外部捕捉技術(shù)作為遙控操控的核心手段,正逐步成為連接人類(lèi)與機(jī)器人之間的橋梁。該技術(shù)通過(guò)捕捉人類(lèi)雙手的位置信息,實(shí)時(shí)同步控制機(jī)器人雙臂末端的位姿,進(jìn)而完成復(fù)雜的運(yùn)動(dòng)學(xué)解算。目前,行業(yè)內(nèi)主要采用以下三種外部捕捉方式:
 
  (1)全身光學(xué)動(dòng)態(tài)捕捉
 
  這一技術(shù)依賴(lài)于精密復(fù)雜的光學(xué)攝像頭系統(tǒng),基于計(jì)算機(jī)視覺(jué)原理,能夠全方位、多角度地追蹤目標(biāo)特征點(diǎn),實(shí)現(xiàn)全身動(dòng)作的精準(zhǔn)捕捉。其顯著優(yōu)勢(shì)在于高精度、高動(dòng)態(tài)性能以及全身關(guān)節(jié)數(shù)據(jù)的全面采集。然而,高昂的設(shè)備成本以及復(fù)雜的剛動(dòng)力學(xué)計(jì)算力反饋機(jī)制,限制了其廣泛應(yīng)用。
 
 
 ?。?)慣性動(dòng)作捕捉+視覺(jué)
 
  該技術(shù)結(jié)合了慣性傳感器(如陀螺儀、加速度計(jì)等)與視覺(jué)技術(shù)的優(yōu)勢(shì),能夠?qū)崟r(shí)感知并記錄關(guān)節(jié)的角度變化、加速度和角速度等關(guān)鍵運(yùn)動(dòng)信息。其特點(diǎn)在于較高的精度以及頭部和手臂數(shù)據(jù)的全面收集。但穩(wěn)定性不足、運(yùn)動(dòng)范圍受限以及缺乏力反饋機(jī)制,成為其亟待解決的問(wèn)題。
 
 
 ?。?)運(yùn)動(dòng)手套
 
  運(yùn)動(dòng)手套通過(guò)集成多種傳感器,精準(zhǔn)采集佩戴者的手部動(dòng)作數(shù)據(jù),并用于驅(qū)動(dòng)或模擬人形機(jī)器人的動(dòng)作。其優(yōu)勢(shì)在于手部數(shù)據(jù)的精確度高,為機(jī)器人操作提供了精細(xì)的控制能力。然而,穩(wěn)定性差、啟動(dòng)標(biāo)定繁瑣以及便捷度不足,成為制約其發(fā)展的瓶頸。
 
 
  盡管上述三種采集方式在VR和人體數(shù)據(jù)分析領(lǐng)域取得了顯著成果,但它們并非專(zhuān)門(mén)針對(duì)人形機(jī)器人操作或數(shù)據(jù)采集而設(shè)計(jì)。手部作為人形機(jī)器人作業(yè)操作的末端執(zhí)行器,其數(shù)據(jù)采集質(zhì)量直接關(guān)系到機(jī)器人的操作精度和效率。因此,對(duì)通用機(jī)器人末端采集器的需求愈發(fā)迫切,亟待行業(yè)內(nèi)外共同探索和創(chuàng)新。
 
  UMI數(shù)據(jù)收集框架的優(yōu)勢(shì)及劣勢(shì)
 
  UMI(Universal Manipulation Interface)數(shù)據(jù)收集框架作為當(dāng)前機(jī)器人領(lǐng)域的一項(xiàng)重要技術(shù),為機(jī)器人數(shù)據(jù)采集提供了強(qiáng)有力的支持。
 
  強(qiáng)項(xiàng)
 
  高精度與高實(shí)效性:UMI結(jié)合了最先進(jìn)的SLAM技術(shù)與GoPro內(nèi)置的IMU數(shù)據(jù),能夠高精度捕捉動(dòng)作,且通過(guò)徹底的延遲匹配,為動(dòng)態(tài)動(dòng)作(如投擲)實(shí)現(xiàn)了現(xiàn)實(shí)世界可部署的策略。這確保了從人類(lèi)演示到機(jī)器人執(zhí)行的實(shí)時(shí)性和準(zhǔn)確性,為機(jī)器人操作提供了可靠的數(shù)據(jù)支持。
 
  便攜性與低成本:UMI采用手持式夾持器和精心設(shè)計(jì)的界面,實(shí)現(xiàn)了便攜式、低成本和信息豐富的數(shù)據(jù)收集。同時(shí),UMI的學(xué)習(xí)策略與硬件無(wú)關(guān),可部署在多個(gè)機(jī)器人平臺(tái)上無(wú)需進(jìn)行額外的適配或調(diào)整,降低了用戶(hù)的使用門(mén)檻。
 
  多功能性及泛化能力:UMI框架解鎖了機(jī)器人操作的新功能,只需更改每個(gè)任務(wù)的訓(xùn)練數(shù)據(jù),即可實(shí)現(xiàn)零樣本可泛化動(dòng)態(tài)的、雙手的、精確的和長(zhǎng)程類(lèi)任務(wù)。這使得UMI能夠應(yīng)對(duì)各種復(fù)雜的操作任務(wù),為機(jī)器人領(lǐng)域的發(fā)展注入了新的活力。
 
  不足
 
  力反饋能力匱乏:UMI的手持式夾持器設(shè)備由于缺乏必要的力反饋功能,導(dǎo)致在數(shù)據(jù)采集過(guò)程中難以精確調(diào)控夾持力度,增加了損壞風(fēng)險(xiǎn),并嚴(yán)重限制了數(shù)據(jù)采集在力反饋維度上的全面性和準(zhǔn)確性,這成為制約UMI進(jìn)一步發(fā)展的關(guān)鍵因素之一。
 
  視覺(jué)定位誤差:UMI手持式夾持器定位受光照、環(huán)境紋理、視野大小、采集姿態(tài)、采集速度等因素影響,視覺(jué)定位易出現(xiàn)誤差,導(dǎo)致位姿不準(zhǔn)確,影響數(shù)據(jù)集精度。
 
  國(guó)地中心便攜式人形機(jī)器人通用末端采集系統(tǒng)的優(yōu)勢(shì)
 
  國(guó)家地方共建人形機(jī)器人創(chuàng)新中心基于UMI開(kāi)發(fā)的便攜式通用機(jī)器人末端采集系統(tǒng),主要特點(diǎn)包括:
 
  電動(dòng)控制:通過(guò)扳機(jī)控制電機(jī)帶動(dòng)夾爪開(kāi)合,替代傳統(tǒng)機(jī)械扳機(jī),大幅提升了夾爪操作的便捷度及數(shù)據(jù)采集的效率。這一創(chuàng)新設(shè)計(jì)使得用戶(hù)能夠更輕松地完成數(shù)據(jù)采集任務(wù),提高了工作效率。
 
  力反饋能力:通過(guò)讀取電機(jī)數(shù)據(jù)獲取實(shí)時(shí)力反饋,無(wú)論物體軟硬均能實(shí)現(xiàn)有效夾取。這一功能擴(kuò)大了系統(tǒng)的使用場(chǎng)景,使得系統(tǒng)能夠應(yīng)對(duì)更多需要力反饋的操作任務(wù),增加了數(shù)據(jù)集的多樣性。
 
  實(shí)時(shí)夾爪開(kāi)合位置反饋:通過(guò)讀取電機(jī)數(shù)據(jù)解算夾爪開(kāi)合的精確位置,替代視覺(jué)位置解算,提高夾爪行程反饋精確度,減少了算力要求。這一設(shè)計(jì)使得系統(tǒng)能夠更高效地處理數(shù)據(jù),提高了系統(tǒng)的整體性能。
 
  快拆電池:采集設(shè)備能夠快速更換電池,無(wú)需外部供電,擴(kuò)大了使用場(chǎng)景。這一功能使得系統(tǒng)能夠在各種環(huán)境下穩(wěn)定運(yùn)行,提高了系統(tǒng)的靈活性和可用性。
 
  SLAM性能提升:在設(shè)計(jì)過(guò)程中提出了一種基于VINS-Mono的視覺(jué)慣性里程計(jì)(VIO)改進(jìn)方案,具有更小的體積、更高的定位精度、回環(huán)與重定位功能以及卓越的魯棒性。這一創(chuàng)新設(shè)計(jì)使得系統(tǒng)能夠以較高速度,更多姿態(tài)進(jìn)行數(shù)據(jù)采集,并且在背景特征不豐富環(huán)境下(如桌面,地面)實(shí)現(xiàn)更精確的定位和導(dǎo)航。
 
  國(guó)地中心下一步計(jì)劃
 
  國(guó)家地方共建人形機(jī)器人創(chuàng)新中心作為國(guó)家級(jí)的人形機(jī)器人平臺(tái),肩負(fù)著引領(lǐng)行業(yè)標(biāo)準(zhǔn)的責(zé)任。基于本產(chǎn)品的創(chuàng)新型設(shè)計(jì),國(guó)地中心計(jì)劃聯(lián)合行業(yè)頭部單位,共同制定《便攜式人形機(jī)器人通用末端采集系統(tǒng)》標(biāo)準(zhǔn)。通過(guò)對(duì)數(shù)據(jù)采集系統(tǒng)的術(shù)語(yǔ)和定義、系統(tǒng)結(jié)構(gòu)、系統(tǒng)功能要求、軟件硬件要求、安全防護(hù)以及試驗(yàn)方法等多個(gè)方面形成標(biāo)準(zhǔn),致力于解決異構(gòu)平臺(tái)泛化、場(chǎng)景遷移數(shù)據(jù)采集難等問(wèn)題。
 
  同時(shí),國(guó)地中心也將聯(lián)合清華大學(xué)不斷優(yōu)化便攜式通用機(jī)器人末端采集系統(tǒng)的性能,目標(biāo)形成成熟的產(chǎn)業(yè)化產(chǎn)品,為行業(yè)提供更優(yōu)質(zhì)、更高效的數(shù)據(jù)采集方法,推動(dòng)行業(yè)的快速蓬勃發(fā)展。
 
  未來(lái)展望
 
  展望未來(lái),國(guó)地中心將繼續(xù)深化探索多模態(tài)融合技術(shù),推動(dòng)人形機(jī)器人技術(shù)的不斷創(chuàng)新和發(fā)展。同時(shí),國(guó)地中心與清華大學(xué)將基于便攜式人形機(jī)器人通用末端采集系統(tǒng),持續(xù)開(kāi)展與國(guó)內(nèi)外研究機(jī)構(gòu)、企業(yè)的深入合作,共同推進(jìn)人形機(jī)器人產(chǎn)業(yè)的發(fā)展。我們相信,在國(guó)地中心的不懈努力和行業(yè)內(nèi)外的共同支持下,人形機(jī)器人技術(shù)將不斷取得新的突破和成就。
 
  修改于2024年12月13日