今天,騰訊騰訊Robotics X實(shí)驗(yàn)室,發(fā)布發(fā)布了靈巧操作研究成果,機(jī)器究成機(jī)械并推出:
自研機(jī)器人靈巧手 “TRX-Hand(我)” 和機(jī)械臂 “TRX-Arm(我弟)”。人靈
大家也可以叫我小靈手,巧操巧手能做很多細(xì)活,作研一個(gè)致力未來(lái)要成為服務(wù)大眾生活的果自機(jī)器人。(現(xiàn)在還在努力學(xué)習(xí)完善中)
初次見(jiàn)面,研靈請(qǐng)大家吃葡萄。臂首
(吃了我的次亮葡萄,要繼續(xù)往下看哦) 為什么要致力服務(wù)生活? 因?yàn)樯钪杏性S多人需要幫助,騰訊如老人、發(fā)布?xì)埣踩说鹊?。機(jī)器究成機(jī)械 但生活環(huán)境太復(fù)雜了,人靈除開這顆葡萄,巧操巧手還有無(wú)數(shù)種的物品,形態(tài)、功能、用法各不相同:機(jī)器人應(yīng)該怎樣去識(shí)別它們?又應(yīng)該怎樣去拿起?還應(yīng)該發(fā)多大的力才能保證不拿壞? 目前還沒(méi)有一款機(jī)器人能全部做到。 我的出現(xiàn)就是為了去解決這個(gè)難點(diǎn)。 今天,請(qǐng)?jiān)试S我給大家做個(gè)自我介紹,算是提前認(rèn)識(shí)。(等我學(xué)成出山,來(lái)到你們家的時(shí)候,別感到陌生。)
大家看,拿起杯子的過(guò)程,都用了哪些感知能力? 視覺(jué)——認(rèn)識(shí)杯子:通過(guò)相機(jī)認(rèn)識(shí)物體,了解布局。 接近覺(jué)——找到杯子:通過(guò)微型激光雷達(dá)和接近傳感器,接近物體,判斷距離,精準(zhǔn)辨位。(人體也有類似的功能,當(dāng)你老板站在你身后的時(shí)候,你會(huì)不自覺(jué)地感到一股涼意) 觸覺(jué)——感知杯子:全手覆蓋高靈敏度觸覺(jué)皮膚,能判斷接觸,輔助視覺(jué),感知物體狀態(tài)。 力覺(jué)——拿放杯子:通過(guò)腕部力傳感使動(dòng)作更輕柔,避免損傷物體。
我身上還有多傳感器信息融合技術(shù),就像人閉著眼睛也能拿到面前的物品一樣,在行動(dòng)中更精準(zhǔn)執(zhí)行任務(wù)。
我擁有3根手指、8個(gè)可獨(dú)立控制關(guān)節(jié),最大持續(xù)指尖力可達(dá)15牛,最大關(guān)節(jié)速度一秒鐘能夠轉(zhuǎn)動(dòng)600度,又快又有力。 柔性驅(qū)動(dòng)的指尖設(shè)計(jì)也有效提升了手指的抗沖擊能力,讓“手”更加可靠。
可輕松拿捏不同形狀尺寸物體和高動(dòng)態(tài)的難度動(dòng)作。
光說(shuō)不練假把式,接下來(lái)看看我的操作!
大家試試拿水瓶,從左手拋到右手 拋接等高動(dòng)態(tài)動(dòng)作,實(shí)時(shí)性要求極高,執(zhí)行或感知上的細(xì)微誤差都會(huì)造成失敗。 在拿起物品的那一刻,便要根據(jù)傳感器確定好物品在手內(nèi)的位置與姿態(tài),規(guī)劃出高動(dòng)態(tài)動(dòng)作軌跡。 再根據(jù)實(shí)時(shí)預(yù)測(cè)的物體飛行軌跡在數(shù)毫秒內(nèi)計(jì)算出最優(yōu)攔截時(shí)間、最優(yōu)攔截位姿與最優(yōu)攔截軌跡,保證抓拋物品被平穩(wěn)攔接。
雙手配合倒液體,確保兩個(gè)物體不觸碰
雙手配合搖液體,確保兩個(gè)物體緊碰不分開 雙手協(xié)同稍有不慎就會(huì)產(chǎn)生過(guò)大沖擊力,我會(huì)壞、物品也會(huì)壞。 結(jié)合視覺(jué)和觸覺(jué),調(diào)整到最合適的握姿,基于機(jī)械臂末端力傳感信號(hào)的力位混合控制,實(shí)現(xiàn)雙手協(xié)同動(dòng)作。 可能之前幾個(gè)操作,大家還沒(méi)完全感受到我的靈巧。 接下來(lái),我的操作有多細(xì),請(qǐng)看數(shù)字。 攪拌棒直徑8mm,插孔9mm。 僅僅依靠頭部相機(jī),通過(guò)對(duì)物體間相對(duì)位置的迭代估計(jì),并融入微小的觸覺(jué)感知,便能獲得穩(wěn)定的攪拌棒、孔的識(shí)別與定位。 攪拌棒是無(wú)紋理、高反光的細(xì)長(zhǎng)物體,尤其是在插攪拌棒的過(guò)程中,不僅攪拌棒會(huì)遮住孔,攪拌棒的反光還會(huì)倒映出孔,讓視覺(jué)產(chǎn)生混淆。 于是我學(xué)習(xí)了人類穿針線時(shí)的處理方式:在失敗后,立馬重試,逐漸接近真實(shí)孔位、確保完成插孔操作。 在現(xiàn)實(shí)生活中誤差不能完全避免,機(jī)器人需要處理因此造成的任務(wù)失敗,并實(shí)時(shí)感知任務(wù)狀態(tài),識(shí)別失敗并自主調(diào)整策略,最終成功完成任務(wù),這就是我的容錯(cuò)機(jī)制。
大家攪拌液體的時(shí)候一般會(huì)怎么做?用手臂或者手腕攪動(dòng)。 我也可以,但我是小靈手,必須用極高的感知能力和控制精度,來(lái)展現(xiàn)我的“靈巧”。
手指攪拌 只用手指攪拌還真有點(diǎn)難,還好我會(huì)深度學(xué)習(xí),還有可以無(wú)限試錯(cuò)的仿真環(huán)境。 為了修煉手指攪拌,我在仿真世界里試了很久,收集了豐富的學(xué)習(xí)數(shù)據(jù)和優(yōu)化策略,在回到現(xiàn)實(shí)世界前,還練習(xí)了仿真環(huán)境 (sim) 與真實(shí)環(huán)境 (real)遷移法,將學(xué)到的經(jīng)驗(yàn)帶到現(xiàn)實(shí)中。
于是覺(jué)醒了捻物 這么多經(jīng)驗(yàn),讓我在指尖接觸到攪拌棒時(shí),便能很快、很穩(wěn)地生成三個(gè)手指的協(xié)同運(yùn)動(dòng)。 并對(duì)攪拌棒施加合適的力,在保證攪拌棒不掉落的前提下,按期望軌跡攪拌杯子里的液體。 看到這,是不是想留點(diǎn)什么言? “寫對(duì)聯(lián)……摸麻將……按摩……吹頭發(fā)……彈鋼琴……打羽毛球……帶娃……” 這是在最近的展示過(guò)程中,朋友們和我的互動(dòng)。 大家的想象更加地證明了生活中使用場(chǎng)景的復(fù)雜和多樣,這對(duì)我的靈巧操作能力是巨大挑戰(zhàn)。 不過(guò)我不怕,接下來(lái)我會(huì)努力學(xué)習(xí)更多技能,早日成為服務(wù)大家生活的機(jī)器人。 好了,我的介紹完了。 今天就到這兒吧,期待能盡快與大家見(jiàn)面。 (等下,你弟弟TRX-Arm呢?不介紹一下嗎)
彩蛋來(lái)了! 我弟是騰訊Robotics X實(shí)驗(yàn)室針對(duì)人居環(huán)境自主研發(fā)的高性能七自由度擬人機(jī)械臂,具有運(yùn)動(dòng)靈巧、爆發(fā)力強(qiáng)、觸控一體以及柔順安全等特點(diǎn),可負(fù)載6kg以上,最大速度7.4m/s,最大加速度44.5m/s2。 不同于傳統(tǒng)的協(xié)作型機(jī)械臂,他采用了繩索傳動(dòng)與差分驅(qū)動(dòng)相結(jié)合的方式,不僅有效降低了傳動(dòng)摩擦和運(yùn)動(dòng)慣量,還實(shí)現(xiàn)了多電機(jī)多關(guān)節(jié)協(xié)同驅(qū)動(dòng),具有高動(dòng)態(tài)運(yùn)動(dòng)能力。此外,TRX-Arm前臂集成了768點(diǎn)的觸覺(jué)陣列,其刷新頻率高達(dá)1000Hz,以此實(shí)現(xiàn)了酒瓶在滾動(dòng)和平衡過(guò)程中的高頻實(shí)時(shí)定位。
審核編輯 :李倩