 |
 |
 |
 |
 |
 |
||
 |
 |
 |
 |
 |
| 1 | 1/1 | 返回列表 |
| 查看: 763 | 回復(fù): 0 | |||
BFT驛站新蟲 (小有名氣)
|
[交流]
FACTR賦能Franka機(jī)器人：觸覺-視覺融合決策的顛覆性突破
|
|
機(jī)器人觸覺感知的瓶頸與突破 在接觸密集型任務(wù)（如易碎品抓取、面團(tuán)揉捏、精密裝配）中，觸覺與力反饋是保障操作安全性與適應(yīng)性的核心。傳統(tǒng)系統(tǒng)存在兩大瓶頸： 1.數(shù)據(jù)獲取割裂：傳統(tǒng)遙操作缺乏雙向力覺耦合，示范數(shù)據(jù)缺失環(huán)境交互的力學(xué)動態(tài)特征。 2.視覺依賴陷阱：強(qiáng)化學(xué)習(xí)策略易過度擬合視覺輸入，忽略力覺模態(tài)的關(guān)鍵作用，導(dǎo)致面對新物體時(shí)泛化性能驟降 。 卡內(nèi)基梅隆大學(xué)團(tuán)隊(duì)提出FACTR(Force-Attending Curriculum Training)。通過低成本力反饋遙操作系統(tǒng)與課程化訓(xùn)練策略，實(shí)現(xiàn)機(jī)器人動態(tài)交互能力的躍升。 FACTR核心技術(shù)解析 1. 低成本雙向力反饋遙操作 三⼤特性： 環(huán)境力覺映射：從機(jī)械臂關(guān)節(jié)扭矩反演接觸力，通過領(lǐng)導(dǎo)者臂實(shí)時(shí)反饋環(huán)境幾何約束。 冗余關(guān)節(jié)控制：基于零空間投影算法，自定義關(guān)節(jié)“休息位姿”，避免狹窄空間碰撞（點(diǎn)擊觀看控制器演示視頻）。 主動重力補(bǔ)償：支持機(jī)械臂空中懸停，實(shí)現(xiàn)雙⼿遙操作中瞬時(shí)暫停與姿態(tài)調(diào)整。 2. 力-視覺課程化訓(xùn)練 訓(xùn)練邏輯： 前期：視覺主導(dǎo)建立基礎(chǔ)操作框架（如物體定位）。 中期：引入動態(tài)模糊（像素/隱空間），強(qiáng)制策略融合力覺信息決策。 后期：模糊強(qiáng)度遞減，策略過渡至力覺主導(dǎo)模式（Transformer跨模態(tài)注意力機(jī)制）。 泛化增益：面對新物體（形狀、剛度超出訓(xùn)練集），成功率提升43%，遠(yuǎn)超基線方法。 Franka Research 3：FACTR驗(yàn)證的核心載體 四大優(yōu)勢奠定科研標(biāo)桿地位： 高精度力控：7自由度+±0.1mm定位精度，支持復(fù)雜接觸動力學(xué)建模。 開放生態(tài)：ROS/ROS2全棧支持，兼容多模態(tài)傳感器（ZED雙目相機(jī)、觸覺手套）。 人機(jī)協(xié)作安全：安全認(rèn)證+自適應(yīng)控制，保障協(xié)作安全。 全球科研生態(tài)：覆蓋50+國家實(shí)驗(yàn)室，提供定制化SDK與硬件擴(kuò)展接口。 多場景任務(wù)驗(yàn)證 實(shí)驗(yàn)一：雙臂協(xié)同抬箱 基線失�。� 視覺ACT：無法感知物體掉落，因策略過度擬合訓(xùn)練箱體外觀。 視覺+力ACT：抬舉過程因力覺關(guān)注不足導(dǎo)致失穩(wěn)。 FACTR表現(xiàn)： 通過關(guān)節(jié)扭矩監(jiān)測（恢復(fù)至抬舉前基線值），實(shí)時(shí)觸發(fā)復(fù)位動作。 跨模態(tài)注意力分析顯示：抬舉階段力覺關(guān)注度超視覺60% 交叉注意力分析 實(shí)驗(yàn)分析證明：使用視覺+力量ACT來強(qiáng)化機(jī)器學(xué)習(xí)策略對于力量關(guān)注度不夠，在抬舉箱子時(shí)無法控制力度，搬運(yùn)箱子時(shí)也無法保持穩(wěn)。 而FACTR策略通過力感知主導(dǎo)模式革新機(jī)器人操作：優(yōu)先評估物體重量并動態(tài)調(diào)控力度，實(shí)現(xiàn)從視覺依賴到力覺精準(zhǔn)控制的轉(zhuǎn)變，顯著增強(qiáng)復(fù)雜受力場景下的任務(wù)執(zhí)行效能。 實(shí)驗(yàn)二：水果的抓取與擺放 實(shí)驗(yàn)證明： 在水果抓放任務(wù)中，僅視覺策略及不帶 FACTR 的視覺力策略均會因水果視覺特征超出訓(xùn)練數(shù)據(jù)分布范圍而陷入困境，單純依靠視覺信息無法生成有效操作路徑，后者因過度依賴視覺輸入也無法實(shí)現(xiàn)正確操作。而 FACTR 策略能有效利用力反饋信息，即便視覺輸入超范圍，也能正確處理力輸入，確保力數(shù)據(jù)處于有效區(qū)間，精準(zhǔn)預(yù)測抓取與放置的后續(xù)操作軌跡，實(shí)現(xiàn)穩(wěn)健操作。 以上這些實(shí)驗(yàn)證明運(yùn)用FACTR低成本力反饋遙操作比普通僅依靠視覺 ACT（基線）來訓(xùn)練機(jī)器人更加穩(wěn)定，并且還能將對同類操作的的泛化率顯著提高了 43%。 本研究所有實(shí)驗(yàn)均使用Franka機(jī)械臂完成，使用兩個(gè)外部ZED攝像頭來獲取現(xiàn)實(shí)世界的視覺信息。 商業(yè)價(jià)值 技術(shù)優(yōu)勢 提升操作精度與靈活性： 精確模擬人類手臂動作，遠(yuǎn)程遙控操作更靈活。 增強(qiáng)安全協(xié)作： 實(shí)時(shí)力反饋與碰撞檢測，保障人機(jī)協(xié)作安全。 降低成本與維護(hù)： 低成本系統(tǒng)部署，簡化遠(yuǎn)程監(jiān)控與維護(hù)流程。 應(yīng)用場景 科研領(lǐng)域:仿生觸覺模擬、人機(jī)協(xié)作神經(jīng)機(jī)制研究 工業(yè)制造:精密電子裝配、柔性材料質(zhì)檢 醫(yī)療健康:內(nèi)鏡手術(shù)輔助、康復(fù)外骨骼動態(tài)阻抗調(diào)節(jié) |
回復(fù)此樓» 猜你喜歡
鼓風(fēng)和真空烘箱的區(qū)別是什么？深圳鋰優(yōu)帶你了解與選擇。
已經(jīng)有0人回復(fù)
-
深圳鋰優(yōu)詳解：管式爐怎么工作？鋰電產(chǎn)線核心設(shè)備原理實(shí)操篇
已經(jīng)有0人回復(fù)
-
機(jī)械工程論文潤色/翻譯怎么收費(fèi)?
已經(jīng)有86人回復(fù)
-
卷繞機(jī)為什么能精準(zhǔn)卷繞電芯？鋰優(yōu)技術(shù)全解析
已經(jīng)有0人回復(fù)
-
西班牙巴塞羅那自治大學(xué)博士招聘|歐洲共同基金項(xiàng)目|物理/材料/化學(xué)/微電子等專業(yè)
已經(jīng)有0人回復(fù)
-
哈爾濱工程大學(xué)動力學(xué)院趙建輝團(tuán)隊(duì)招收2026博士研究生
已經(jīng)有10人回復(fù)
-
085600求調(diào)劑
已經(jīng)有5人回復(fù)
» 本主題相關(guān)商家推薦: (我也要在這里推廣)
相關(guān)版塊跳轉(zhuǎn)
我要訂閱樓主 BFT驛站 的主題更新
| 1 | 1/1 | 返回列表 |
| 最具人氣熱帖推薦 [查看全部] | 作者 | 回/看 | 最后發(fā)表 | |
|---|---|---|---|---|
|
[論文投稿]
EST拒稿重投
 5+3
|
15102603076 2026-03-02 | 3/150 |
|
|---|---|---|---|---|
|
[考研] 化學(xué) 0703求調(diào)劑 總分293 一志愿211 +3 | 土土小蟲 2026-03-03 | 3/150 |
|
|
|
[考研] 復(fù)試調(diào)劑 +4 | 杰尼龜aaa 2026-03-03 | 4/200 |
|
|
|
[考研] 環(huán)境工程學(xué)碩288求助調(diào)劑 +7 | 多吃億口芝士 2026-03-02 | 7/350 |
|
|
|
[考研] 0856材料工程，初試313調(diào)劑 +7 | 賣個(gè)關(guān)子吧 2026-03-03 | 7/350 |
|
|
|
[考研] 0703化學(xué)306調(diào)劑 +4 | 26要上岸 2026-03-03 | 4/200 |
|
|
|
[考研] 266材料化工求調(diào)劑 +3 | 哇塞王帥 2026-03-03 | 3/150 |
|
|
|
[考研] 289求調(diào)劑 +7 | BrightLL 2026-03-02 | 9/450 |
|
|
|
[考研] 材料工程269求調(diào)劑 +5 | 白刺玫 2026-03-02 | 5/250 |
|
|
|
[考研] 一志愿華中科技大學(xué)，化學(xué)專業(yè)344分，求調(diào)劑 +6 | 邢xing1 2026-03-02 | 6/300 |
|
|
|
[考研] 化工270求調(diào)劑 +10 | 什么名字qwq 2026-03-02 | 10/500 |
|
|
|
[考研] 調(diào)劑材料學(xué)碩 +4 | 詞凝Y 2026-03-02 | 4/200 |
|
|
|
[考研] 298求調(diào)劑 +10 | 人間唯你是清歡 2026-02-28 | 14/700 |
|
|
|
[考研] 11408，學(xué)碩276求調(diào)劑 +3 | 崔wj 2026-03-02 | 5/250 |
|
|
|
[考博] 26超級電容器申博 +3 | dhdjdjend 2026-02-25 | 3/150 |
|
|
|
[考研] 289求調(diào)劑 +8 | yang婷 2026-03-02 | 9/450 |
|
|
|
[考研] 一志愿中石油（華東）本科齊魯工業(yè)大學(xué) +3 | 石能偉 2026-03-02 | 3/150 |
|
|
|
[考研] 一志愿東北大學(xué)材料專碩328，求調(diào)劑 +3 | shs1083 2026-03-02 | 3/150 |
|
|
|
[考研] 264求調(diào)劑 +4 | 巴拉巴拉根556 2026-02-28 | 4/200 |
|
|
|
[碩博家園] 博士自薦 +7 | 科研狗111 2026-02-26 | 11/550 |
|