 |
 |
 |
 |
 |
 |
||
 |
 |
 |
 |
 |
| 1 | 1/1 | 返回列表 |
| 查看: 625 | 回復(fù): 0 | |||
BFT驛站新蟲(chóng) (小有名氣)
|
[交流]
ObjectVLA如何讓Franka機(jī)器人自主理解新物體
|
|
人類(lèi)演示數(shù)據(jù)的缺失問(wèn)題與泛化挑戰(zhàn) 在機(jī)器人模仿學(xué)習(xí)領(lǐng)域，依賴(lài)海量人類(lèi)演示數(shù)據(jù)的傳統(tǒng)方法正面臨開(kāi)放世界場(chǎng)景的嚴(yán)峻挑戰(zhàn)。當(dāng)訓(xùn)練目標(biāo)從"遞出蘋(píng)果"轉(zhuǎn)變?yōu)檎Z(yǔ)義相似但視覺(jué)差異顯著的"遞出桃子"時(shí)，現(xiàn)有端到端模型在分布外（OOD）物體上的泛化成功率驟降至不足30%。這種局限性直接制約了機(jī)器人在動(dòng)態(tài)商業(yè)場(chǎng)景（如倉(cāng)儲(chǔ)分揀、柔性制造）中的實(shí)際應(yīng)用價(jià)值。 ObjectVLA：視覺(jué)-語(yǔ)言-動(dòng)作協(xié)同進(jìn)化 ObjectVLA框架通過(guò)三重創(chuàng)新突破這一瓶頸： 定位感知推理機(jī)制：構(gòu)建包含2000個(gè)視覺(jué)-文本對(duì)的數(shù)據(jù)集，利用邊界框標(biāo)注建立物體語(yǔ)義與空間定位的精確映射。 混合訓(xùn)練策略：采用10:1的機(jī)器人交互數(shù)據(jù)與視覺(jué)語(yǔ)言數(shù)據(jù)配比，在Franka機(jī)器人上驗(yàn)證了該比例在保持任務(wù)精度與泛化能力間的平衡性。 智能手機(jī)增強(qiáng)方案：通過(guò)手機(jī)拍攝21張多角度圖像配合1個(gè)epoch微調(diào)，即可將新物體操作成功率提升至80%以上。 真實(shí)場(chǎng)景驗(yàn)證 基礎(chǔ)任務(wù)驗(yàn)證：在"移動(dòng)到物體"任務(wù)中，對(duì)100個(gè)OOD物體取得64%的泛化成功率。 復(fù)合技能測(cè)試：推動(dòng)/旋轉(zhuǎn)任務(wù)的分布外成功率分別達(dá)到62%和58%。 工業(yè)級(jí)料箱揀選：在含多干擾物的復(fù)雜場(chǎng)景中，目標(biāo)物體檢索成功率較基線提升46.7%。 這些實(shí)驗(yàn)強(qiáng)調(diào)了我們的方法在減少對(duì)大規(guī)模人類(lèi)演示的依賴(lài)的同時(shí)，實(shí)現(xiàn)強(qiáng)大的物體泛化的能力。 本研究所有實(shí)驗(yàn)均使用Franka機(jī)械臂完成，使用兩個(gè)外部ZED攝像頭和一個(gè)手腕處的Realsense 435i攝像頭來(lái)獲取現(xiàn)實(shí)世界的視覺(jué)信息。該7自由度協(xié)作機(jī)器人可通過(guò)BFT機(jī)器人平臺(tái)獲取 技術(shù)突破與商業(yè)價(jià)值 相比傳統(tǒng)方案，ObjectVLA在三個(gè)維度實(shí)現(xiàn)跨越： 部署成本降低：新物體適配時(shí)間從72小時(shí)壓縮至10分鐘。 操作精度提升：在標(biāo)準(zhǔn)測(cè)試環(huán)境中，位姿估計(jì)誤差＜0.5mm。 商業(yè)場(chǎng)景擴(kuò)展：已成功應(yīng)用于3C電子裝配、醫(yī)藥物流分揀等10+行業(yè)場(chǎng)景。 為什么選擇BFT？ 我們?yōu)镕ranka用戶(hù)打造全周期服務(wù)生態(tài)： 采購(gòu)無(wú)憂(yōu) - 提供設(shè)備融資租賃方案（首付低至30%） 開(kāi)發(fā)支持 - 200+即插即用算法庫(kù)實(shí)時(shí)調(diào)用 售后保障 - 7×24小時(shí)專(zhuān)家響應(yīng)團(tuán)隊(duì) 生態(tài)對(duì)接 - 接入500+合作企業(yè)的場(chǎng)景方案庫(kù) |
回復(fù)此樓» 猜你喜歡
北京理工大學(xué)（珠海）誠(chéng)邀全球英才依托申報(bào)2026年優(yōu)青（海外）項(xiàng)目！
已經(jīng)有0人回復(fù)
-
大連海事大學(xué)輪機(jī)學(xué)院博士名額1個(gè)
已經(jīng)有41人回復(fù)
-
工程熱物理與能源利用論文潤(rùn)色/翻譯怎么收費(fèi)?
已經(jīng)有65人回復(fù)
-
英國(guó)國(guó)王大學(xué)院士團(tuán)隊(duì)誠(chéng)招兩名材料方面的博士后
已經(jīng)有1人回復(fù)
-
求材料
已經(jīng)有2人回復(fù)
-
0858能源動(dòng)力專(zhuān)碩求調(diào)劑，
已經(jīng)有1人回復(fù)
-
一志愿 大連理工大學(xué)機(jī)械專(zhuān)碩
已經(jīng)有0人回復(fù)
-
26申博-增材制造方向
已經(jīng)有0人回復(fù)
» 本主題相關(guān)商家推薦: (我也要在這里推廣)
相關(guān)版塊跳轉(zhuǎn)
我要訂閱樓主 BFT驛站 的主題更新
| 1 | 1/1 | 返回列表 |
| 最具人氣熱帖推薦 [查看全部] | 作者 | 回/看 | 最后發(fā)表 | |
|---|---|---|---|---|
|
[考研] 環(huán)境工程學(xué)碩288求助調(diào)劑 +7 | 多吃?xún)|口芝士 2026-03-02 | 7/350 |
|
|---|---|---|---|---|
|
|
[考研] 中國(guó)林科院林化所（南京）2026年招收化學(xué)/材料/環(huán)境工程等背景碩士研究生3名 +3 | realstar2006 2026-02-27 | 3/150 |
|
|
[考研] 306求調(diào)劑 +7 | 張張張張oo 2026-03-03 | 7/350 |
|
|
|
[考研] 085600 材料與化工 298 +7 | 小西笑嘻嘻 2026-03-03 | 7/350 |
|
|
|
[考研] 283求調(diào)劑 +9 | 鹿沫笙 2026-03-02 | 9/450 |
|
|
|
[考研] 0805總分292，求調(diào)劑 +12 | 幻想之殤 2026-03-01 | 12/600 |
|
|
|
[考研] 284求調(diào)劑 +6 | 天下熯 2026-03-02 | 6/300 |
|
|
|
[考研] 291求調(diào)劑 +3 | MuoLuo1312 2026-03-02 | 6/300 |
|
|
|
[考研] 材料化工調(diào)劑 +13 | 今夏不夏 2026-03-01 | 16/800 |
|
|
|
[考研] 272求調(diào)劑 +9 | 材紫有化 2026-02-28 | 9/450 |
|
|
|
[考研] 0856材料求調(diào)劑 +12 | hyf hyf hyf 2026-02-28 | 13/650 |
|
|
|
[考研] 0856求調(diào)劑285 +11 | 呂仔龍 2026-02-28 | 11/550 |
|
|
|
[考研] 一志愿山東大學(xué)材料與化工325求調(diào)劑 +5 | 半截的詩(shī)0927 2026-03-02 | 5/250 |
|
|
|
[考研] 0856化工專(zhuān)碩求調(diào)劑 +15 | 董boxing 2026-03-01 | 15/750 |
|
|
|
[考研] 求調(diào)劑 +3 | 熬夜的貓頭鷹 2026-03-02 | 3/150 |
|
|
|
[基金申請(qǐng)] 此成果不能導(dǎo)入原因：元數(shù)據(jù)必填信息不完整，可 進(jìn)行補(bǔ)充。 +4 | Kittylucky 2026-03-02 | 5/250 |
|
|
|
[考研] 281求調(diào)劑 +5 | 2026計(jì)算機(jī)_誠(chéng)心 2026-03-01 | 8/400 |
|
|
|
[考研] 化工專(zhuān)碩342，一志愿大連理工大學(xué)，求調(diào)劑 +6 | kyf化工 2026-02-28 | 7/350 |
|
|
|
[考研] 264求調(diào)劑 +4 | 巴拉巴拉根556 2026-02-28 | 4/200 |
|
|
|
[考研] 0856材料求調(diào)劑 +4 | 麻辣魷魚(yú) 2026-02-28 | 4/200 |
|