 |
 |
 |
 |
 |
 |
||
 |
 |
 |
 |
 |
| 1 | 1/1 | 返回列表 |
| 查看: 584 | 回復: 0 | |||
[交流]
AnyPlace助力Franka突破物體形狀與配置多樣性挑戰(zhàn)
|
|
物體幾何形狀與放置配置多樣性的挑戰(zhàn) 在機器人操作領(lǐng)域，物體放置一直是一個復雜且富有挑戰(zhàn)性的任務。由于物體的幾何形狀和放置配置的多樣性，實現(xiàn)穩(wěn)健且可推廣的物體放置變得尤為困難。 傳統(tǒng)的機器人放置方法往往依賴于大量的特定任務演示，難以泛化到未見過的物體或新的放置配置，大大限制了機器人在實際應用中的靈活性和效率。 AnyPlace的出現(xiàn)，為解決物體放置存在的各類問題提供了新的思路。這是一種完全在合成數(shù)據(jù)上訓練的兩階段方法，能夠預測現(xiàn)實世界任務的各種可行放置姿勢。 AnyPlace主要通過兩個階段組合形成：高級放置位置預測和低級姿勢預測 高級放置位置預測階段 輸入處理：接收輸入語言描述和RGBD圖像。 對象分割：利用Molmo和SAM-2技術(shù)對感興趣的對象進行分割。 放置位置建議：通過Molmo提議可能的放置位置。 3D投影與裁剪：利用相機參數(shù)將深度圖重新投影到3D空間，并以提議的放置位置為中心裁剪感興趣的區(qū)域。 低級姿勢預測階段 數(shù)據(jù)輸入：將要放置的對象的完整點云以及高級放置位置預測階段裁剪的放置位置區(qū)域輸入到低級姿勢預測模型中。 輸出變換：模型輸出用于對象放置的精確相對變換。 泛化能力如何實現(xiàn)？AnyPlace生成了一個完全合成的數(shù)據(jù)集，包括： 合成數(shù)據(jù)集構(gòu)建： Blender中隨機生成多樣物體。 IsaacSim模擬多樣化放置場景（堆疊、插入、懸掛）。 模型訓練與泛化： 使用上述合成數(shù)據(jù)集訓練模型。 模型學習到物體放置特性，實現(xiàn)泛化能力。 真實場景驗證 在仿真環(huán)境中測試AnyPlace模型，評估其在不同放置模式下的成功率、覆蓋廣度以及細粒度放置的精度。 在實驗室將小瓶精準插入試管架 任務設(shè)定：明確放置任務“把藥瓶放到藥瓶架上”，準備實驗環(huán)境。 物體識別與模式匹配：啟動AnyPlace系統(tǒng)，識別藥瓶和藥瓶架，匹配放置模式。 布局預測與調(diào)整：分析最佳放置位置，進行碰撞檢測，調(diào)整Franka機器人姿態(tài)。 不同放置模式下的任務演示： 多樣化驗證與優(yōu)化：執(zhí)行放置任務，檢查放置效果，更換配置重復驗證，收集反饋優(yōu)化系統(tǒng)。 這些實驗都證明了，在零樣本方式下直接應用于真實場景測試時，使用完全合成的數(shù)據(jù)集訓練的模型能夠準確預測各種配置和物體的放置姿勢，這一結(jié)果充分展示了所提出方法的穩(wěn)健性和泛化能力。 本研究所有實驗均使用Franka機械臂完成，使用外部微型攝像頭來獲取現(xiàn)實世界的視覺信息。該7自由度協(xié)作機器人可通過BFT機器人平臺獲取 技術(shù)突破與商業(yè)價值 突破了傳統(tǒng)機器人在精細操作上的限制，AnyPlace實現(xiàn)了四大應用價值： 生產(chǎn)效率提升：完成高精度任務，效率提升30%以上 操作精度提升：實現(xiàn)精細放置的高精度達毫米級別 人力成本降低：減少人力需求，人力成本節(jié)約可達20% 應用拓展：用于工業(yè)、教育、醫(yī)療等領(lǐng)域，市場潛力巨大，年收入增長率超過15% 登錄BFT平臺了解更多Franka機器人的商業(yè)部署方案。 |
回復此樓» 猜你喜歡
哈工大（深圳）國家級青年人才 鐘穎教授課題組 新增26級博士名額！歡迎報名！
已經(jīng)有16人回復
-
中國科學技術(shù)大學 工程科學學院 國家級人才團隊 誠聘博士后
已經(jīng)有5人回復
-
金屬材料論文潤色/翻譯怎么收費?
已經(jīng)有189人回復
-
260求調(diào)劑
已經(jīng)有1人回復
-
陜西科技大學智能制造與機器人工程學院 李晨教授招收申請-考核制博士研究生
已經(jīng)有11人回復
-
08工學-一作ACS AMI（IF 8.2）｜物理團簇背景｜求長三角/山東地區(qū)團簇、催化方向調(diào)劑
已經(jīng)有1人回復
-
0858專碩.339分求調(diào)劑
已經(jīng)有0人回復
相關(guān)版塊跳轉(zhuǎn)
我要訂閱樓主 BFT驛站 的主題更新
| 1 | 1/1 | 返回列表 |
| 最具人氣熱帖推薦 [查看全部] | 作者 | 回/看 | 最后發(fā)表 | |
|---|---|---|---|---|
|
[考研] 一志愿211 化學305分求調(diào)劑 +3 | 0703楊悅305分 2026-03-05 | 3/150 |
|
|---|---|---|---|---|
|
|
[考研] 化學290求調(diào)劑 +3 | 兩顆 西柚 2026-03-07 | 4/200 |
|
|
[考研] 298求調(diào)劑 +4 | fjj0912 2026-03-03 | 5/250 |
|
|
|
[考研] 接受26屆調(diào)劑生 +16 | 豬豬豬毛 2026-03-06 | 16/800 |
|
|
|
[考研] 材料專碩調(diào)劑 +5 | 慕辰123 2026-03-05 | 8/400 |
|
|
|
[考研] 物理學求調(diào)劑 +3 | sx宋 2026-03-05 | 3/150 |
|
|
|
[考研] 材料調(diào)劑 +10 | ounce. 2026-03-04 | 12/600 |
|
|
|
[考研] 材料學碩318求調(diào)劑 +21 | February_Feb 2026-03-01 | 24/1200 |
|
|
|
[考研]
 材料工程調(diào)劑
+6
|
zbcm_zbcm 2026-03-05 | 6/300 |
|
|
|
[考研] 08工科求調(diào)劑 +3 | 隆LLL 2026-03-06 | 4/200 |
|
|
|
[考研] 085602高分子方向求調(diào)劑 +7 | tlgudy 2026-03-04 | 7/350 |
|
|
|
[考研] 289求調(diào)劑 +3 | 馳光絕景 2026-03-04 | 4/200 |
|
|
|
[考研] 328求調(diào)劑 +6 | vuzhdkfjkx 2026-03-04 | 7/350 |
|
|
|
[考研] 085602 293分求調(diào)劑 +3 | SivanNano. 2026-03-05 | 3/150 |
|
|
|
[考研] 一志愿武理085601專碩347分求調(diào)劑 +4 | 啊歐歐歐 2026-03-04 | 5/250 |
|
|
|
[考研] 一志愿中科大080500總分324求調(diào)劑 +3 | jorna 2026-03-03 | 6/300 |
|
|
|
[考研] 292求調(diào)劑 +3 | sgbl 2026-03-03 | 3/150 |
|
|
|
[考研] 一志愿東北大學化學314分求調(diào)劑 +5 | lr1212.. 2026-03-02 | 5/250 |
|
|
|
[考研] 求調(diào)劑 +4 | Guo_yuxuan 2026-03-02 | 5/250 |
|
|
|
[考研] 11408，學碩276求調(diào)劑 +3 | 崔wj 2026-03-02 | 5/250 |
|