Ego2Sim 代理:用手機影片教機械手臂 (Ego2Sim Agent: Teach a Robot Arm with a Phone Video)

• 日期：2026-11-05
• 來源主題：opencv26-participants
• 同質性／開發狀態：OpenCV參賽者題目
• 已有團隊創作：是（歷屆競賽作品、近似競賽作品或成熟 APP／服務）
• 已知近似作品：Venkat Ram
• 選題建議：OpenCV AI Competition 2026 參賽者題目，選題時視為已有團隊創作
• 類別：OpenCV參賽者題目

所遇到的問題

教機械手臂做動作通常需要遙控操作。

可開發的 APP 主題

Ego2Sim 代理:用手機影片教機械手臂 (Ego2Sim Agent: Teach a Robot Arm with a Phone Video)

這支 APP 能做到什麼

• 用手機拍攝自己移動杯子
• 以 AWS 上的 OpenCV 5 追蹤杯子
• MuJoCo 中的 Franka Panda 重現動作
• 由 Claude 代理檢查結果，再重試、接受或詢問真人

核心差異／備註

只要拍一段手機影片就能教機械手臂，不需遙控操作。