- FLUX-mimic 使機器人能從視頻學習複雜工業任務。
- 所需的訓練數據顯著少於現有方法，提升效率。
- 該系統可在短時間內進行微調，縮短部署週期。
- Mimic Robotics 與奧迪合作評估技術在工廠的性能。
瑞士實體人工智能公司 Mimic Robotics 宣佈推出 FLUX-mimic，這是一款與 Black Forest Labs 合作開發的次世代視頻行動模型，旨在使機器人能夠從視頻演示中學習複雜的高靈活性工業任務。該公司表示，該系統所需的演示數據僅是現有方法的一小部分，從而使機器人培訓在工廠環境中更快且更有效，包括在奧迪的部署。FLUX-mimic 將 Mimic 在機器人學習、靈巧操作和工業自動化方面的專業知識與 Black Forest Labs 的 FLUX 3 視頻模型相結合。
根據團隊的説法，該系統建立在 Mimic 早期的視頻行動模型研究基礎上，架構特別設計用於現實世界的實體人工智能應用。
FLUX-mimic 的技術優勢
FLUX-mimic 被市場定位為與 Black Forest Labs 合作開發的次世代視頻行動模型，使工業機器人能夠從視頻演示中學習複雜的操作任務，同時所需的訓練數據顯著少於現有方法。與大多數依賴視覺-語言-行動（VLA）模型的機器人學習系統不同，FLUX-mimic 建立在生成視頻基礎模型之上。傳統的 VLA 系統通常是在靜態圖像和文本數據集上進行預訓練，必須幾乎完全依賴高昂的機器人演示數據來學習物理互動。
相反，FLUX-mimic 利用已經通過大規模視頻預訓練學習了物體動態、運動和物理互動的視頻模型，然後再適應於機器人控制。該系統通過將視頻模型與動作解碼器配對，來預測機器人的行動，該解碼器將視覺預測轉換為可執行的機器人動作。此架構使機器人能夠更有效地學習物理技能，同時減少部署所需的任務特定數據量。
Mimic Robotics 表示，FLUX-mimic 可以使用少至 30 分鐘的機器人演示數據進行微調，這與傳統學習流程通常需要的 30 小時或更多的數據相比，顯著減少了訓練數據的需求。預計這一減少將縮短部署週期，從幾個月縮短至幾周。
與奧迪的合作評估
該技術建立在 Mimic Robotics 早期的視頻行動模型研究基礎上，這些研究擴展了預訓練視頻生成模型的能力，使其能夠預測機器人行動。FLUX-mimic 在此基礎上進一步推進，架構特別設計用於工業環境中的實體人工智能應用，使機器人能夠更好地理解運動和物體行為，然後執行任務。該公司正與汽車製造商奧迪合作，評估該技術在現實工廠環境中的性能。此次合作專注於自動化涉及柔性材料和精細操作的高靈活性任務，這些應用傳統上對於常規工業機器人來説是困難的，因為它們需要大量編程和頻繁的重新工程。
奧迪的生產設施已經使用高程度的自動化，為學習型機器人系統提供測試環境，這些系統能夠適應不斷變化的生產需求。合作夥伴正在探索視頻行動模型如何減少工程工作量，加速機器人部署，並擴大製造和物流操作中的自動化。該公司聲稱，通過將大規模視頻理解與機器人行動預測相結合，FLUX-mimic 代表著機器人從相對少量的演示數據中學習新工業技能的轉變，而不是依賴手動編程的工作流程。
這一方法旨在改善製造的靈活性，同時使機器人自動化在複雜多變的生產環境中變得更加實用。
FLUX-mimic 如何改變工業機器人訓練
FLUX-mimic 的推出標誌著工業機器人訓練的一次重要轉變。透過利用視頻模型，該系統能夠顯著減少所需的訓練數據，這在傳統上是機器人學習的一大挑戰。與奧迪的合作不僅為該技術提供了實際應用場景，還展示了其在複雜生產環境中的潛力。這一創新有助於提升製造靈活性，並使機器人自動化更具實用性，可能會引領未來工業自動化的新趨勢。