LoopWAM: Closed-Loop Generalist Policy Improvement from Deployment Rollouts
Scaling expert demonstrations alone does not enable generalist robot policies to improve from deployment. Real-world rollouts contain successes, suboptimal behavior, and failures: imitating every recorded action can reinforce poor behavior, while filtering out failures discards evidence of physical interactions and their consequences. We introduce \textbf{LoopWAM}, a closed-loop world-action model that learns directly from this full quality spectrum, using rollouts from both itself and other deployed policies. Source-dependent noise sampling unifies behavior learning and action-conditioned world modeling, while quality steering and quality-weighted supervision retain full video supervision across qualities and regulate action imitation. Video and action tokens interact throughout parallel denoising, allowing learned consequences to inform action generation directly. On RoboChallenge Table30-V2, three deployment-and-training rounds raise success from 23.67\% to 43.33\%, a 19.7-percentage-point gain, with a final score of 56.80. LoopWAM also achieves 94.5\% average success on RoboTwin~2.0 and 49.5\% overall success on RoboCasa365 without additional embodied pretraining, obtaining the best overall results among the compared methods across all three benchmarks. On challenging shirt folding task, two rounds of deployment-driven improvement after single-task post-training raise success from 13.20\% to 55.56\%. These results demonstrate closed-loop improvement from mixed-quality experience under both multi-task learning and single-task post-training. \href{https://loop-wam.github.io/}{\textcolor{orange}{Project Page}}
C1 reading
Select any word for its Thai meaning and pronunciation.
แปลไทยทั้งบท
การปรับขนาดการแสดงของผู้เชี่ยวชาญเพียงลําพัง ไม่ได้ทำให้นโยบายหุ่นยนต์ทั่วไปทำได้ปรับปรุงได้จากการจัดตั้ง. การนําเสนอในโลกจริงมีประสบความสําเร็จ พฤติกรรมที่ไม่ดีที่สุด และความล้มเหลว: การเลียนแบบการกระทำที่บันทึกไว้ทุกครั้งทำได้เสริมพฤติการณ์ที่แย่ลง ขณะที่การกรองความล้ําเหลวทิ้งหลักฐานของร่างกาย. การปฏิสัมพันธ์และผลต่อเนื่องของมัน. เรานําเสนอ \textbf{LoopWAM} รูปแบบการดําเนินการในโลกแบบปิดที่เรียนรู้โดยตรงจากสเป็คตรัมคุณภาพครบวงจรนี้ โดยใช้การเปิดตัวจากมันเองและนโยบายอื่น ๆ ที่พัฒนา.
การจับตัวอย่างเสียงที่ขึ้นอยู่กับแหล่งรวมการเรียนรู้พฤติกรรมและการจําลองโลกที่มีอัตราการกระทำ ขณะที่การควบคุมคุณภาพและการดูแลที่มีน้ําหนักคุณภาพรักษาการดูแลวีดีโอเต็ม ๆ ผ่านคุณสมบัติและควบคุม. วิดีโอและท็อคอนการกระทำปฏิสัมพันธ์ระหว่างการระบุแบบตรงกันข้าม ทำให้ผลลัพธ์ที่ได้เรียนรู้ทำได้แจ้งการสร้างการกระทำได้โดยตรง. บนโต๊ะ RoboChallenge30-V2 สามรอบการจัดจําหน่ายและการฝึกอบรม เพิ่มความสําเร็จจาก 23.67\% เป็น 43.33\%, เสริม 19.7 แต้มร้อยละ โดยมีคะแนนสุดท้าย 56.80.
LoopWAM ยังมีผลสําเร็จเฉลี่ย 94.5% ใน RoboTwin ~ 2.0 และ 49.5% รายได้รวมใน RoboCasa365 โดยไม่มีการฝึกซ้อมก่อน. วิธีการเปรียบเทียบทั้งสามปริมาตรฐาน. ในงานการพับเสื้อที่มีความท้าทาย สองรอบการปรับปรุงโดยการพัฒนาหลังจากการฝึกอบรมครั้งเดียว เพิ่มความสําเร็จจาก 13.20\% เป็น 55.56\%. ผลงานเหล่านี้แสดงให้เห็นการปรับปรุงแบบปิด จากประสบการณ์ที่มีคุณภาพผสม ในด้านการเรียนรู้หลายหน้าที่และการฝึกอบรมหลังการทำงานคนเดียว.
ประโยคและวลีที่ใช้ได้จริงจากเรื่องนี้
Useful phrases from this story
การปรับขนาดการแสดงผู้เชี่ยวชาญเพียง.
From the storyScaling expert demonstrations alone does not enable generalist robot policies to improve from deployment.
เลียนแบบทุกการกระทําที่บันทึกได้.
From the storyReal-world rollouts contain successes, suboptimal behavior, and failures: imitating every recorded action can reinforce poor behavior, while filtering out failures discards evidence of physical interactions and their consequences.
การกรองความล้มเหลวทิ้งหลักฐาน.
From the storyReal-world rollouts contain successes, suboptimal behavior, and failures: imitating every recorded action can reinforce poor behavior, while filtering out failures discards evidence of physical interactions and their consequences.
ใช้การโครงการออกมาจากทั้งสองตัว.
From the storyWe introduce \textbf{LoopWAM}, a closed-loop world-action model that learns directly from this full quality spectrum, using rollouts from both itself and other deployed policies.
การเก็บตัวอย่างทําให้การเรียนรู้พฤติกรรมและ.
From the storySource-dependent noise sampling unifies behavior learning and action-conditioned world modeling, while quality steering and quality-weighted supervision retain full video supervision across qualities and regulate action imitation.
Save & Review
Only words saved from this story appear here.