1X World Model — это «цифровое воображение» для роботов, которое позволяет им предсказывать последствия своих действий через генерацию видео. Модель служит виртуальным симулятором, помогая ИИ-агентам осваивать сложные манипуляции и имитировать человеческие движения в безопасной среде.
In machine learning, a world model is a computer program that can imagine how the world evolves in response to an agent’s behavior. Building on advancements in video generation and world models for autonomous vehicles, we have trained a world model that serves as a virtual simulator for our robots. From the same starting image sequence, our world model can imagine multiple futures from different robot action proposals. It can also predict non-trivial object interactions like rigid bodies, effects of dropping objects, partial observability, deformable objects (curtains, laundry), and articulated objects (doors, drawers, curtains, chairs).