Xiaomi выпустила Xiaomi-Robotics-U0 — мультимодальную авторегрессивную модель с 38 миллиардами параметров для унифицированного воплощённого синтеза. Эта мо...
论文研究HuggingFace Daily Papers(社区热门论文)
Ежедневный обзор ИИ
Xiaomi выпустила Xiaomi-Robotics-U0 — мультимодальную авторегрессивную модель с 38 миллиардами
параметров для унифицированного воплощённого синтеза. Эта модель рассматривает воплощённое поколение как расширение базовой генерации изображений и видео, совместно оптимизируя процесс преобразования текста в изображение, редактирование изображений, генерацию воплощённой сцены, воплощённую миграцию и генерацию воплощённого видео. Это первая модель, поддерживающая высококачественную многовидную генерацию сцен в различных формах роботов, вводя структурированную, управляемую миграцию воплощений. Модель достигает SOTA в одноступенчатых и последовательных задачах генерации, превосходит GPT-Image-2.0 в оценке человеческой генерации и передачи воплощённой сцены, занимает первое место по генерации воплощённого видео в World Arena и повышает уровень успешности pi_0.5 вне дистрибуции в реальных манипуляционных задачах с 36,9% до 63,2%. Код и контрольные точки — с открытым исходным кодом.
Фрагмент оригинальной статьи
arXivLabs is a framework that allows collaborators to develop and share new arXiv features directly on our website.
Have an idea for a project that will add value for arXiv's community? Learn more about arXivLabs :https://info.arxiv.org/labs/index.html.
Xiaomi выпустила Xiaomi-Robotics-U0 — мультимодальную авторегрессивную модель с 38 миллиардами параметров для унифицированного воплощённого синтеза. Эта мо...