Xiaomi đã ra mắt Xiaomi-Robotics-U0, một mô hình tự hồi quy đa phương thức 38 tỷ tham số để tổng hợp thể hiện thống nhất. Mô hình này xem tạo hiện thân như...
论文研究HuggingFace Daily Papers(社区热门论文)
Tóm tắt thông tin AI hôm nay
Xiaomi đã ra mắt Xiaomi-Robotics-U0, một mô hình tự hồi quy đa phương thức 38 tỷ tham số để tổng hợp
thể hiện thống nhất. Mô hình này xem tạo hiện thân như một phần mở rộng của tạo hình ảnh và video cơ bản, cùng tối ưu hóa văn bản thành hình ảnh, chỉnh sửa hình ảnh, tạo cảnh hiện thân, di chuyển hiện thân và tạo video hiện thân. Đây là mô hình đầu tiên hỗ trợ tạo cảnh đa chế độ xem chất lượng cao trên các dạng rô-bốt khác nhau, giới thiệu di chuyển hiện thân có cấu trúc, có thể điều khiển. Mô hình đạt được SOTA trong các tác vụ tạo một bước và tuần tự, vượt qua GPT-Image-2.0 trong đánh giá của con người về việc tạo và truyền cảnh thể hiện, đứng đầu về tạo video thể hiện trong World Arena và tăng tỷ lệ thành công ngoài phân phối của pi_0.5 trong các tác vụ thao tác trong thế giới thực từ 36,9% lên 63,2%. Mã và các trạm kiểm soát là mã nguồn mở.
Trích đoạn bài viết gốc
arXivLabs is a framework that allows collaborators to develop and share new arXiv features directly on our website.
Have an idea for a project that will add value for arXiv's community? Learn more about arXivLabs :https://info.arxiv.org/labs/index.html.
Xiaomi đã ra mắt Xiaomi-Robotics-U0, một mô hình tự hồi quy đa phương thức 38 tỷ tham số để tổng hợp thể hiện thống nhất. Mô hình này xem tạo hiện thân như...