Сбер представил семейство генеративных моделей Kandinsky WM 1.0, которые создают видео с учётом законов физики. Нейросети помогут обучать беспилотные автомобили, промышленных роботов и другие системы Physical AI, сообщили «ВЕДам» в пресс-службе Сбера.
Модели создали на базе Kandinsky 5.0 Video Lite и дообучили на миллионах реальных видео: записях с камер роботов, беспилотников и заводов. Это помогло нейросетям лучше понимать физику: как движутся объекты, как они сохраняют форму и взаимодействуют с окружением. Обычные генеративные модели часто нарушают эти законы — деформируют предметы или делают движения неестественными. По словам разработчиков, Kandinsky WM 1.0 выдаёт более правдоподобные ролики.
Изображение сгенерировано нейросетью
Код моделей опубликовали под открытой лицензией MIT, то есть пользоваться моделями могут все разработчики бесплатно. Kandinsky WM 1.0 — первая российская открытая модель для генерации физически достоверных данных.
Как сообщили в компании, модели уже используют Центр робототехники Сбера и институт AIRI. Они пригодятся разработчикам беспилотников, производителям роботов и компаниям, которые внедряют компьютерное зрение. Технические подробности разработчики опубликовали на Хабре.
