День заканчивается на Y, поэтому новый видеогенератор ИИ присоединяется к постоянно растущей массе подобных инструментов. Alibaba является последним, кто присоединился к этой области со своей новой моделью преобразования текста в видео, частью своего портфолио Tongyi Wanxiang. Анонсированный на конференции Alibaba Cloud Apsara, видеоинструмент ИИ был лишь частью лавины новых опций ИИ от китайского технологического гиганта, включая более 100 новых больших языковых моделей (LLM),
Tongyi Wanxiang — это коллекция моделей генерации синтетических медиа Alibaba, которая началась с ИИ-создатель изображений в прошлом году. Новый инструмент будет создавать высококачественные видео из текстовых подсказок на китайском и английском языках и неподвижных изображений. Руководители Alibaba хвастались, что у компании есть некоторые из самых передовых архитектур диффузионного трансформатора (DiT), что позволяет ей создавать видео, сохраняющие свое качество независимо от стиля, запрашиваемого пользователем, включая реалистичные живые действия и множество стилей анимации.
Alibaba не тратила много времени на то, как они представляют себе пользователей, использующих ИИ-видеоредактор, но акцент компании на сторонних партнерствах наводит на размышления. Технология может быть использована в ряде маркетинговых и развлекательных видеороликов. Она также может оказаться в видеоиграх, создавая визуальные ссылки или даже целые вступительные видеоролики.
Видели Сору?
Количество видеогенераторов на основе ИИ, которые уже появились или появятся в ближайшее время, просто поражает, учитывая, что совсем недавно их не было на потребительском уровне. OpenAI привлекла к этой идее много внимания своей моделью Sora. Тем не менее, решение компании ограничить Sora определенными партнерами заставило многих людей искать альтернативы, и такие компании, как Alibaba, с радостью заполняют некоторые пробелы.
Runway, Stability AI, Pika, Hotshot и Luma Labs’ Dream Machine — вот лишь некоторые из самых ярких примеров. И Alibaba не одинока среди китайских конкурентов. Kling и владелец TikTok Bytedance Джименг участвуют в той же гонке. Alibaba уже заявила о своих действиях, но финальный монтаж с окончательными победителями и проигравшими еще не снят.