Скриншот короткого видео, созданного с помощью Meta’s Movie Gen, с водяным знаком в левом нижнем углу | Фото предоставлено: Мета
Meta представила свой генератор преобразования текста в видео и звук Movie Gen, который использует генеративный искусственный интеллект для создания видеоклипов продолжительностью до 16 секунд со скоростью 16 кадров в секунду и высококачественным звуком до 45 секунд.
«При наличии текстового запроса мы можем использовать совместную модель, оптимизированную как для преобразования текста в изображение, так и для преобразования текста в видео, для создания высококачественных изображений и видео высокой четкости. Эта модель преобразователя параметров 30B способна генерировать видео продолжительностью до 16 секунд со скоростью 16 кадров в секунду», — сказал Мета в своем блоге.
Некоторые задачи, которые могут выполнять модели, включают синтез текста в видео, персонализацию видео, редактирование видео, генерацию видео в аудио и генерацию текста в аудио, говорится в исследовательской работе Meta.
Movie Gen можно использовать для создания видеоклипов, а также для их редактирования на основе текстовых подсказок. Помимо создания и расширения звуковых дорожек, он также может превращать фотографии человека в короткий видеоклип. Компания поделилась гиперреалистичными видеороликами плавающего детеныша бегемотика, ребенка, бегущего по пляжу, а также видеоклипом человека с фотографии, проводящего научный эксперимент.
Хотя эта технология еще не получила широкого распространения, Meta предположила, что в будущем ее пользователи на платформах социальных сетей смогут создавать свои собственные видеоролики или редактировать мультимедийные файлы, прежде чем делиться ими.
«Применяя совместный подход, мы хотим быть уверены, что создаем инструменты, которые помогут людям улучшить присущую им креативность новыми способами, о которых они, возможно, даже не мечтали. Представьте себе, что вы анимируете видео «день из жизни», чтобы опубликовать его на Reels и отредактировать его с помощью текстовых подсказок, или создать индивидуальное анимированное поздравление с днем рождения для друга и отправить его ему в WhatsApp», — сказал Мета.
По-прежнему широко распространены опасения по поводу потенциала создания видео с помощью искусственного интеллекта и его возможного влияния на конфиденциальность людей, авторские права художников и безопасность детей.
Опубликовано – 5 октября 2024 г., 10:23 по восточному стандартному времени.