Muse Video выдаёт 10-секундные ролики со звуком

Meta тестирует видеогенератор Muse Video в закрытой бете с отобранными партнёрами: модель выдаёт ролики длительностью 10 секунд. Доступ к сборке, помеченной как «Beta», получило издание TestingCatalog, которое опубликовало первую подборку генераций и описало сильные стороны модели по итогам собственных тестов.

Коротко

• Нативное аудио с голосом и музыкой работает без отдельного шага: Meta подтвердила поддержку звука, но ранее признавала, что синхронизация аудио с картинкой и физически достоверное быстрое движение пока даются модели хуже.
• По оценке TestingCatalog, ролики выделяются проработкой мелких деталей, пониманием физического мира и временной согласованностью, а запросы с защищённым авторским правом материалом модель отсекает довольно жёстко.
• Meta заявляла, что Muse Video придёт в Meta AI, то есть на сайт Meta.ai и в одноимённое приложение, однако публичной даты выхода, цен и лимитов генерации пока нет.

Видеогенерация закрывает крупный пробел в собственном стеке медиамоделей Meta, и дистрибуция здесь весит не меньше качества: Facebook и Instagram давно построены вокруг визуального контента. Muse Image раздаётся бесплатно для повседневных генераций, поэтому Muse Video, вероятно, пойдёт по схожей схеме и окажется внутри продуктов, которыми уже пользуются создатели и обычные пользователи. Для платных видеосервисов такой сценарий меняет условия конкуренции сильнее, чем разница в качестве отдельных роликов.

Muse Video выдаёт ролики по 10 секунд со сгенерированным звуком

Модель находится в закрытом бета-тестировании с отобранными партнёрами и помечена как «Beta». TestingCatalog получил доступ и прогнал через неё собственные промпты: по итогам этих генераций издание оценивает потенциал Muse Video как соответствующий лучшим доступным моделям в проработке мелких деталей, понимании мира и временной согласованности кадров.

Сейчас модель выдаёт ролики длиной 10 секунд, и при этой длительности качество картинки, по описанию TestingCatalog, остаётся очень высоким. Meta подтвердила, что Muse Video поддерживает нативное аудио, включая голос и музыку, то есть звук генерируется вместе с изображением, без отдельного шага.

Meta ранее признавала, что у Muse Video остаются пробелы в синхронизации звука с изображением и в физически достоверной передаче быстрого движения. По наблюдениям TestingCatalog, модель уже на этапе беты жёстко ограничивает запросы, затрагивающие защищённый авторским правом контент.

Впервые Muse Video показали в июле вместе с Muse Image

В июле Meta впервые представила Muse Video одновременно с Muse Image, показала первые сэмплы и заявила, что видеомодель вскоре станет доступна создателям и появится в Meta AI. Muse Image сейчас доступна бесплатно для повседневных генераций. Наличие рабочей беты показывает, что разработка Muse Video вышла за рамки июльского публичного превью.

Опубликованная TestingCatalog подборка состоит из двенадцати роликов по разным типам запросов: вывеска «OPEN 24 HOURS», загорающаяся под дождём, бой двух фехтовальщиков в бамбуковом лесу, опрокинутый бокал красного вина на мраморной столешнице и облёт камерой шеф-повара, собирающего блюдо. Часть тестовых промптов издание взяло у пользователей @MarsForTech, @bughuntergeek и @BartokGabi17.

Среди тестов есть и прямые проверки звука: в одном ролике мужчина произносит реплику о том, что стал «котопапой», а котёнок мяукает в конце. Другой запрос имитировал съёмку на смартфон с размытием в движении, пересветом неба и шумом ветра в микрофоне.

Meta связывает Muse Video с Meta AI, сайтом Meta.ai и приложением

Meta уже заявляла, что Muse Video появится в Meta AI, поэтому сайт Meta.ai и приложение Meta AI остаются наиболее очевидными первыми точками распространения после выхода из беты. По оценке TestingCatalog, дальше модель может попасть в ленту Vibes, где Meta собирает сгенерированные ИИ видео, а после этого в Instagram, Facebook и другие продукты компании.

Издание также называет приложение Edits, инструмент Meta для создания и монтажа видео, которому нативная генерация добавила бы собственный источник материала, и Instagram как самую видеоцентричную площадку компании. Список площадок остаётся оценкой TestingCatalog: официально Meta связывала Muse Video только с Meta AI и с доступом для создателей.

Muse Video без даты релиза

Подтверждённой даты публичного выхода Muse Video нет. Meta ограничилась заявлением о том, что модель придёт в Meta AI, и не раскрывала ни цену, ни лимиты на число генераций. До релиза модель остаётся в закрытой бете с отобранными партнёрами, а публично доступны лишь июльские сэмплы и генерации, опубликованные TestingCatalog по итогам собственных тестов.