Платформа Dream Machine от Luma Labs теперь предлагает бесплатное добавление звука к видеороликам
- Новый функционал позволяет пользователям добавлять звук на платформу Dream Machine.
- Пользователь может задать текстовый запрос для генерации звука или предоставить это ИИ.
- Большинство других ИИ-инструментов для создания видео, таких как Sora, пока не могут похвастаться даже базовым аудиогенератором.
Luma Labs внедрила новую функцию звукового сопровождения для видео, созданных на платформе Dream Machine. Звук может быть создан на основе текстового запроса пользователя или сгенерирован самим искусственным интеллектом, в зависимости от содержания видеоматериала. Это может быть звук птиц для утреннего пейзажа, гул космического корабля в научно-фантастическом анимации, шум оживленного кафе или любое другое звуковое сопровождение по вашему выбору.
Новая функция доступна бесплатно в бета-версии для всех пользователей. После создания видео через Dream Machine пользователи могут нажать новую кнопку «Аудио», расположенную рядом с уже существующими кнопками «Расширить» и «Улучшить». После этого предлагается два варианта: позволить ИИ выбрать наиболее подходящие звуки или задать текстовый запрос для описания желаемого звука. Например, если у вас есть видео с природным пейзажем, можно предложить добавить звук далекого водопада или довериться выбору ИИ.
Звуковая идея
Это обновление является значительным, поскольку, даже если ИИ-видео иногда визуально впечатляет, они ощущаются незавершенными без звука. Добавление аудио вручную требует много усилий. Даже крупнейшие компании, такие как OpenAI, не предлагают опции звукового сопровождения в своих инструментах.
Хотя создание звука с помощью ИИ само по себе не является уникальным, в Dream Machine происходит интеграция производства аудио с уже имеющимся видео, что делает платформу особенно привлекательной. Но результат не всегда идеален. Например, движение и звук могут не совпадать, как в случае с плавающей собакой.
С другой стороны, при правильной настройке, звук трескающегося огня и смеха людей вокруг может звучать очень реалистично.
Всё же не стоит полностью полагаться на Dream Machine для автоматического создания звука без указаний в запросе. При отсутствии текстового запроса ИИ может сгенерировать что-то далеко от ожидаемого, как это было с клипом про людей у костра, который получился более пугающим, чем задумывалось.
Источник: TechRadar
