ByteDance представляет новый видео-модель искусственного интеллекта под названием OmniHuman.
OmniHuman превращает одно фото в реалистичное видео полного движения.
Видео демонстрируют реалистичное пение, речь и движения.
Компания ByteDance, материнская компания TikTok, продемонстрировала новую систему искусственного интеллекта для видео, способную создавать живые видео, где изображенные люди разговаривают, поют и двигаются, всего из одной фотографии. Модель OmniHuman оживляет изображение с выдающейся точностью в движениях тела, мимике и жестах.
Прорыв OmniHuman состоял в обучении на более чем 18,700 часов видео. Теперь эта ИИ-система может имитировать, как люди двигаются, разговаривают и взаимодействуют на видео. Особо отмечается, что данная ИИ-система способна создавать полностью подвижные персонажи, а не только анимировать лицо или верхнюю часть тела. Это значит, что из одного изображения можно создать видео, например, с выступлением, танцем или игрой на музыкальном инструменте.
Результатом являются крайне реалистичные видео, где персонажем может быть как реальный человек с фотографии, так и изображение из художественного стиля. Примеры можно наблюдать ниже.
OmniHuman может стать настоящим хитом на TikTok, если ByteDance все-таки предоставит доступ к этому инструменту. Компания уже предоставляет аналогичный ИИ-видеоредактор под названием Jimeng на платформе, и подобная функция, как OmniHuman, привлечет еще больше пользователей к TikTok и его возможностям.
Однако, ByteDance придется столкнуться с конкуренцией в этой области. Sora от OpenAI уже получил широкое признание в области ИИ-видео, а также есть множество других игроков, таких как Pika, Runway, Pollo и Dream Machine от Luma Labs.
У модели ByteDance есть огромный потенциал применения, будь то воскрешение актёров прошлых лет для новых фильмов или обучение студентов истории от лица исторических личностей. Даже цифровые аватары для социальных сетей и игр могут стать более реалистичными и адаптивными в реальном времени в зависимости от ввода пользователей.
На данный момент OmniHuman является исследовательским проектом, но тот факт, что ByteDance уже демонстрирует его возможности, предполагает, что практическое применение этой технологии не за горами. Возможно, именно этот ИИ-персонаж станет следующим видео-трендом на TikTok.
Источник: TechRadar
