Runway обучила свой видео-ИИ, используя материалы популярных фотоблогеров на YouTube

Runway AI Runway AI
Видео, сгенерированное ИИ на платформе Runway в стиле фотографа YouTube Benjamin Hardman. Оно поразительно похоже на реальные видео Hardman. | Источник: 404 Media

Исследование 404 Media установило, что для обучения своей последней модели Gen-3, Runway использовала сотни видеороликов с YouTube. От Runway была получена таблица, где сотрудники собирали ссылки на каналы и видеоролики с YouTube, а также пиратские веб-сайты для использования в модели, которая была закодирована как Jupiter.

Этот документ 404 Media получила из рук бывшего сотрудника компании, который утверждает, что это была «общекорпоративная задача по нахождению качественных видео для обучения модели». Таблица была отредактирована для защиты имен сотрудников.

Реклама

В списке содержатся популярные каналы на YouTube, такие как Kai Wong, Peter McKinnon, Michael Shainblum и многие другие.

Таблица с колонками URL-адресов YouTube, ссылающимися на различных пользователей, темы о жизни в дикой природе и фотографии. Упомянуты такие темы как обзоры фотографии, видеоролики, уроки, студийная фотография, ландшафтная фотография, кузнечное дело и бег.
Несколько YouTube-каналов о фотографии, которые включены в таблицу Runway.

404 Media проверило использование имен некоторых YouTubers в качестве подсказок в Runway и выяснило, что генерируемые видео сильно напоминают те, что принадлежат этим авторам. Например, Benjamin Hardman, который снимает фильмы о фотографических экспедициях в Исландии — его имя использовалось в качестве подсказки. В итоге, ИИ сгенерировал видео фотографа, который очень похож на Hardman, делающего снимки в Исландии.

Также были обнаружены видео, целенаправленно касающиеся определенных камер, таких как Sony a7 IV и FX3. Это может быть сделано для использования в подсказках, вроде «видео, снятое на камеру Fujifilm».

Нет доказательств, что каждый видеоролик и канал из таблицы был использован для обучения Gen-3. Некоторые могли быть отсеяны или удалены на поздних этапах.

Runway не ответила на запросы 404 Media о комментариях и, по-видимому, начала блокировать имена нескольких YouTubers в подсказках. PetaPixel также отправила запрос на комментарии, но не получила ответа.

В прошлом месяце был выпущен Runway Gen-3, который способен создавать ИИ-видео с фотореалистичными людьми и имеет режим режиссера с управлением камерой.

Runway привлек $141 миллион инвестиций и оценен в $1.5 миллиарда.

Google, владеющий YouTube, ясно дал понять, что использование видео с платформы для обучения ИИ нарушает условия использования сервиса. В своей речи, генеральный директор YouTube, Нил Мохан, отметил: «С точки зрения создателя контента, когда он выкладывает свои работы на нашу платформу, он ожидает соблюдения условий использования.»

Бывший сотрудник, который утек таблицу Runway, заявил, что надеется, что публикация этих данных поможет людям лучше понять масштаб деятельности таких компаний и их методы создания «крутых» видео.

Источник: PetaPixel

Добавить комментарий
0 комментариев
Межтекстовые Отзывы
Посмотреть все комментарии

Добавить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *

Подписаться
Уведомить о

Будьте в курсе самых важных событий

Нажимая кнопку "Подписаться", вы подтверждаете, что ознакомились с нашими условиями и соглашаетесь с ними. Политика конфиденциальности и Условия использования
Реклама