До сих пор трейлеры к фильмам создавались в основном человеком.
Исследователи из Эдинбургского университета разработали модель на основе ИИ, которая может автоматически генерировать трейлеры фильма.
Модель ИИ на основе пары нейронных сетей способна выдать подходящий, эмоционально захватывающий трейлер к любому фильму. Команда уже использовала эту систему для создания более 40 трейлеров.
Чтобы лучше справиться с задачей автоматического создания трейлеров, исследователи разделили ее на две подзадачи, а именно: первая - определение повествовательной структуры фильма и вторая - предсказание чувств (точнее, чувств и настроения), которые он вызывает.Таким образом, созданная технология обрабатывает как часть фильма (например, видео), так и текстовые отрывки из его сценария.
Моделирование фильмов представлено в виде графов, где узлы являются кадрами, а связи обозначают семантические отношения между ними.
В новом методе используя две отдельные нейронные сети. Первая обрабатывает видео- и аудиоматериалы фильма, чтобы найти интересные сцены. А вторая, по сути, является арбитром того, что может быть интересно зрителю. Она просматривает текстовую версию фильма - подобно сценарию - и использует обработку естественного языка, чтобы найти важные и эмоциональные моменты.
Вместе две нейронные сети могут определять поворотные моменты в фильме. Обычно, это ситуации, в которых происходит резкая смена в сценарии, точка невозврата, моменты провала и кульминация.
Работа, на которую у людей уходят месяцы, может быть выполнена с помощью искусственного интеллекта менее чем за шесть часов. Нелогично, но работает! Google использует искусственный интеллект для разработки процессоров.
