🏆 BBC и DAZN телепортируют зрителей на футбольное поле

Французский стартап Immersiv.io объединил усилия с медиагигантом BBC и стриминговым сервисом DAZN, чтобы развернуть интерактивные трехмерные трансляции турнира в реальном времени, созданные на основе официальных данных 3D-трекинга FIFA.

В основе проекта лежит разработанная Immersiv.io платформа ARISE. Во время матча установленные на стадионах умные камеры фиксируют координаты ключевых точек на телах игроков (скелетные данные) несколько десятков раз в секунду. Платформа мгновенно принимает этот массив информации и с помощью ИИ-алгоритмов и машинного обучения переносит движения на цифровые аватары футболистов и арбитров. Нейросети также используются для генерации точных 3D-моделей спортсменов на основе их фотографий и антропометрических данных, а также для автоматической синхронизации аудиодорожки вещателя со скелетной анимацией.

«Скелетные данные – это сложнейший живой поток, в котором из-за высокой скорости игры иногда возникают помехи или “дребезжание” трекинга. Мы используем ИИ-инструменты для фильтрации и исправления этих ошибок на лету, чтобы добиться максимально плавного и реалистичного воссоздания матча в 3D», – рассказала соосновательница Immersiv.io Эмманюэль Роже.

Британская BBC интегрировала технологию в свое веб-приложение и мобильный сервис BBC Sport. Болельщики могут полностью управлять виртуальной камерой: переключаться между классическим вещательным планом, тактическим видом сверху, обзором от третьего лица или даже переходить на вид из глаз конкретного футболиста. Поверх 3D-картинки накладывается динамическая инфографика: линии расстановки, скорость бега, траектории возможных пасов и расстояние до ворот.

В Японии DAZN использует AR-технологию иначе – для создания мгновенных разборов в перерывах и после матчей. Студия генерирует десятки трехмерных повторов одного и того же гола или спорного момента с любых немыслимых ракурсов.

По словам разработчиков, в будущем, по мере развития ИИ, 3D-реконструкции спортивных матчей станут неотличимы от реального видео, что полностью изменит индустрию спортивного вещания.