Газпром-Медиа Холдинг: Video Tagging System

Продукт
Название базовой системы (платформы): Искусственный интеллект (ИИ, Artificial intelligence, AI)
Разработчики: Пятница, ГПМ Дата
Дата премьеры системы: 2023/04/05
Технологии: ИБ - Биометрическая идентификация,  Речевые технологии,  Системы видеоаналитики

Основные статьи:

2023: Запуск сервиса

«Газпром-Медиа Холдинг» 5 апреля 2023 года сообщил о запуске сервиса автоматического распознавания и тегирования видеоконтента Video Tagging System. Он разработан телеканалом «Пятница!» и компанией «ГПМ Дата» — единым центром управления большими данными активов «Газпром-Медиа Холдинга».

Video Tagging System создан на основе технологий компьютерного зрения (Computer Vision) и нейронных сетей. Сервис помогает распознавать лица, речь (распознавание речи выполняется с использованием технологий Tinkoff Voice Kit), надписи и количество персон в кадре, движения людей, выполнять детекцию животных и предметов; классифицировать кинематографические планы, считывать начало заставок и титров и определять преобладающую палитру сцены.

Все это позволяет ускорить поиск нужных кадров для производства промо-материалов и запуска контекстной видеорекламы. Продукт автоматизирует поиск подходящих сцен, модерацию, субтитрование и аналитику содержания видеоконтента. Система способна выполнять автоматическую разметку самых релевантных моментов для показа рекламных роликов (мидролов), а также размечать логические паузы в многосерийном контенте.

Первыми пользователями сервиса стали телеканалы «Пятница!» и «Суббота!», а также онлайн-кинотеатр PREMIER. В результате использования системы VTS время подбора видеоматериалов для создания промо-роликов сократилось более чем в 20 раз, а время субтитрования контента — в 4 раза. Применение VTS снижает трудозатраты при работе с контентом и дает возможность пользователям перераспределить ресурсы с рутинных операций на творческие задачи.

Телеканал «Пятница!» активно использует технологию для создания промо-роликов.

«
Несколько лет назад коллеги из «ГПМ Дата» показали нам возможности работы нейросетей, и возникла идея применить эти чудеса для решения оперативных бизнес-задач «Пятницы!». Как минимум — автоматизировать и ускорить работу промо-продюсеров. В результате совместных усилий появился сервис VTS. Партнером для дистрибуции и хранения видео, а также демонстрации возможностей контекстной видеорекламы стала видеоплатформа UMA. На апрель 2023 года VTS осуществляет поиск по видеоархиву из 3000 часов контента. С помощью данного сервиса промо-продюсеры тратят на поиск видеофрагментов пару минут, а раньше на такую работу уходили недели,
сказал Максим Русаков, руководитель интернет-проектов «Пятницы!».
»

В марте 2023 года телеканал «Суббота!» первым протестировал технологию в контекстной видеорекламе. Реклама кондитерского шоу с Клавой Кокой «Здравствуй, Сладкий» была интегрирована внутрь шоу «Кондитер» на «Пятнице!». Реклама автоматически появлялась в эфире после слов «сладкий» и «пробовать». Так во время просмотра зрители «Пятницы!» видели релевантное промо другого кондитерского проекта.

«
Мы постоянно расширяем портфель наших цифровых продуктов для «Газпром-Медиа Холдинга» и рекламодателей. Решения на основе технологий компьютерного зрения и искусственного интеллекта обладают высоким потенциалом в оптимизации работы с медиаконтентом и в ходе настройки нативных рекламных коммуникаций для онлайн-видео. Спрос на такие разработки будет расти не только внутри «Газпром-Медиа Холдинга», но и со стороны внешних клиентов,
отметила Светлана Лапунова, управляющий директор «ГПМ Дата».
»

«
PREMIER уже использует технологию субтитрирования, которую предлагает система VTS. Это помогает оптимизировать работу по подготовке промо-материалов, а также адаптировать контент для слабослышащих зрителей. У PREMIER большие амбиции по развитию технологий сервиса, поэтому мы планируем активнее внедрять работу новой системы и тестировать ее возможности в рамках работы с контентом,
отметил Сергей Стамболцян, генеральный директор PREMIER.
»



Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Биолинк Солюшенс (BioLink Solutions) (134)
  Прософт Биометрикс (ProSoft Biometrics) (74)
  Индид, Indeed (ранее Indeed ID) (44)
  VisionLabs (ВижнЛабс) (34)
  Группа компаний ЦРТ (Центр речевых технологий) (30)
  Другие (474)

  Прософт Биометрикс (ProSoft Biometrics) (11)
  VisionLabs (ВижнЛабс) (7)
  Группа компаний ЦРТ (Центр речевых технологий) (5)
  Талмер (Talmer) (4)
  РекФэйсис (4)
  Другие (62)

  Индид, Indeed (ранее Indeed ID) (6)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (6)
  VisionLabs (ВижнЛабс) (2)
  ВидеоМатрикс (Videomatrix) (2)
  Goodt (Гудт) (2)
  Другие (24)

  Индид, Indeed (ранее Indeed ID) (7)
  Сбербанк (7)
  Сканпорт АйДи (Scanport) (6)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (6)
  VisionLabs (ВижнЛабс) (4)
  Другие (23)

  Сбербанк (2)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (1)
  Voca-Tech (Вока-Тек) (1)
  БФТ-Холдинг, БФТ (ранее Бюджетные и Финансовые Технологии) (1)
  ОКТРОН (1)
  Другие (2)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Биолинк Солюшенс (BioLink Solutions) (9, 140)
  Прософт Биометрикс (ProSoft Biometrics) (18, 84)
  VisionLabs (ВижнЛабс) (26, 50)
  Индид, Indeed (ранее Indeed ID) (1, 44)
  Группа компаний ЦРТ (Центр речевых технологий) (14, 38)
  Другие (360, 323)

  Прософт Биометрикс (ProSoft Biometrics) (7, 11)
  VisionLabs (ВижнЛабс) (2, 8)
  Группа компаний ЦРТ (Центр речевых технологий) (2, 6)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (1, 5)
  РекФэйсис (2, 4)
  Другие (27, 36)

  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (1, 6)
  Индид, Indeed (ранее Indeed ID) (1, 6)
  ABC Solutions (Эй Би Си Солюшенс) (1, 3)
  Goodt (1, 3)
  VisionLabs (ВижнЛабс) (2, 2)
  Другие (10, 11)

  Сбербанк (3, 8)
  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (1, 7)
  Индид, Indeed (ранее Indeed ID) (1, 7)
  VisionLabs (ВижнЛабс) (3, 6)
  Shenzhen Chainway Information Technology (1, 6)
  Другие (7, 9)

  Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (1, 2)
  Сбербанк (1, 2)
  Voca-Tech (Вока-Тек) (1, 1)
  Shenzhen Chainway Information Technology (1, 1)
  Другие (0, 0)

Распределение базовых систем по количеству проектов, включая партнерские решения (проекты, партнерские проекты)

За всю историю
2021 год
2022 год
2023 год
Текущий год

  BioLink BioTime - 177 (123, 54)
  Indeed Access Manager (Indeed AM) - 44 (44, 0)
  VisionLabs Luna - 40 (24, 16)
  Biosmart Studio - 36 (36, 0)
  СКУД BioSmart - 27 (27, 0)
  Другие 307

  VisionLabs Luna - 10 (5, 5)
  BSS Digital2Speech - 5 (5, 0)
  BioSmart PV‑WTC Терминал - 4 (4, 0)
  Biosmart Studio - 4 (4, 0)
  Voice2Med Система распознавания речи в медицине - 4 (4, 0)
  Другие 36

  BSS Digital2Speech - 6 (6, 0)
  Indeed Access Manager (Indeed AM) - 6 (6, 0)
  Goodt (Ранее ZoZo RCAM, Revenue&Costs Assurance Management) - 3 (3, 0)
  VisionLabs Luna - 2 (1, 1)
  Vmx SILA: HSE - 2 (2, 0)
  Другие 7

  BSS Digital2Speech - 7 (7, 0)
  Indeed Access Manager (Indeed AM) - 7 (7, 0)
  Shenzhen Chainway C-серия RFID-считывателей - 6 (6, 0)
  Сбербанк: Система оплаты по улыбке - 5 (5, 0)
  VisionLabs Luna - 4 (2, 2)
  Другие 7

  BSS Digital2Speech - 2 (2, 0)
  Сбербанк: Система оплаты по улыбке - 2 (2, 0)
  Voca Tech: Система автоматизированного контроля сотрудников для выполнения стандартов обслуживания - 1 (1, 0)
  Другие 0

Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  VizorLabs (Визорлабс) (41)
  Вокорд (Vocord) (39)
  ВидеоМатрикс (Videomatrix) (32)
  VisionLabs (ВижнЛабс) (25)
  Simetra (ранее А+С Транспроект) (18)
  Другие (319)

  ВидеоМатрикс (Videomatrix) (9)
  Simetra (ранее А+С Транспроект) (6)
  VisionLabs (ВижнЛабс) (5)
  VizorLabs (Визорлабс) (5)
  Ростелеком (4)
  Другие (49)

  VizorLabs (Визорлабс) (11)
  ВидеоМатрикс (Videomatrix) (8)
  Nord Clan (Норд Клан) (4)
  Джей Эс Эй Групп (JSA Group) (3)
  VisionLabs (ВижнЛабс) (2)
  Другие (30)

  VizorLabs (Визорлабс) (13)
  Транс-Телематика (3)
  Урбантех (3)
  Ростелеком (3)
  VisionLabs (ВижнЛабс) (3)
  Другие (33)

  VizorLabs (Визорлабс) (2)
  Моделирование и цифровые двойники (МЦД) (ранее CADFEM CIS, КАДФЕМ Си-Ай-Эс) (1)
  Национальный центр информатизации (НЦИ) (1)
  Ростелеком (1)
  Синара-Транспортные Машины (СТМ) (1)
  Другие (9)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Вокорд (Vocord) (9, 45)
  VizorLabs (Визорлабс) (9, 40)
  ВидеоМатрикс (Videomatrix) (17, 32)
  VisionLabs (ВижнЛабс) (13, 32)
  PTV Group (2, 25)
  Другие (331, 180)

  ВидеоМатрикс (Videomatrix) (9, 9)
  VisionLabs (ВижнЛабс) (3, 9)
  PTV Group (1, 6)
  Ростелеком (3, 5)
  VizorLabs (Визорлабс) (2, 5)
  Другие (14, 21)

  VizorLabs (Визорлабс) (7, 11)
  ВидеоМатрикс (Videomatrix) (7, 8)
  VisionLabs (ВижнЛабс) (2, 2)
  Nord Clan (Норд Клан) (1, 2)
  Интеллоджик (TeleMD) (1, 1)
  Другие (16, 16)

  VizorLabs (Визорлабс) (4, 13)
  Технологии безопасности дорожного движения (ТБДД) (1, 3)
  VisionLabs (ВижнЛабс) (1, 2)
  РИР (Росатом Инфраструктурные решения) (1, 2)
  Nord Clan (Норд Клан) (1, 2)
  Другие (13, 14)

  NVI Research (1, 1)
  Softline (Софтлайн) (1, 1)
  Российская ассоциация экспертов рынка ритейла (1, 1)
  Трэктис (1, 1)
  PTV Group (1, 1)
  Другие (3, 3)

Распределение базовых систем по количеству проектов, включая партнерские решения (проекты, партнерские проекты)

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Vizorlabs Платформенное решение видеоаналитики - 36 (11, 25)
  VisionLabs Luna - 33 (24, 9)
  PTV Visum - 25 (25, 0)
  Vocord FaceControl - 18 (13, 5)
  Vocord Traffic - 18 (16, 2)
  Другие 175

  VisionLabs Luna - 11 (5, 6)
  PTV Visum - 6 (6, 0)
  Vizorlabs Платформенное решение видеоаналитики - 4 (0, 4)
  SecurOS - 3 (2, 1)
  Hikvision HikCentral - 3 (3, 0)
  Другие 17

  Vizorlabs Платформенное решение видеоаналитики - 7 (1, 6)
  VisionLabs Luna - 2 (1, 1)
  Nord Clan: RDetector - 2 (2, 0)
  Vmx SILA: HSE - 2 (2, 0)
  Vmx Dequs: HistControl - 1 (1, 0)
  Другие 18

  Vizorlabs Платформенное решение видеоаналитики - 11 (2, 9)
  ТБДД: Азимут Комплексы фотовидеофиксации - 3 (3, 0)
  Softlogic: SC-iMVS-RM3 Автокомплекс нейросетевого наблюдения для контроля объектов дорожной инфраструктуры - 2 (2, 0)
  Nord Clan: ML Sense - 2 (2, 0)
  VisionLabs Luna - 2 (2, 0)
  Другие 5

  NVI Solutions: owl.Guard - 1 (1, 0)
  PTV Visum - 1 (1, 0)
  Tracktice Система подсчета пассажиропотока - 1 (1, 0)
  Orwell 2k - 1 (1, 0)
  Softline Digital: RozniTech Платформа для сетевого ритейла (ранее Retailix.Ai) - 1 (1, 0)
  Другие 0