Газпром-Медиа Холдинг: Video Tagging System

Продукт
Название базовой системы (платформы): Искусственный интеллект (ИИ, Artificial intelligence, AI)
Разработчики: Пятница, ГПМ Дата
Дата премьеры системы: 2023/04/05
Технологии: ИБ - Биометрическая идентификация,  Речевые технологии,  Системы видеоаналитики

Основные статьи:

2023: Запуск сервиса

«Газпром-Медиа Холдинг» 5 апреля 2023 года сообщил о запуске сервиса автоматического распознавания и тегирования видеоконтента Video Tagging System. Он разработан телеканалом «Пятница!» и компанией «ГПМ Дата» — единым центром управления большими данными активов «Газпром-Медиа Холдинга».

Video Tagging System создан на основе технологий компьютерного зрения (Computer Vision) и нейронных сетей. Сервис помогает распознавать лица, речь (распознавание речи выполняется с использованием технологий Tinkoff Voice Kit), надписи и количество персон в кадре, движения людей, выполнять детекцию животных и предметов; классифицировать кинематографические планы, считывать начало заставок и титров и определять преобладающую палитру сцены.

Все это позволяет ускорить поиск нужных кадров для производства промо-материалов и запуска контекстной видеорекламы. Продукт автоматизирует поиск подходящих сцен, модерацию, субтитрование и аналитику содержания видеоконтента. Система способна выполнять автоматическую разметку самых релевантных моментов для показа рекламных роликов (мидролов), а также размечать логические паузы в многосерийном контенте.

Первыми пользователями сервиса стали телеканалы «Пятница!» и «Суббота!», а также онлайн-кинотеатр PREMIER. В результате использования системы VTS время подбора видеоматериалов для создания промо-роликов сократилось более чем в 20 раз, а время субтитрования контента — в 4 раза. Применение VTS снижает трудозатраты при работе с контентом и дает возможность пользователям перераспределить ресурсы с рутинных операций на творческие задачи.

Телеканал «Пятница!» активно использует технологию для создания промо-роликов.

«
Несколько лет назад коллеги из «ГПМ Дата» показали нам возможности работы нейросетей, и возникла идея применить эти чудеса для решения оперативных бизнес-задач «Пятницы!». Как минимум — автоматизировать и ускорить работу промо-продюсеров. В результате совместных усилий появился сервис VTS. Партнером для дистрибуции и хранения видео, а также демонстрации возможностей контекстной видеорекламы стала видеоплатформа UMA. На апрель 2023 года VTS осуществляет поиск по видеоархиву из 3000 часов контента. С помощью данного сервиса промо-продюсеры тратят на поиск видеофрагментов пару минут, а раньше на такую работу уходили недели,
сказал Максим Русаков, руководитель интернет-проектов «Пятницы!».
»

В марте 2023 года телеканал «Суббота!» первым протестировал технологию в контекстной видеорекламе. Реклама кондитерского шоу с Клавой Кокой «Здравствуй, Сладкий» была интегрирована внутрь шоу «Кондитер» на «Пятнице!». Реклама автоматически появлялась в эфире после слов «сладкий» и «пробовать». Так во время просмотра зрители «Пятницы!» видели релевантное промо другого кондитерского проекта.

«
Мы постоянно расширяем портфель наших цифровых продуктов для «Газпром-Медиа Холдинга» и рекламодателей. Решения на основе технологий компьютерного зрения и искусственного интеллекта обладают высоким потенциалом в оптимизации работы с медиаконтентом и в ходе настройки нативных рекламных коммуникаций для онлайн-видео. Спрос на такие разработки будет расти не только внутри «Газпром-Медиа Холдинга», но и со стороны внешних клиентов,
отметила Светлана Лапунова, управляющий директор «ГПМ Дата».
»

«
PREMIER уже использует технологию субтитрирования, которую предлагает система VTS. Это помогает оптимизировать работу по подготовке промо-материалов, а также адаптировать контент для слабослышащих зрителей. У PREMIER большие амбиции по развитию технологий сервиса, поэтому мы планируем активнее внедрять работу новой системы и тестировать ее возможности в рамках работы с контентом,
отметил Сергей Стамболцян, генеральный директор PREMIER.
»



Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Биолинк Солюшенс (BioLink Solutions) (134)
  Прософт Биометрикс (ProSoft Biometrics) (74)
  Индид, Indeed (ранее Indeed ID) (45)
  VisionLabs (ВижнЛабс) (35)
  Группа компаний ЦРТ (Центр речевых технологий) (31)
  Другие (460)

  Прософт Биометрикс (ProSoft Biometrics) (11)
  VisionLabs (ВижнЛабс) (7)
  Группа компаний ЦРТ (Центр речевых технологий) (5)
  Талмер (Talmer) (4)
  РекФэйсис (4)
  Другие (52)

  Индид, Indeed (ранее Indeed ID) (6)
  Goodt (Гудт) (2)
  NDBC - ЭнДиБиСи (ранее НТТ ДАТА Бизнес Солюшнс, itelligence Россия, Ителлидженс) (2)
  VisionLabs (ВижнЛабс) (2)
  ВидеоМатрикс (Videomatrix) (2)
  Другие (21)

  Индид, Indeed (ранее Indeed ID) (7)
  Сбербанк (7)
  Сканпорт АйДи (Scanport) (6)
  VisionLabs (ВижнЛабс) (4)
  АйТи Бастион (3)
  Другие (15)

  Сбербанк (7)
  Северсталь-Инфоком (3)
  Индид, Indeed (ранее Indeed ID) (2)
  Сканпорт АйДи (Scanport) (2)
  CTI (СиТиАй) Communications. Technology. Innovations. (1)
  Другие (10)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Биолинк Солюшенс (BioLink Solutions) (9, 140)
  Прософт Биометрикс (ProSoft Biometrics) (18, 84)
  VisionLabs (ВижнЛабс) (26, 51)
  Индид, Indeed (ранее Indeed ID) (1, 45)
  Группа компаний ЦРТ (Центр речевых технологий) (14, 39)
  Другие (361, 310)

  Прософт Биометрикс (ProSoft Biometrics) (7, 11)
  VisionLabs (ВижнЛабс) (2, 8)
  Группа компаний ЦРТ (Центр речевых технологий) (2, 6)
  РекФэйсис (2, 4)
  Ростелеком (4, 3)
  Другие (23, 31)

  Индид, Indeed (ранее Indeed ID) (1, 6)
  ABC Solutions (Эй Би Си Солюшенс) (1, 3)
  Goodt (Гудт) (1, 3)
  VisionLabs (ВижнЛабс) (2, 2)
  ВидеоМатрикс (Videomatrix) (1, 2)
  Другие (9, 9)

  Сбербанк (3, 8)
  Индид, Indeed (ранее Indeed ID) (1, 7)
  VisionLabs (ВижнЛабс) (3, 6)
  Shenzhen Chainway Information Technology (1, 6)
  АйТи Бастион (1, 3)
  Другие (6, 6)

  Сбербанк (1, 6)
  Shenzhen Chainway Information Technology (1, 2)
  Индид, Indeed (ранее Indeed ID) (1, 2)
  ABC Solutions (Эй Би Си Солюшенс) (1, 1)
  Voca-Tech (Вока-Тек) (1, 1)
  Другие (4, 4)

Распределение базовых систем по количеству проектов, включая партнерские решения (проекты, партнерские проекты)

За всю историю
2021 год
2022 год
2023 год
Текущий год

  BioLink BioTime - 177 (123, 54)
  Indeed Access Manager (Indeed AM) - 45 (45, 0)
  VisionLabs Luna - 41 (25, 16)
  Biosmart Studio - 36 (36, 0)
  СКУД BioSmart - 27 (27, 0)
  Другие 295

  VisionLabs Luna - 10 (5, 5)
  BioSmart PV‑WTC Терминал - 4 (4, 0)
  Biosmart Studio - 4 (4, 0)
  Voice2Med Система распознавания речи в медицине - 4 (4, 0)
  АйТи Бастион: СКДПУ НТ Система контроля действий поставщиков ИТ-услуг - 3 (3, 0)
  Другие 32

  Indeed Access Manager (Indeed AM) - 6 (6, 0)
  Goodt (Ранее ZoZo RCAM, Revenue&Costs Assurance Management) - 3 (3, 0)
  VisionLabs Luna - 2 (1, 1)
  Vmx SILA: HSE - 2 (2, 0)
  Smart Meal Service: Lunch fastPass Робот-кассир - 1 (1, 0)
  Другие 5

  Indeed Access Manager (Indeed AM) - 7 (7, 0)
  Shenzhen Chainway C-серия RFID-считывателей - 6 (6, 0)
  Сбербанк: Система оплаты по улыбке - 5 (5, 0)
  VisionLabs Luna - 4 (2, 2)
  АйТи Бастион: СКДПУ НТ Система контроля действий поставщиков ИТ-услуг - 3 (3, 0)
  Другие 4

  Сбербанк: Система оплаты по улыбке - 6 (6, 0)
  Indeed Access Manager (Indeed AM) - 2 (2, 0)
  Shenzhen Chainway C-серия RFID-считывателей - 2 (2, 0)
  АйТи Бастион: СКДПУ НТ Система контроля действий поставщиков ИТ-услуг - 1 (1, 0)
  ЦРТ: Визирь - 1 (1, 0)
  Другие 2

Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  VizorLabs (Визорлабс) (41)
  Вокорд (Vocord) (39)
  ВидеоМатрикс (Videomatrix) (32)
  VisionLabs (ВижнЛабс) (27)
  Simetra (ранее А+С Транспроект) (19)
  Другие (371)

  ВидеоМатрикс (Videomatrix) (9)
  Simetra (ранее А+С Транспроект) (6)
  VisionLabs (ВижнЛабс) (5)
  VizorLabs (Визорлабс) (5)
  SteadyControl (4)
  Другие (55)

  VizorLabs (Визорлабс) (11)
  ВидеоМатрикс (Videomatrix) (8)
  Nord Clan (Норд Клан) (4)
  Джей Эс Эй Групп (JSA Group) (3)
  SteadyControl (2)
  Другие (33)

  VizorLabs (Визорлабс) (13)
  SteadyControl (6)
  VisionLabs (ВижнЛабс) (3)
  Транс-Телематика (3)
  Урбантех (3)
  Другие (36)

  SteadyControl (5)
  Северсталь-Инфоком (3)
  Nord Clan (Норд Клан) (3)
  VisionLabs (ВижнЛабс) (2)
  VizorLabs (Визорлабс) (2)
  Другие (30)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Вокорд (Vocord) (9, 45)
  VizorLabs (Визорлабс) (9, 40)
  VisionLabs (ВижнЛабс) (13, 34)
  ВидеоМатрикс (Videomatrix) (17, 32)
  PTV Group (2, 25)
  Другие (354, 239)

  ВидеоМатрикс (Videomatrix) (9, 9)
  VisionLabs (ВижнЛабс) (3, 9)
  PTV Group (1, 6)
  Ростелеком (3, 5)
  VizorLabs (Визорлабс) (2, 5)
  Другие (17, 30)

  VizorLabs (Визорлабс) (7, 11)
  ВидеоМатрикс (Videomatrix) (7, 8)
  SteadyControl (1, 3)
  SteadyControl HoReCa (1, 3)
  VisionLabs (ВижнЛабс) (2, 2)
  Другие (18, 19)

  VizorLabs (Визорлабс) (4, 13)
  SteadyControl HoReCa (1, 7)
  SteadyControl (1, 7)
  Технологии безопасности дорожного движения (ТБДД) (1, 3)
  РИР (Росатом Инфраструктурные решения) (1, 2)
  Другие (15, 18)

  SteadyControl (1, 5)
  SteadyControl HoReCa (1, 5)
  Nord Clan (Норд Клан) (1, 3)
  VisionLabs (ВижнЛабс) (2, 2)
  PTV Group (1, 2)
  Другие (12, 12)

Распределение базовых систем по количеству проектов, включая партнерские решения (проекты, партнерские проекты)

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Vizorlabs Платформенное решение видеоаналитики - 36 (11, 25)
  VisionLabs Luna - 35 (25, 10)
  PTV Visum - 25 (25, 0)
  SteadyControl Система контроля и управления персоналом - 23 (23, 0)
  Vocord Traffic - 18 (16, 2)
  Другие 204

  VisionLabs Luna - 11 (5, 6)
  PTV Visum - 6 (6, 0)
  Vizorlabs Платформенное решение видеоаналитики - 4 (0, 4)
  SteadyControl Система контроля и управления персоналом - 4 (4, 0)
  Ростелеком: Умный дом Видеонаблюдение - 3 (3, 0)
  Другие 21

  Vizorlabs Платформенное решение видеоаналитики - 7 (1, 6)
  SteadyControl Система контроля и управления персоналом - 3 (3, 0)
  VisionLabs Luna - 2 (1, 1)
  Vmx SILA: HSE - 2 (2, 0)
  Nord Clan: RDetector - 2 (2, 0)
  Другие 19

  Vizorlabs Платформенное решение видеоаналитики - 11 (2, 9)
  SteadyControl Система контроля и управления персоналом - 7 (7, 0)
  ТБДД: Азимут Комплексы фотовидеофиксации - 3 (3, 0)
  Softlogic: SC-iMVS-RM3 Автокомплекс нейросетевого наблюдения для контроля объектов дорожной инфраструктуры - 2 (2, 0)
  Nord Clan: ML Sense - 2 (2, 0)
  Другие 7

  SteadyControl Система контроля и управления персоналом - 5 (5, 0)
  Nord Clan: ML Sense - 3 (3, 0)
  PTV Visum - 2 (2, 0)
  VisionLabs Luna - 2 (1, 1)
  ЦРТ: Визирь - 1 (1, 0)
  Другие 5