Real Time Person Removal

2020: Выход программы

В конце февраля 2020 года веб-инженер из Google Джейсон Майес (Jason Mayes) опубликовал на портале GitHub исходные коды программы Real Time Person Removal, которая способна удалять людей с видео в режиме реального времени, заменяя их изображения на элементы фона.

Этот код пытается со временем выучить структуру фона видео, чтобы удалить из кадра любого человека, — написал Мэайес на GitHub. — Все это происходит в режиме реального времени в браузере с помощью системы машинного обучения TensorFlow.

Создана программа, стирающая людей с видео в реальном времени

TensorFlow — это разработанная Google программа с открытым исходным кодом, используемая для машинного обучения и приложений нейронной сети. Программа Майеса извлекает кадры из веб-камеры, копирует их, а затем сканирует копию на предмет фигур человека. Если программа замечает предмет, который идентифицирует как человека, она покрывает его фигуру элементами изображения с пустой комнатой, извлеченными из предыдущих кадров. Затем ПО отправляет скорректированное видео, уже без людей, в браузер пользователя.

Решение можно проверить онлайн на собственной веб-камере через сайт Glitch.com или Codepen.io, включив в браузере поддержку JavaScript. ПО срабатывает не сразу, и прежде чем ваша фигура исчезнет из кадра, придется немного походить перед камерой. Майес напоминает, что его разработка лишь экспериментальна, а значит, на изображении все равно будут заметны некоторые артефакты. Кроме того, исходный код приложения доступен для скачивания и модификации всеми желающими, нужно только уведомить об этом автора.^[1]

Решение далеко от идеала, и пользователи легко могут распознать пиксилизированные контуры тела, движущегося по "пустой" комнате. Однако подобные программы, как правило, неспособны работать с видео в реальном времени и обычно не справляются со сложным, неоднотонным фоном, в отличие от ПО Майеса.^[2]

Примечания