10 июня
BMW 3 316i 102hp MT
БМВ - 316 1989 г.в. В программе не смог поставить ниже 1990 г. Остался доволен. Брал 9-летнюю с пробегом 187000 км за 2600 долларов. Продал, отката...
4.3
13 июня
Infiniti QX60 35 AT
замечательная машина, относительно невысокая цена за премиум класс, экономична, неприхотлива, удобна и комфортна как для поездок по городу, так и д...
5
Все отзывы
18 мая 2019 11:00, Технологии, источник: N + 1

Нейросеть «убрала» автомобили с улиц (выглядит странно)

Программист Крис Харрис (Chris Harris) создал приложение для смартфона, удаляющее автомобили с улиц

В последние годы в области машинного обучения наблюдается большой прогресс и наиболее заметен он в области алгоритмов для работы с изображениями. К примеру, программы уже умеют реалистично переносить мимику с лица одного человека на лицо другого, а также создавать полностью синтезированные видеоролики. Некоторые серьезные нейросетевые алгоритмы для обработки уже доступны для массового использования. Например, недавно Adobe внедрила в видеоредактор After Effects функцию автоматического удаления объектов с видео и замену их на реалистичный фон. Но эта функция требует от пользователя вручную выделять интересующие его объекты, а также тратит некоторое время на расчет изменений.

Во время загрузки произошла ошибка.

Разработчик Крис Харрис (Chris Harris) показал, как похожую технологию можно использовать в реальном времени для «удаления» автомобилей с улицы. На опубликованном видео можно видеть, как нейросетевой алгоритм заменяет автомобили в кадре на синтезированное фоновое изображение.

Автор ролика не рассказал, как именно работает алгоритм, однако некоторые предположения о его работе все же можно сделать. По-видимому, в алгоритме используются две нейросети, одна из которых распознает автомобили в кадре и выделяет их, а вторая работает с выделенными областями. Судя по тому, что на некоторых кадрах явно видна измененная прямоугольная область, в алгоритме не используется отдельная сеть для семантической сегментации. Обычно такие нейросети применяют для относительно аккуратного выделения объекта определенного типа в кадре.

Вероятно, нейросеть для создания фона учитывает соседние области на кадре, потому что на некоторых кадрах она дорисовывает стволы деревьев и столбы, закрытые автомобилем. Вместе с этим, она не учитывает соседние кадры при формировании фона, потому что на видео можно видеть, что в некоторых случаях алгоритм дорисовывает ствол дерева или столб даже если на предыдущих кадрах видно, что он закрыт не автомобилем, а другим объектом на фоне. Стоит отметить, что пока созданный программистом алгоритм — скорее демонстрация принципиальной возможности такого подхода, чем готовая для реального использования технология.

Ранее другие разработчики создавали похожие технологии для блокировки некоторых объектов в реальном мире. К примеру, в 2015 году американский программист создал шлем дополненной реальности, размывающий изображения брендов на предметах перед пользователем.

Подпишитесь на новую рассылку Авто Mail.ru, чтобы быть в курсе главных новостей и новинок в мире автомобилей
Комментарии
13
Дед Ахмед
Он скукожил мою тачку
СсылкаПожаловаться
Радий Комаров
У меня вообще никакого видео нет.
СсылкаПожаловаться
А.Е. Гусев
Полная хрень
СсылкаПожаловаться
Чтобы оставить комментарий, вам нужно авторизоваться.
Вы не ввели текст комментария
Вы не ввели текст комментария
Подпишитесь на нас
Новости от Авто Mail.ru