Искусственный интеллект NVIDIA дорабатывает детали на фото

Новая система искусственного интеллекта NVIDIA  умеет не только убирать лишние объекты из кадра,  чем не удивить пользователей современных графических редакторов, но и восстанавливать изображение, добавляя недостающие детали на отсутствующих участках.

Слева направо: «испорченный» портрет, традиционные методы, алгоритм NVIDIA и оригинал

Инструмент Deep Fill напоминает функцию заливки с учётом содержимого в Photoshop, но вариант NVIDIA — это качественно новый уровень. По словам авторов проекта, аналоги обычно фокусируются на обработке прямоугольных фрагментов ближе к центру картинки. Новая система анализирует всё изображение, а потому может работать с дефектами любой формы и размера, независимо от расстояния до границы. Для обучения ИИ команда использовала более 55 тысяч шаблонов, в соответствии с которыми на фото удаляли случайные области.

Слабым местом алгоритмов остаются «свободные» структуры с большим расстоянием между элементами. Например, воссоздать форму здания им не всегда удаётся. Зато с книжными полками и восстановлением лиц они неплохо справляются. И даже могут убрать парочку морщин.

О практическом применении и внедрении в фоторедакторы технологии NVIDIA пока речи не идёт. Однако, безусловно, пока это один из самых продвинутых примеров автоматического “умного” восстановления изображений.