Новый алгоритм Adobe изменяет стиль изображения по референсному снимку

Группа из Корнеллского Университета и компании Adobe создали алгоритм «Глубокого преобразования стиля фотографии» («Deep Photo Style Transfer»), который автоматически применяет стиль (цвет, освещение, причем на детальном уровне) одного снимка к другому. Уже сейчас можно познакомиться с первыми результатами, и они выглядят многообещающе. При этом в качестве референсного изображения используется вторая фотография.

В качестве входных данных вы передаете программе два фотоснимка, и алгоритм на основе нейронных сетей анализирует особенности референсного снимка – цвет, условия и качество освещения, и затем прикладывает выявленные закономерности к обрабатываемому снимку. Алгоритм учитывает такие вещи, как время года, время суток и текущую погоду. 

Разработчики приводят следующие примеры работы программы. Исходный снимок:

К нему прикладывается референсный снимок:

Итог работы:

Алгоритм не изменяет структуру исходного снимка, его детали, линии и перспектива не изменится. Всё преобразование сфокусировано на изменении цвета и освещения.

Разработчики сообщают, что на данном этапе программа выдает достоверный и качественный результат примерно в 80% случаев. В будущем, доработанная версия алгоритма может быть добавлена в  графический редактор Фотошоп в качестве инструмента или плагина, либо реализована в виде отдельного приложения.