Сотрудничество Cornell CIS и Adobe создает инструмент для работы с искусственным интеллектом

В будущем может появиться новый крутой инструмент для программного обеспечения для редактирования изображений. Если вы любите превратить свою фотографию в картину Моне или Уорхола, теперь есть способ внести изменения в фотографию, перенеся стиль и другие элементы с другой фотографии.

Профессор компьютерных наук Кавита Бала, докторант Фуджун Луан и сотрудники Adobe Сильвиан Пэрис и Эли Шехтман выпустили статью, в которой подробно описывается их новая технология Deep Photo Style Transfer. В статье объясняется, как исследователи усовершенствовали передачу стиля, перенося вид одной фотографии на другую с помощью нейронных сетей, чтобы гарантировать сохранение деталей исходного изображения. Исследователи представят свою работу на конференции по компьютерному зрению и распознаванию образов в июле.

«Идея стилизации фотографий вызвала большой интерес», — сказал Бала. «Нас мотивировала идея о том, что стиль можно запечатлеть на фотографии, но по сути это одна и та же фотография. Это оказалось невероятно сложно. В конечном итоге ключевой вывод заключался в том, чтобы сохранить границы и края, сохраняя при этом передачу стиля».

Исследователи использовали глубокое машинное обучение, чтобы добавить слой нейронной сети, который уделяет пристальное внимание краям изображения, например границе между деревом и озером.

«Метод, который мы придумали, на удивление очень эффективен. Это был крепкий орешек, поэтому, когда нам удалось заставить его работать после многих попыток найти решение, это был большой прорыв», — сказал Бала. «Реакция была выдающейся. Это определенно захватило воображение людей как способ стилизовать фотографии более драматично».

Лесли Моррис — директор по связям с общественностью отдела вычислительной техники и информатики.

Получайте новости Корнелла прямо на свой почтовый ящик.