Моделирование манеры конкретного художника. Было показано, что свер-точные сети можно обучить манере конкретных художников, а затем генериро-вать с их помощью изображения с произвольных фотографий в такой же мане-ре. На рис. 3.2 (он уже встречался в главе 1) приведены потрясающие результаты. Представьте только свою семейную фотографию, написанную Винсентом ван Го-гом. (К моменту, когда эта книга выйдет из печати, наверное, в Snapchat уже будет такой фильтр, так что ждать придется не так уж долго.)
Рис. 3.2 Стилизованные изображения, взятые из работы Gatys et al., 2015
2015 году была опубликована работа Gatys et al. «A Neural Algorithm of Artistic Style»14, авторы которой разделяют манеру письма и содержание картины. СНС кодирует манеру художника в параметрах сети, которая впоследствии может быть применена к любому изображению, чтобы представить его в той же манере.
Порождающие состязательные сети (ПСС). Результат работы ПСС15 проще всего описать как синтез новых изображений путем моделирования распределе-ния входных данных, предъявленных сети. Более подробно мы будем обсуждать ПСС в главе 4.
Рекуррентные нейронные сети (РНС). Было продемонстрировано, что РНС могут моделировать последовательности символов и порождать новые последо-вательности, обладающие видимой логической связностью. В главе 5 мы рассмот рим пример РНС, которая порождает стихотворные строки в стиле Шекспира пос ле обучения на всех его произведениях.
Еще одно интересное применение РНС описано в работе Липтона и Элкана, где сеть моделирует имена собственные типа «Coors Light»16 и другие образчики
Gatys et al., 2015. A Neural Algorithm of Artistic Style // https://arxiv.org/abs/1508.06576.
Goodfellow et al., 2014. Generative Adversarial Networks // https://arxiv.org/abs/1406.2661.
Марка американского пива. – Прим. перев.
92 Основания глубоких сетей
пивного жаргона. Можно заказать, описание какого пива генерировать, добавив специальные указания (например, «хочу обзор немецкого лагера на 3 звезды»), результаты впечатляют. Вот пример сгенерированного программой описания:
Разливное в ресторане при пивоварне. Приятный темно-красный цвет с хорошей пенной шапкой, оставляющей заметные следы на стенках бокала. Аромат смороди-ны и шоколада. Полнота вкуса недостаточная, несмотря на присутствие смородины. Привкус бурбона слабо выражен. Честно говоря, не знаю, с каким сортом сравнить это пиво. Я бы предпочел, чтобы карбонизация продолжалась немного дольше. Вполне питкое, я бы не возражал, если бы это пиво было более доступно17.
Do'stlaringiz bilan baham: |