На виставці GPU Technology Conference, що відбулася днями в Мюнхені, бюро дизайну і розробки Cambridge Consultants продемонструвало інструмент, який створює картини на основі зроблених від руки начерків у стилістиці великих художників.
В основі Vincent лежить нейромережа, отримана за допомогою різних методів глибокого навчання. Основний з них - функція перцептивних втрат - дозволяє трансформувати одне зображення в інше, зберігаючи високорівневі ознаки і замінюючи низькорівневі (таким чином працює відома програма Prisma). Однак розробники Vincent додатково застосували метод вкладених (stacked) мереж, який передбачає спільну роботу декількох, натренованих окремо, моделей. А головне, логіка програми відточена змагальним підходом, коли одна нейронна мережа намагається зробити зображення, стилістично невідличне від картини будь-якого відомого художника, а інша мережа намагається виявити відмінності між згенерованим зображенням і відомими шедеврами.
Навчання Vincent виконувалося на апаратній платформі NVIDIA DGX-1 (шасі містить вісім процесорів P100 або V100) за допомогою бази, що містить тисячі творів - від епохи Відродження до наших днів. У підсумкову мережу увійшли майже 200 тисяч параметрів. На відміну від попередніх програм такого роду, які використовують як ввідні дані готові зображення, системі Vincent достатньо надати створений людиною начерк, а мережа потім визначить, що «означають» ті чи інші форми, і заповнить полотно відповідно до стилю обраного живописця. Після того, як трансформація завершена, користувач може внести зміни, які будуть інтегровані в нову версію картини.
