Google Arts & Culture запустили новий інтерактивний центр під назвою «Klimt vs. Klimt — The Man of Contradictions», який запропонує відвідувачам уявлення про біографію, художнє натхнення, спадщину та багато іншого Gustav Klimt разом із науковими статтями, написаними експертами у провідних закладах Австрії, включаючи Бельведер та Віденський музей.
В рамках своїх зусиль Google також у цифровому вигляді відтворив три втрачені роботи Klimt з 1899 року, використовуючи технологію штучного інтелекту, щоб розфарбувати чорно-білу фотографію творів.
Три картини — «Medicine», «Philosophy» та «Jurisprudence» — разом складають «Факультетські картини», які були замовлені Віденським університетом. Після відкриття творів представники університету визнали їх «порнографічними» та «збоченими». Врешті-решт вони були продані приватному покупцю.
У 1945 році, в останні дні Другої світової війни в Європі, картини були загублені під час пожежі, і тепер вони збереглись лише у вигляді чорно-білих фотографій.
За підтримки Google вчені Klimt та дослідники штучного інтелекту об’єдналися, щоб надати колорит цим загадковим картинам. Franz Smola, куратор у Бельведері, співпрацював з Emil Wallner, резидентом Лабораторії мистецтв і культури Google, над розробкою алгоритму, який міг би точно перефарбувати «факультетські картини».
По-перше, Smola прочесав різні архіви, щоб знайти документацію, що описує роботи, особливо їх забарвлення. Потім він шукав мотиви, присутні у «Факультетських картинах», які також можна знайти на подібних картинах Klimt того ж періоду. Наприклад, три жінки в юриспруденції обгорнуті зміями, подібними до Бетховенського фризу художника (1902), де жінка також оточена зміями, пофарбованими у його фірмовий золотий лист. Ці паралелі допомогли Franz Smola та його команді намалювати кольорові профілі, використані в частинах картин.
Тим часом Wallner почав складати алгоритм, який був навчений робити статистичний аналіз стилю забарвлення Klimt. Перешкоди та прориви цього процесу машинного навчання описані у статті Wallner.
Використовуючи величезний набір даних (1 мільйон зображень реального світу та 91749 зображень творів мистецтва різних художників), алгоритм встановив відчуття відтінків шкіри та відтінки неба з образів реального світу та відчуття композиції, об’єкта межі та текстури з картин. До цього початкового набору даних було додано 80 повноколірних репродукцій картин Klimt, призначених для адаптації алгоритму до стилю художника Віденської сецесії. Отримані зображення у кольорі штучного інтелекту забезпечують найближче, що ми коли-небудь побачимо.
У своїй заяві Franz Smola сказав: «Результат для мене був дивним, тому що ми змогли пофарбувати його навіть у тих місцях, де ми не знали, а за допомогою машинного навчання ми маємо гарні припущення, що Klimt використовував певні кольори».
Читайте також:
5 міфів про Вінсента Ван Гога