Студент магістратури Массачусетського технологічного інституту Олексій Качкін протягом дев’яти місяців прискіпливо відновлював пошкоджену барокову італійську картину, і це дало йому можливість замислитися, чи може технологія пришвидшити процес. Нещодавно MIT News повідомив про його рішення: техніка, яка використовує полімерні плівки, згенеровані за допомогою ШІ, для фізичного відновлення пошкоджених картин за лічені години замість місяців. Дослідження опубліковане в журналі Nature.
Метод Качкіна полягає у друкуванні прозорої “маски”, що містить тисячі точно колорованих ділянок, які реставратори можуть застосувати безпосередньо на оригінальному витворі мистецтва. На відміну від традиційних методів реставрації, які назавжди змінюють картину, ці маски, за словами дослідника, можна знімати за потреби. Це повертаний процес, який не призводить до постійних змін в оригіналі.
«Оскільки існує цифровий запис того, яка маска була використана, через 100 років, коли хтось знову працюватиме з цією картиною, він матиме дуже чітке уявлення про те, що було зроблено», — зазначив Качкін.
За інформацією Nature, до 70 відсотків колекцій мистецтва в музеях залишаються недоступними для публіки через пошкодження — значна частка культурної спадщини перебуває в сховищах. Традиційні методи відновлення, які вимагають від реставраторів уважно заповнювати пошкоджені ділянки, займають від тижнів до десятиліть для всього витвору. Це вимагає як художнього таланту, так і глибоких технічних знань, а кількість доступних реставраторів недостатня для подолання відставань.
Студент з механічної інженерії висловив цю ідею під час поїздки 2021 року через країну до MIT, коли відвідування галерей показало йому, скільки мистецтва залишається невидимим через пошкодження та затримки в реставрації. Як аматор, що займається відновленням картин, він добре розумів як проблему, так і потенціал технологічного рішення.
Для демонстрації свого методу Качкін вибрав складний тестовий випадок: масляну картину XV століття, що потребує ремонту в 5612 окремих ділянках. Модель ШІ виявила візерунки пошкоджень і згенерувала 57 314 різних кольорів для відповідності оригіналу. Весь процес відновлення тривав лише 3,5 години — приблизно в 66 разів швидше, ніж традиційні методи ручного живопису.
Важливо, що Качкін уникнув використання генеративних моделей ШІ, таких як Stable Diffusion, або повної обробки з використанням жанрових мереж (GAN) для цифрового етапу відновлення. За даними статті в Nature, ці моделі можуть викликати “просторові спотворення”, які заважають правильному поєднанню відновленого зображення з пошкодженим оригіналом.