97% Рафаэль. 85% не Рафаэль

Я разбираю продукты, технологии и трансформации так, чтобы из кейсов рождались решения: от AI в банках и голосовых систем до фудтеха и цифровых архитектур. Люблю конкретику: цифры, процессы, роли, экономику и то, как мировые практики приземляются в реальность. Если вам важны смысл, структура и применимость — вы дома. Добро пожаловать!

искусственный интеллектатрибуцияArt Recognition

Пока все спорят, умеет ли ИИ рисовать «как Ван Гог», он уже занят вопросом подороже: Ван Гог это вообще или нет.

В январе 2023 года ученые из университетов Ноттингема и Брэдфорда проверили «Мадонну де Бреси» – картину, которую давно подозревают в авторстве Рафаэля. Систему распознавания лиц попросили сравнить ее с «Сикстинской мадонной». Лица Мадонн совпали на 97%, лица младенцев – на 86%. Вывод: несомненно, один художник.

Осенью ту же картину прогнали через другую нейросеть – ее сделала швейцарская компания Art Recognition, которая продает ИИ-экспертизу картин. Ответ: с вероятностью 85% это не Рафаэль.

То есть одна нейросеть уверена, что Рафаэль, другая уверена, что нет. И обе с процентами.

В Art Recognition считают, что распознавание лиц ищет похожие лица, а не руку художника. Их собственные модели учатся на мазке, цвете и композиции конкретного автора, а еще на копиях и подделках.

Моделей у Art Recognition уже больше чем на 200 художников. Иногда они попадают: автопортрет Ван Гога из Осло модель признала подлинным на 97%, и потом это подтвердили обычные исследования. Иногда спорят с музеями: «Самсона и Далилу» из Лондонской Национальной галереи модель на 91% сочла не Рубенсом, а галерея ответила, что ни один специалист по Рубенсу в авторстве не сомневался. В конце 2024-го швейцарский аукцион опирался на заключения компании при продаже трех работ.

При этом объяснить, откуда берутся 85% или 91%, не могут даже сами разработчики. CEO Art Recognition Карина Попович так и сказала CNN: можем предполагать, но наверняка не знаем.

🔬 И вот 15 октября Музей Ван Гога вместе с Northwestern и Институтом искусств Чикаго объявил проект, где ИИ специально учат не давать один ответ.

Задача там другая: не кто написал картину, а что спрятано под ней. Ван Гог часто писал поверх старых холстов, и рентген это видит. Но он показывает все слои разом, как фотография, где несколько кадров легли друг на друга. Разделить их непросто: разные комбинации слоев дают почти одинаковый снимок.

Учить ИИ тоже не на чем. Правильных ответов нет, картину не разрежешь и не заглянешь внутрь. Поэтому команда строит симулятор: он собирает виртуальные слои с физическими свойствами реальных пигментов и считает, каким получится снимок. На таких примерах модель и учится.

Зато на выходе будет несколько вариантов вместо одной красивой картинки. Если данные допускают разные объяснения, система их покажет и отметит, где уверена, а где гадает. Решать будут реставраторы и искусствоведы.

Мария Коккори, одна из руководителей проекта, объясняет это так: стоит показать одну красивую реконструкцию, и ее начнут считать найденной картиной Ван Гога. Хотя это только одна из версий модели.

Проект только стартовал, пока это исследование, а не сервис.

Честно, мне очень хочется посмотреть на первый результат. Условно: модель говорит «под этим пейзажем точно есть портрет, но женщина это или мужчина – не знаю, вот оба варианта».

Для ИИ это почти подвиг. Обычно модели отвечают всегда и уверенно, даже когда гадают. Мадонна де Бреси не даст соврать.

#yalav #лаврикпроAI

Читайте так же