Обозреватель “Ъ FM” Александр Леви рассказывает о проекте MosAIc, который ищет сходства между арт-произведениями с помощью искусственного интеллекта.
Фото: Евгений Павленко, Коммерсантъ / купить фото
Фото: Евгений Павленко, Коммерсантъ / купить фото
Исследователи из Microsoft и Массачусетского технологического института создали систему MosAIc, которая находит связи между предметами искусства из различных культур и эпох. Пока искусственный интеллект работает только с изображениями художественных полотен, скульптур, украшений и прочих арт-объектов.
Для обучения нейросети авторы проекта взяли фотографии музейных экспонатов нью-йоркского Метрополитена и амстердамского Рейксмузеума. Ученые хотели получить алгоритм, подбирающий предметы искусства, похожие не только по цвету и стилю, но и по смысловому значению или тематике.
В итоге, во время анализа картинок MosAIc учитывает не только контуры и цвета, но и, например, принимает во внимание страну происхождения, а также материал, из которого изготовлен предмет. Такой подход, позволяет отслеживать процессы культурного обмена между различными эпохами и территориями.
Для того чтобы понять, как это работает в действительности, авторы проекта открыли доступ к рабочему алгоритму. На официальном сайте пользователи могут сами проследить связи между различными предметами искусства, выбрав в качестве отправной точки любой понравившийся арт-объект из представленного множества.
Я для первого примера выбрал американский зонт бирюзового цвета. К нему MosAIc подобрала китайский металлический шлем, который от времени покрылся окисями почти такого же цвета. Так сработала система по умолчанию. Но пользователь может слегка корректировать параметры поиска, задавая страну или культурный регион, а также материал или предмет искусства.
К тому же бирюзовому зонтику, но в категории «Россия» искусственный интеллект лучшим совпадением посчитал рубаху. Если же задать поиск по оружию, то система покажет немецкие латы из множества изогнутых пластин, которыми, похоже, закрывали шеи лошадей. Поиск, суженный до аксессуаров, выдал в пару английский зонт.