Нейронна мережа пише назви страв китайської каліграфією і абстрактними картинами

За останні кілька років комп'ютерні вчені розробляють все більш досконалі та витончені

інструменти штучного інтелекту, якіможуть вирішувати широкий спектр завдань. Наприклад, генеративні змагальні мережі (GAN), моделі машинного навчання, які вчаться генерувати нові дані, включаючи текст, аудіофайли або зображення. Деякі з цих моделей можуть бути адаптовані для творчих цілей, наприклад, для створення унікальних малюнків, пісень або віршів.

«У 2019 році ми співпрацювали з рестораном уШанхаї, щоб продемонструвати деякі технології штучного інтелекту для покращення взаємодії з клієнтами та підвищення якості обслуговування. Потім у нас виникла ідея використовувати технології штучного інтелекту для створення персоналізованого абстрактного мистецтва на основі страв, які замовляють клієнти, та уявити твори мистецтва, щоб розважати клієнтів, доки вони чекають, коли їх подадуть»

професор Гаррі Цзяннан Ван, один із дослідників, які проводили дослідження

Первинною метою нещодавньої роботи Ванга і йогоколег було пов'язати назви китайських страв з мистецтвом. Для цього вони вирішили використовувати китайську каліграфію, оскільки це безцінна частина культурної спадщини Китаю, здатна виражати складні значення естетичним і художнім способом. Крім того, вони черпали натхнення в деяких картинах художників-абстрактних експресіоністів, таких як американський художник Франц Клайн, виконаних в 1940-х і 1950-х роках.

Приклад роботи нейронної мережі

Спочатку дослідники склали набір даних покитайської каліграфії, де у кожного символу є багато різних каліграфічних зображень. Згодом вони навчили умовну модель GAN на основі набору даних для створення нових зображень китайської каліграфії, які виглядають як символи в навчальному наборі, але ніколи раніше не зустрічалися.

Ця модель, створена дослідниками, обчислюєсхожість між символами, якими пишуть назву китайського блюда, і символами в новому наборі каліграфічних даних, який вони скомпілювали, і визначає найбільш схожі з них. Згодом модель створює абсолютно нового персонажа на основі цих схожих персонажів.

«У нашому недавньому дослідженні ми змогливикористовувати китайську каліграфію як спеціальний засіб для з'єднання слів та зображень, а потім використовували технології NLP та GAN для створення абстрактного мистецтва, натхненного китайською каліграфією. Тепер ми плануємо точне налаштування нашої моделі, щоб краще контролювати отримані результати».

професор Гаррі Цзяннан Ван, один із дослідників, які проводили дослідження

Модель також застосовує ряд естетичнихперетворень - перенесення стилю на основі відомих картин таких художників, як Пікассо, Ротко, Руссо і Хокні, або перетворення олійного живопису та коригування співвідношення білого простору.

Коли дослідники протестували свій фреймворкна основі GAN, вони виявили, що він може надійно створювати унікальне і естетично приємне мистецтво китайської каліграфії, натхнена стравами, а також іншими словами на китайській мові, а також вводити стилістичні елементи художників-експресіоністів.

Читайте також:

МОЗ Аргентини розкрив дані про побічні ефекти у отримали «Супутник V».

Качконіс виявився генетичної сумішшю ссавців, птахів і рептилій.

Стало відомо, чому сперматозоїди рухаються по прямій.

Аборти і наука: що буде з дітьми, яких народять.