Розширення можливостей Paint Transformer з генеруванням мазкiв пензля за допомогою GAN

Автор(и)

  • Михайло Хельгович Поляков Національний університет «Києво-Могилянська академія», Україна
  • Надiя Олександрiвна Швай Національний університет «Києво-Могилянська академія», Україна https://orcid.org/0000-0001-8194-6196

DOI:

https://doi.org/10.18523/2617-70807202435-43

Ключові слова:

нейронне малювання, трансформер, GAN

Анотація

Нейронне малювання створює послiдовнiсть мазкiв для заданого зображення i художньо вiдтворює його за допомогою нейронних мереж. У цiй статтi ми дослiджуємо нову архiтектуру, основану на Transformer, пiд назвою Paint Transformer, яка прогнозує параметри набору мазкiв за допомогою прямопрохiдної нейронної мережi. Paint Transformer забезпечує кращi результати малювання порiвняно з попереднiми методами, маючи нижчi витрати на навчання та використання. У статтi також пропонується нове розширення Paint Transformer, яке додає бiльш складнi мазки, згенерованi GAN, для досягнення бiльш художнього та абстрактного стилю малювання, нiж оригiнальний метод.

Біографії авторів

Михайло Хельгович Поляков, Національний університет «Києво-Могилянська академія»

аспiрант, спецiальнiсть «Прикладна математика» Нацiонального унiверситету «Києво-Могилянська академiя». Сфера наукових iнтересiв: машинне навчання, комп’ютерний зiр, оброблення природної мови.

Надiя Олександрiвна Швай, Національний університет «Києво-Могилянська академія»

доцент кафедри математики Нацiонального унiверситету «Києво-Могилянська академiя». Сфера наукових iнтересiв: матричнi задачi, машинне навчання, комп’ютерний зiр.

Посилання

  1. M. Poliakov, https://ekmair.ukma.edu.ua/handle/123456789/28820.
  2. A. Elgammal, https://arxiv.org/abs/1706.07068.
  3. L. A. Gatys, https://arxiv.org/abs/1508.06576.
  4. P. Haeberli, in: Proceedings of the 17th Annual Conference on Computer Graphics and Interactive Techniques. — SIGGRAPH ’90 (New York, NY, USA: Association for Computing Machinery, 1990), pp. 207–214.https://doi.org/10.1145/97879.97902.
  5. D. Ha, https://arxiv.org/abs/1704.03477.
  6. T. Zhou, https://arxiv.org/abs/1810.05977.
  7. Z. Zou, https://arxiv.org/abs/2011.08114.
  8. S. Liu, https://arxiv.org/abs/2108.03798.
  9. A. Vaswani, https://arxiv.org/abs/1706.03762.
  10. X. Yang, https://arxiv.org/abs/2101.11952.
  11. Y. Ganin, https://arxiv.org/abs/1804.01118.
  12. R. Nakano, https://arxiv.org/abs/1904.08410.
  13. I. J. Goodfellow, https://arxiv.org/abs/1406.2661.
  14. M. Mirza, https://arxiv.org/abs/1411.1784.
  15. M. Poliakov, https://github.com/mxpoliakov/PaintTransformerGAN.
  16. Pomax. A primer on bezier curves, https://pomax.github.io/bezierinfo.

##submission.downloads##

Опубліковано

2025-05-12

Номер

Том 7 (2024): Могилянський математичний журнал

Розділ

Статті

Ліцензія

Авторське право (c) 2024 M. Poliakov, N. Shvai

Creative Commons License

Ця робота ліцензується відповідно до Creative Commons Attribution 4.0 International License.

Автори, які публікуються у цьому журналі, погоджуються з такими умовами:

а) Автори зберігають за собою авторські права на твір на умовах ліцензії Creative Commons Attribution License CC BY 4.0, котра дозволяє іншим особам вільно поширювати (копіювати і розповсюджувати матеріал у будь-якому вигляді чи форматі) та змінювати (міксувати, трансформувати, і брати матеріал за основу для будь-яких цілей, навіть комерційних) опублікований твір на умовах зазначення авторства.

б) Журнал дозволяє автору (авторам) зберігати авторські права без обмежень.

в) Автори мають право укладати самостійні додаткові угоди щодо поширення твору (наприклад, розміщувати роботу в електронному репозитарії), за умови збереження посилання на його першу публікацію. (Див. Політика Самоархівування)

г) Політика журналу дозволяє розміщення авторами в мережі Інтернет (наприклад, у репозитаріях) тексту статті, як до подання його до редакції, так і під час його редакційного опрацювання, оскільки це сприяє виникненню продуктивної наукової дискусії та позитивно позначається на оперативності та динаміці цитування опублікованої роботи (див. The Effect of Open Access).