Після того, як Adobe показала новий інструмент для Photoshop CC 2019, компанія представила Character Animator 2019 з новою функцією Style Transfer. Вона здатна в автоматичному режимі створювати анімацію.
Дейв Сімонс, глава відділу продакт-девелопменту розповів, що його команді було доручено перенести дослідження з лабораторії на продукти:
«В основному ми намагалися перенести технологію в After Effects і Premiere, – пояснює він. – Character Animator спочатку не входив в область наших експериментів, тому що і без цього ми робили багато речей. Але потім ми спробували піти в сторону Character – і нас чекав великий успіх».
Команда Сімонса перейшла на повноцінну роботу з Character Animator, результатом якої стала нова функція – Style Transfer.
Усі зображення: say-hi.me
Технологія виглядає так, немов використовує машинне навчання, але насправді це не так. Якуб Фішер з Чеського національного технічного університету розповів, що сама передача стилю обличчя не використовує глибоке навчання, але Adobe використовують його на деяких етапах попередньої обробки. Style Transfer і Content Aware Fill використовують один і той же компонент PatchMatch, в той час як Content Aware Fill працює тільки з зображенням. В Style Transfer є багато прихованих «зображень» (масок, сегментів і т.д.), які направляють передачу.
Технологія Style Transfer створена для роботи в Character Animator, але алгоритмічний підхід можна буде використовувати на будь-якому відео, наприклад, в Premiere або After Effects. При такому підході необхідно буде використовувати функцію навчання для штучного інтелекту, щоб виділити, ідентифікувати й сегментувати цільові об’єкти. Очевидно, що це буде автономний процес через тривалий час рендеринга. У Adobe поки немає планів використовувати цю технологію поза Character Animator (в найближчому майбутньому), але вона провела тестування на відео, і це може спрацювати.
«З огляду на те, як працює технологія – не складе великих труднощів розширити кількість об’єктів і ускладнити завдання», – сказав Дейв Сімонс.
Раніше Telegraf.design писав про те, що Adobe випустила безкоштовний план Adobe XD CC Starter Plan.