Завдяки сучасному технологічному прогресу, застосованому до кіно, телебачення чи самої реклами, можна досягти неймовірних речей. Ці досягнення та останні рухи аудіовізуальний сектор вони знову увійшли в моду говорити про абсолютно фальшиві елементи, створені комп'ютером, підміну облич або навіть омолодження акторів, щоб вони виглядали років на 30 молодшими. Сьогодні ми хочемо поговорити з вами та роз’яснити деякі сумніви щодо ньогодві найпопулярніші техніки зазначеного сектора: CGI і deepfakes.
CGI проти DeepFake: що це та чим вони відрізняються?
Незважаючи на те, що спілкування з вами на цю тему стало дуже популярним в останні роки, ці техніки (особливо CGI) вже давно використовуються в кіно, на телебаченні та в рекламі. Але, звичайно, необізнаність громадськості щодо цих методів зазвичай може призвести до того, що вони заплутають їх або навіть подумають, що це лише «речі, створені комп’ютером». Правда в тому, що це абсолютно різні елементи, але вони можуть доповнювати один одного.
З одного боку, у нас є техніка CGI або «комп’ютерні зображення», також відомі як комп’ютерні зображення. Ці типи графіки, 3D або 2D, часто використовуються в мистецтві, фільмах, телешоу та рекламі або відеоіграх.
Посилаючись на кіно та телебачення, CGI часто використовується для відтворення сцен, які у багатьох випадках були б набагато дорожче створити в реальному житті ніж створювати їх за допомогою передових обчислювальних методів за допомогою комп’ютерів. Але, доводячи це до крайності, є сцени, які, якби не CGI, були б сцени, які було б неможливо отримати інакше, наприклад, померлий актор або актриса, які з’являються у фільмі чи серіалі. Прикладом CGI може бути комп’ютерна графіка для популярного серіалу «Мандалорець».
З іншого боку, техніка о Deepfake, це абревіатура англійською мовою, утворена об’єднанням слова підроблений ("false" іспанською) і глибоке навчання («поглиблене навчання» іспанською). Це техніка, виконана за допомогою обчислень штучного інтелекту, яка часто використовується в кіно чи на телебаченні, головним чином для заміни облич, омолодження або старіння в ультрареалістичний спосіб. Це правда, що це знову ж таки щось зроблено за допомогою комп’ютера, але для використання цієї техніки потрібні 2 реальні джерела.
Щоб ми всі це добре зрозуміли та пояснили дуже простим способом, через використання ШІ та розпізнавання обличчя аналізуються всі риси моделі «А», які ми хочемо, наприклад, замінити обличчя іншої людини. Тепер з нашою моделлю «B», чиє обличчя вибрано для заміни, нам потрібно створити «базу даних» кожної риси її обличчя за допомогою відео або багатьох фотографій з різних ракурсів. Після виділення всіх морфологічних даних обличчя суб’єкта B виконується вирівнювання рис обличчя суб’єкта A, щоб «зафіксувати» його обличчя під усіма можливими кутами. Знаючи особливості обох моделей, ми приступаємо до вирівнювання обох облич за допомогою комп’ютерних обчислювальних методів, отримуючи в результаті щось схоже на маску на обличчі суб’єкта А. Для завершення завдання, хоча весь цей процес набагато глибший, компонування та vfx використовуються для «усунення безладу».
El остаточний рахунок, якщо це було зроблено правильно, полягає в тому, що персонаж А надзвичайно схожий (з точки зору морфології його обличчя) на персонажа Б. Прикладом глибокої підробки може бути наступне зображення, на якому обличчя було замінено на Джек Ніколсон у фільмі "Сяйво" актора Джима Керрі.
Найвідоміші CGI і Deekfake
Тепер, коли ви знаєте трохи більше про ці популярні методи, які використовуються в кіно, на телебаченні та багатьох інших засобах масової інформації, ми хочемо показати вам деякі з CGI та найпопулярніші дипфейки моменту. Деякі з них зазнали серйозної критики, і тепер ми пояснюємо, чому.
Розкритикована CGI Мандалорця
Як ми вже згадували кілька рядків тому, використання техніки CGI в кіно для реалізації персонажів є на черзі дня. І так вони зробили в останній серії Мандалоріан 2 з повторною появою a дуже юний Люк Скайвокер.
Немає офіційної заяви від Disney, яка б пояснювала процедури, дотримувані для цих сцен, але очевидно, що вони не були такими відшліфованими, як мали б бути (і більше, знаючи бюджети, які обробляються).
Після ейфорії фанатів після того, як один із їхніх улюблених персонажів «повернувся до життя» у вигляді, який він мав у 70-х роках, критика нереальності, що міститься в цих сценах, не змусила себе довго чекати.
Користуючись моментом, творці о Сем і Ніко, канал YouTube, який спеціалізується на редагуванні відео та спецефектах, вирішив спробувати покращити ці сцени, і вони це зробили.
Як вони пояснюють в одному зі своїх відео, ретельно проаналізував рухи і риси обличчя (разом до помилки освітлення та текстури які коментують кліпи, в яких фігурує Люк). Потім за допомогою архіву вони проаналізували велику кількість відео та фотографій персонажа, коли він мав бажану зовнішність. Після всього цього аналізу та за допомогою надпотужного обладнання для обробки всього вони використали техніка deepfake щоб розмістити маску Люка Скайвокера поверх сцени, створеної Діснеєм у Мандалорці.
Ваш результат був кращим? Ви можете судити самі, переглянувши його відео, але, на нашу думку, покращення є значним.
CGI Уілла Сміта в Gemini
Ще один із найпопулярніших випадків застосування цих прийомів за останні роки був у фільмі Близнюки. На ньому ми бачимо 51-річного Вілла Сміта, який бореться з іншим 23-річним «Віллом».
Ще раз, генерація комп'ютерної графіки поруч з техніки розпізнавання облич і ШІ У 2019 році вони дозволили проаналізувати кожну рису обличчя актора, а потім об’єднали його зображення, коли йому було лише 20 років. На щастя, у Вілла Сміта є великий архів сцен за цей час, як у фільмі Двоє повстанських копівабо в Люди в чорному.
Уілл сам пояснює частину процесу (показуючи багато закулісних зображень) у відео на своєму каналі YouTube.
Deepfake Лола Флорес
Яскравий приклад не міг залишити поза увагою останню рекламу пивної компанії Cruzcampo, в якій за допомогою техніки Deepfake, відродили популярну співачку Лолу Флорес.
Якщо ви хочете знати дуже детально, як цю техніку було застосовано для створення сказаного місце реклами, на власному YouTube-каналі цієї компанії вони розповіли процес у відео.
Мобільна ера: програми для створення Deepfakes за допомогою мобільного
Як ми зазначали на початку цієї статті, технології розвиваються семимильними кроками, і речі, для яких раніше нам було потрібно надзвичайно потужне обладнання, тепер можна робити за допомогою нашого мобільного телефону.
Техніка проведення Deepfakes ще один приклад цього. Є різні застосування які дозволяють нам зробити селфі та всього за кілька секунд помістити своє обличчя на всесвітньо відомих персонажів, таких як Гаррі Поттер, Шакіра або капітан Джек Горобець, серед багатьох інших.
Як ви можете собі уявити, це підготовлені моделі, в яких з меншими обчисленнями, ніж ті, що виконуються у фільмі чи на телебаченні, це дозволяє нам розмістити на них своє обличчя простим, але досить успішним способом. Ми не збираємося нікого дурити, але щоб запостити в соцмережах чи посміятися, цього більш ніж достатньо.
Прикладом цього є додаток Повернення. Як ми говорили вам, це так само просто, як виконати кроки, які дає нам програма, і, зробивши селфі та проаналізувавши його, ми можемо замінити своє обличчя замість обличчя добре відомих персонажів різних видів. Звичайно, ми вже попереджали вас, що якщо ви хочете повністю насолодитися цією програмою, вам доведеться заплатити.
Іншим прикладом є програма iface, доступна лише для телефонів Apple. Операція ідентична попередній:
- Запускаємо додаток.
- Він просить нас зробити селфі, щоб проаналізувати це.
- Ми вибираємо один із безкоштовних шаблонів у їхньому каталозі й лише за кілька секунд отримуємо обличчя актора, співака чи відомого громадського діяча.
Але, знову ж таки, нам доведеться пройти через касу, щоб скористатися всіма моделями цього додатка.