Як створити власний анімаційний фільм за допомогою ШІ | Блог Fable

Як створити власний анімаційний фільм за допомогою ШІ

Віхан Босхофф

автор

Віхан Босхофф

Засновник Fable · Опубліковано · 8 хв читання

Оновлено

Мрія, яка раніше коштувала мільйони

Згадайте останній анімаційний фільм, який ви дивилися. Можливо, це був фільм Pixar, щось від DreamWorks або шедевр Studio Ghibli. Тепер подумайте, що знадобилося для створення цього фільму. Сотні художників, аніматорів, акторів озвучення, музикантів та інженерів. Роки виробництва. Бюджети, що вимірюються десятками або сотнями мільйонів доларів. Сама лише технологія, рендер-ферми, власне програмне забезпечення, студії захоплення руху, коштує дорожче, ніж більшість людей заробить за все життя. Анімаційне кіновиробництво завжди було одним із найбільш ресурсомістких творчих починань на планеті.

Але щось змінюється. І змінюється швидко. ШІ скорочує відстань між «У мене є ідея для історії» та «У мене є готовий, придатний для перегляду, емоційно захопливий анімаційний досвід». Ми ще не зовсім там: ніхто сьогодні не генерує повнометражні фільми якості Pixar на своєму ноутбуці. Але ми набагато ближче, ніж більшість людей усвідомлює. І траєкторія безпомилкова. Протягом кількох років інструменти для створення власного анімаційного фільму будуть такими ж доступними, як сьогодні інструменти для створення власного вебсайту.

Що вже можливо прямо зараз

Давайте поговоримо про те, що ви можете зробити сьогодні, тому що це вражає більше, ніж ви можете подумати. Fable вже дозволяє створювати повністю озвучені, ілюстровані анімовані історії з оригінальною фоновою музикою: і все це за допомогою простого текстового запиту. Ви описуєте свою ідею історії, налаштовуєте персонажів, і менш ніж за 5 хвилин у вас є повна багатосценова розповідь із послідовним художнім оформленням персонажів, виразним голосовим супроводом та музичним супроводом, що відповідає емоційним моментам історії.

Чи це фільм Pixar? Ні. Але чи це справжній, емоційно захопливий досвід анімованої розповіді, який ви створили самі, з нуля, за лічені хвилини? Безумовно. І цей розрив між "ілюстрованою історією з озвученням і музикою" та "повністю анімованим фільмом" скорочується швидше, ніж будь-хто в індустрії прогнозував. Щомісяця відео, створене ШІ, стає більш плавним, виразним і кінематографічним. Щомісяця генерація голосу ШІ стає більш природною та здатною до справжньої емоційної гри. Будівельні блоки збираються в режимі реального часу.

Кінематографічна сцена з історії Fable, що демонструє послідовну ілюстрацію персонажів із драматичним освітленням

Сьогоднішній ШІ-сторітелінг уже створює сцени з послідовними персонажами, виразною оповіддю та музикою, що відповідає настрою. Кожна історія, це крок до повноцінних анімаційних фільмів, які ми всі уявляємо. Фундамент уже закладено, решта це ітерація.

Три стовпи створення фільмів за допомогою ШІ

Щоб зрозуміти, куди рухається ШІ-анімація, корисно розділити завдання на три частини: візуальні ефекти, аудіо та розповідь. Кожна з них досягла надзвичайного прогресу за останні два роки, і кожна рухається траєкторією, яка вказує на майбутнє, де окремі творці зможуть створювати контент, що конкурує з професійними студіями.

Щодо візуальної частини, генерація зображень штучним інтелектом пройшла шлях від створення розмитих, дивних артефактів до створення фотореалістичних і стилістично послідовних творів мистецтва. Наступний рубіж: відео: створення плавної, цілісної анімації, де персонажі природно рухаються в сценах. Ми вже бачимо ранні версії цього від дослідницьких лабораторій і стартапів. Якість значно покращується кожні кілька місяців. Послідовність персонажів у кадрах, що було величезною невирішеною проблемою ще рік тому, тепер вирішується багатьма командами з дедалі вражаючішими результатами.

Аудіо досягло такого ж приголомшливого прогресу. ШІ-синтез голосу тепер створює озвучення, яке майже неможливо відрізнити від людського виконання, зі справжнім емоційним діапазоном, хвилюванням, сумом, подивом, страхом. ШІ-генерація музики може створювати оригінальні партитури, які відповідають конкретним настроям і динамічно підлаштовуються під ритм оповіді. Fable вже використовує обидві ці технології для створення історій, які звучать професійно. Поєднання їх із генерацією відео, це очевидний наступний крок.

А оповідь, сама історія, це, мабуть, те, де ШІ досяг найбільшого прогресу. Великі мовні моделі тепер можуть генерувати цілісні, емоційно резонансні історії з належною структурою, арками персонажів і тематичною глибиною. Вони не замінюють людську творчість, а підсилюють її способами, які дозволяють будь-кому, хто має ідею, створити повну, добре продуману оповідь.

Чому послідовність персонажів є ключовим викликом

Якщо ви експериментували зі створенням ШІ-зображень або відео, ви, мабуть, помітили найбільшу проблему: один і той самий персонаж ніколи не виглядає однаково двічі. Колір волосся змінюється. Риси обличчя зміщуються. Одяг трансформується між кадрами. Для одного крутого зображення це не має значення. Для історії, або фільму, це критично. Ви не можете дозволити, щоб ваш головний герой виглядав як інша людина в кожній сцені.

Це те, що Fable вже вирішила для ілюстрованих історій. Коли ви створюєте персонажа у Fable, цей персонаж зберігає свій вигляд у кожній сцені історії. Те саме обличчя, те саме волосся, те саме вбрання, ті самі пропорції. Це звучить просто, але насправді це одна з найскладніших технічних проблем у візуальному сторітелінгу, створеному ШІ. І це та сама проблема, яку потрібно вирішити для відео, створеного ШІ, перш ніж ми дійдемо до справжніх анімаційних фільмів. Команди, які розгадають послідовність персонажів у генерації відео, будуть тими, хто відкриє наступну еру кіновиробництва.

Візуальна шкала часу, що показує еволюцію якості анімації, створеної ШІ, з 2023 по прогнозований 2027 рік

Прогрес у візуальній генерації ШІ був приголомшливим. Те, що три роки тому виглядало як новинка, тепер створює ілюстрації якості виробництва. Стрибок від послідовних ілюстрацій до послідовної анімації: це наступний рубіж, і перші результати дослідницьких лабораторій свідчать про те, що це ближче, ніж більшість людей очікує.

Як виглядатиме ваш персоналізований анімаційний фільм

Уявіть собі: ви сідаєте, описуєте історію, яку хочете розповісти. Можливо, це пригода на ніч для вашої дитини. Можливо, це короткометражний фільм про те, що ви пережили. Можливо, це фентезійний епос, який ви тримали в голові роками. Ви описуєте персонажів, задаєте тон, окреслюєте ключові моменти. А потім, за час, поки готується вечеря, ШІ генерує повністю анімований короткометражний фільм. Послідовні персонажі, що плавно рухаються в деталізованих середовищах. Озвучка, що вловлює кожен емоційний нюанс. Музичний супровід, який наростає і стихає саме в потрібні моменти. Освітлення, ракурси камери, темп: усе це обробляється автоматично на основі емоційних потреб кожної сцени.

Це не наукова фантастика. Кожен окремий компонент цього бачення або існує сьогодні, або знаходиться в активній розробці з вражаючими ранніми результатами. Виклик полягає в інтеграції: об'єднанні всіх цих частин в один єдиний, безшовний творчий інструмент. Це саме те, над чим працюють такі компанії, як Fable. Сьогодні Fable дає вам ілюстровані історії з професійним озвученням та музикою. Завтра ці ілюстрації стануть анімаціями. Озвучення стане діалогом між кількома персонажами. Музика стане динамічним саундтреком. Історія стане фільмом.

Демократизація розповідання історій

У технологіях є шаблон, який повторюється знову і знову. Те, що раніше вимагало величезних ресурсів, стає доступним для всіх. Видання книги раніше вимагало видавництва. Тепер кожен може видати книгу самостійно. Запис музики раніше вимагав студії. Тепер кожен може створити альбом на своєму ноутбуці. Створення вебсайту раніше вимагало розробника. Тепер кожен може створити його за один вечір. Анімація: наступна. Вартість і складність руйнуються. Інструменти стають кращими в експоненціальному темпі.

Що найбільше захоплює мене в цьому: це не сама технологія, а те, що відбувається, коли мільйони людей, які мають історії, що хочуть розповісти, раптом отримують можливість розповісти їх візуально, з рухом, звуком і музикою. Різноманітність історій вибухне. Ми побачимо перспективи та наративи, які Голлівуд ніколи б не схвалив. Ми побачимо культурні історії, сімейні історії, глибоко особисті історії, які важливі лише для жменьки людей, але надзвичайно важливі для цих людей. Ми побачимо творчий ренесанс, керований не студіями, а окремими людьми.

Як почати створювати вже сьогодні

Вам не потрібно чекати, поки повне бачення стане реальністю. Ви можете почати створювати анімаційні історії прямо зараз із Fable. Кожна історія, яку ви створюєте сьогодні,, це крок у це майбутнє. Ви створюєте персонажів, розробляєте наративи та відчуваєте, як це, пройти шлях від ідеї до готової історії за лічені хвилини. У міру розвитку технології ваш творчий процес розвивається разом із нею. Історії стають багатшими, динамічнішими, кінематографічнішими.

Завантажте Fable і створіть свою першу історію. Спостерігайте, як ваш персонаж оживає в ілюстрованих сценах із професійним озвученням та музикою. А потім уявіть, як цей досвід виглядатиме через два роки. Через п'ять років. Майбутнє кіновиробництва: це не лише кращі інструменти для професіоналів. Це про те, щоб дати кожному можливість втілити свої історії в життя. І це майбутнє вже починається.

Часті запитання

Чи можу я створити анімоване відео з історією за допомогою ШІ?

Так. Fable перетворює будь-яку історію на відео з анімованими ілюстраціями, ШІ-оповіддю та фоновою музикою. Це не анімація рівня Pixar, але діти люблять бачити себе героями власної історії. Відео зазвичай тривають 2-5 хвилин.

Який найкращий генератор історій зі штучним інтелектом із картинками та відео?

Fable створює персоналізовані історії з послідовними ілюстраціями персонажів, озвученням штучним інтелектом, фоновою музикою та відео: все з одного запиту. Ви описуєте пригоду, а він генерує повний мультимедійний досвід. Історії також мають можливість друку фізичних книг.

Як працюють відео зі сторітелінгом від ШІ?

Ви створюєте персоналізовану історію з ілюстраціями та текстом. Потім ШІ генерує озвучення, використовуючи природні голоси, і додає фонову музику, яка змінюється залежно від настрою історії. Ілюстрації анімуються у формат відео, яке ваша дитина може дивитися на будь-якому пристрої.

Я регулярно ділюся оновленнями про те, що я створюю і як я вдосконалюю Fable.

Слідкуйте за мною в X

Готові створити власну історію?

Створіть історію у своєму браузері або завантажте Fable для iOS та Android. Додайте власних персонажів, ілюстрації та озвучення.