Як стварыць уласны анімацыйны фільм з дапамогай штучнага інтэлекту | Блог Fable

Як стварыць уласны анімацыйны фільм з дапамогай штучнага інтэлекту

Віхан Босхоф

Аўтар

Віхан Босхоф

Заснавальнік Fable · Апублікавана · 8 хвілін чытання

Абноўлена

Мара, якая раней каштавала мільёны

Падумайце пра апошні анімацыйны фільм, які вы глядзелі. Можа быць, гэта быў фільм Pixar, або нешта ад DreamWorks, або шэдэўр Studio Ghibli. Цяпер падумайце, што спатрэбілася для стварэння гэтага фільма. Сотні мастакоў, аніматараў, акцёраў агучвання, музыкаў і інжынераў. Гады вытворчасці. Бюджэты, якія вымяраюцца дзясяткамі ці сотнямі мільёнаў долараў. Адна толькі тэхналогія, рэндэр-фермы, прапрыетарнае праграмнае забеспячэнне, студыі захопу руху, каштуе больш, чым большасць людзей заробіць за ўсё жыццё. Анімацыйнае кіно заўсёды было адным з самых рэсурсаёмістых творчых пачынанняў на планеце.

Але нешта змяняецца. І змяняецца хутка. Штучны інтэлект скарачае адлегласць паміж «У мяне ёсць ідэя для гісторыі» і «У мяне ёсць гатовы, прыдатны для прагляду, эмацыйна пераканаўчы анімацыйны вопыт». Мы яшчэ не зусім там, сёння ніхто не стварае на сваім ноўтбуку мастацкія фільмы якасці Pixar. Але мы значна бліжэй, чым большасць людзей думае. І траекторыя відавочная. На працягу некалькіх гадоў інструменты для стварэння ўласнага анімацыйнага фільма стануць такімі ж даступнымі, як сёння інструменты для стварэння ўласнага вэб-сайта.

Што ўжо магчыма прама зараз

Давайце пагаворым пра тое, што вы можаце зрабіць сёння, таму што гэта больш уражвае, чым вы можаце падумаць. Fable ужо дазваляе ствараць цалкам агучаныя, ілюстраваныя анімаваныя гісторыі з арыгінальнай фонавай музыкай, усё з простай тэкставай падказкі. Вы апісваеце сваю ідэю гісторыі, наладжваеце персанажаў, і менш чым за 5 хвілін у вас ёсць поўнае шматсцэнавае апавяданне з паслядоўнымі ілюстрацыямі персанажаў, выразным галасавым апавяданнем і музычным суправаджэннем, якое адпавядае эмацыянальным рытмам гісторыі.

Ці гэта фільм Pixar? Не. Але ці з'яўляецца гэта сапраўдным, эмацыйна захапляльным вопытам анімацыйнага апавядання, які вы стварылі самі, з нуля, за лічаныя хвіліны? Безумоўна. І гэты разрыў паміж «ілюстраванай гісторыяй з агучкай і музыкай» і «паўнавартасным анімацыйным фільмам» скарачаецца хутчэй, чым хто-небудзь у індустрыі прадказваў. Кожны месяц відэа, створанае ШІ, становіцца больш плаўным, больш выразным, больш кінематаграфічным. Кожны месяц генерацыя голасу ШІ становіцца больш натуральнай і здольнай на сапраўднае эмацыйнае выкананне. Будаўнічыя блокі збіраюцца ў рэальным часе.

Кінематаграфічная сцэна з гісторыі Fable, якая паказвае паслядоўную ілюстрацыю персанажа з драматычным асвятленнем

Сённяшняе апавяданне са штучным інтэлектам ужо стварае сцэны з паслядоўнымі персанажамі, выразным апавяданнем і музыкай, якая адпавядае настрою. Кожная гісторыя, гэта крок бліжэй да поўнаметражных анімацыйных фільмаў, якія мы ўсе ўяўляем. Фундамент ужо тут, астатняе гэта ітэрацыя.

Тры слупы стварэння фільмаў з дапамогай ШІ

Каб зразумець, куды рухаецца анімацыя са штучным інтэлектам, карысна падзяліць задачу на тры часткі: візуальны шэраг, аўдыя і апавяданне. Кожная з іх дасягнула надзвычайнага прагрэсу за апошнія два гады, і кожная знаходзіцца на траекторыі, якая паказвае на будучыню, дзе асобныя стваральнікі змогуць вырабляць кантэнт, які канкурыруе з прафесійнымі студыямі.

З візуальнага боку генерацыя малюнкаў штучным інтэлектам прайшла шлях ад стварэння размытых, дзіўных артэфактаў да стварэння фотарэалістычных і стылістычна паслядоўных твораў мастацтва. Наступная мяжа, відэа: генерацыя плаўнай, звязнай анімацыі, дзе персанажы натуральна рухаюцца па сцэнах. Мы ўжо бачым раннія версіі гэтага ад даследчых лабараторый і стартапаў. Якасць значна паляпшаецца кожныя некалькі месяцаў. Паслядоўнасць персанажаў у кадрах, што было велізарнай нявырашанай праблемай яшчэ год таму, цяпер вырашаецца некалькімі камандамі з усё больш уражлівымі вынікамі.

Аўдыё таксама дасягнула ашаламляльнага прагрэсу. Сінтэз голасу штучным інтэлектам цяпер стварае апавяданне, якое амаль немагчыма адрозніць ад чалавечага выканання, з сапраўдным эмацыянальным дыяпазонам, хваляваннем, смуткам, здзіўленнем, страхам. Генерацыя музыкі штучным інтэлектам можа ствараць арыгінальныя партытуры, якія адпавядаюць пэўным настроям і дынамічна падладжваюцца пад сюжэтныя павароты. Fable ужо выкарыстоўвае абедзве гэтыя тэхналогіі для стварэння гісторый, якія гучаць прафесійна. Спалучэнне іх з генерацыяй відэа, відавочны наступны крок.

І апавяданне - сама гісторыя - гэта, магчыма, тое, дзе штучны інтэлект дасягнуў найбольшага прагрэсу. Вялікія моўныя мадэлі цяпер могуць ствараць звязныя, эмацыйна рэзаніруючыя гісторыі з належнай структурай, сюжэтнымі лініямі персанажаў і тэматычнай глыбінёй. Яны не замяняюць чалавечую творчасць, але ўзмацняюць яе такім чынам, што любы чалавек з ідэяй можа стварыць поўнае, добра прадуманае апавяданне.

Чаму паслядоўнасць персанажаў: ключавая праблема

Калі вы эксперыментавалі са стварэннем малюнкаў ці відэа з дапамогай штучнага інтэлекту, вы, напэўна, заўважылі галоўную праблему: адзін і той жа персанаж ніколі не выглядае аднолькава двойчы. Колер валасоў змяняецца. Рысы твару ссоўваюцца. Адзенне трансфармуецца паміж кадрамі. Для аднаго класнага малюнка гэта не мае значэння. Для гісторыі, ці фільма, гэта недапушчальна. Ваш галоўны герой не можа выглядаць як іншы чалавек у кожнай сцэне.

Гэта тое, што Fable ужо вырашыла для ілюстраваных гісторый. Калі вы ствараеце персанажа ў Fable, гэты персанаж захоўвае свой знешні выгляд у кожнай сцэне гісторыі. Тое ж твар, тыя ж валасы, той жа ўбор, тыя ж прапорцыі. Гэта гучыць проста, але насамрэч гэта адна з самых складаных тэхнічных задач у візуальным апавяданні, створаным штучным інтэлектам. І гэта тая ж задача, якую трэба вырашыць для відэа, створанага штучным інтэлектам, перш чым мы пяройдзем да сапраўдных анімацыйных фільмаў. Каманды, якія ўзламаюць паслядоўнасць персанажаў у генерацыі відэа, стануць тымі, хто адкрые наступную эру кінавытворчасці.

Візуальная шкала часу, якая паказвае эвалюцыю якасці анімацыі, створанай штучным інтэлектам, з 2023 па прагназуемы 2027 год

Прагрэс у стварэнні візуальных малюнкаў штучным інтэлектам быў ашаламляльным. Тое, што тры гады таму выглядала як навінка, цяпер стварае ілюстрацыі вытворчай якасці. Пераход ад паслядоўных ілюстрацый да паслядоўнай анімацыі, гэта наступная мяжа, і першыя вынікі даследчых лабараторый паказваюць, што гэта бліжэй, чым большасць людзей чакае.

Як будзе выглядаць ваш асабісты анімацыйны фільм

Уявіце сабе: вы садзіцеся, апісваеце гісторыю, якую хочаце расказаць. Можа быць, гэта прыгода перад сном для вашага дзіцяці. Можа быць, гэта кароткаметражны фільм пра тое, што вы перажылі. Можа быць, гэта фэнтэзійная эпапея, якая ў вас у галаве ўжо шмат гадоў. Вы апісваеце персанажаў, задаяце тон, акрэсліваеце ключавыя моманты. А потым, за час, пакуль рыхтуецца вячэра, штучны інтэлект стварае цалкам анімаваны кароткаметражны фільм. Паслядоўныя персанажы, якія плаўна рухаюцца праз дэталізаванае асяроддзе. Агучка, якая перадае кожны эмацыянальны нюанс. Музычнае суправаджэнне, якое ўзмацняецца і заціхае менавіта ў патрэбныя моманты. Асвятленне, ракурсы камеры, тэмп, усё апрацоўваецца аўтаматычна ў залежнасці ад эмацыянальных патрэб кожнай сцэны.

Гэта не навуковая фантастыка. Кожны асобны кампанент гэтага бачання альбо існуе сёння, альбо знаходзіцца ў актыўнай распрацоўцы з уражлівымі раннімі вынікамі. Праблема ў інтэграцыі, аб'яднанні ўсіх гэтых частак у адзіны, бясшвоўны творчы інструмент. Гэта менавіта тое, над чым працуюць такія кампаніі, як Fable. Сёння Fable дае вам ілюстраваныя гісторыі з прафесійным апавяданнем і музыкай. Заўтра гэтыя ілюстрацыі стануць анімацыяй. Апавяданне стане дыялогам паміж некалькімі персанажамі. Музыка стане дынамічным саўндтрэкам. Гісторыя стане фільмам.

Дэмакратызацыя апавядання

У тэхналогіях існуе заканамернасць, якая паўтараецца зноў і зноў. Тое, што раней патрабавала велізарных рэсурсаў, становіцца даступным для ўсіх. Выданне кнігі раней патрабавала выдавецтва. Цяпер кожны можа выдаць кнігу самастойна. Запіс музыкі раней патрабаваў студыі. Цяпер кожны можа стварыць альбом на сваім ноўтбуку. Стварэнне вэб-сайта раней патрабавала распрацоўшчыка. Цяпер кожны можа стварыць яго за адзін дзень. Наступная, анімацыя. Кошт і складанасць змяншаюцца. Інструменты становяцца лепшымі ў геаметрычнай прагрэсіі.

Што мяне больш за ўсё радуе ў гэтым, не сама тэхналогія, а тое, што адбываецца, калі мільёны людзей, якім ёсць што расказаць, раптам атрымліваюць магчымасць расказаць гэта візуальна, з рухам, гукам і музыкай. Разнастайнасць гісторый выбухне. Мы ўбачым перспектывы і наратывы, якія Галівуд ніколі б не дазволіў. Мы ўбачым культурныя гісторыі, сямейныя гісторыі, глыбока асабістыя гісторыі, якія важныя толькі для жменькі людзей, але вельмі важныя для гэтых людзей. Мы ўбачым творчае адраджэнне, якое рухаецца не студыямі, а асобнымі людзьмі.

Як пачаць ствараць сёння

Вам не трэба чакаць, пакуль поўнае бачанне стане рэальнасцю. Вы можаце пачаць ствараць аніміраваныя гісторыі прама зараз з Fable. Кожная гісторыя, якую вы ствараеце сёння, - гэта крок у гэтую будучыню. Вы ствараеце персанажаў, распрацоўваеце сюжэты і адчуваеце, як гэта - перайсці ад ідэі да гатовай гісторыі за лічаныя хвіліны. Па меры развіцця тэхналогій ваш творчы працэс развіваецца разам з імі. Гісторыі становяцца больш багатымі, больш дынамічнымі, больш кінематаграфічнымі.

Спампаваць Fable і стварыць сваю першую гісторыю. Глядзіце, як ваш персанаж ажывае ў ілюстраваных сцэнах з прафесійным агучваннем і музыкай. А потым уявіце, як гэты вопыт будзе выглядаць праз два гады. Праз пяць гадоў. Будучыня кінавытворчасці, гэта не толькі лепшыя інструменты для прафесіяналаў. Гэта магчымасць даць кожнаму сілу ўвасабляць свае гісторыі ў жыццё. І гэтая будучыня ўжо пачынаецца.

Часта задаваныя пытанні

Ці магу я стварыць анімаванае відэа з гісторыяй з дапамогай штучнага інтэлекту?

Так. Fable ператварае любую гісторыю ў відэа з аніміраванымі ілюстрацыямі, агучкай штучным інтэлектам і фонавай музыкай. Гэта не анімацыя ўзроўню Pixar, але дзеці любяць бачыць сябе ў ролі героя ўласнай гісторыі. Відэа звычайна доўжацца 2-5 хвілін.

Які лепшы генератар гісторый з ІІ з малюнкамі і відэа?

Fable стварае персаналізаваныя гісторыі з паслядоўнымі ілюстрацыямі персанажаў, AI-апавяданнем, фонавай музыкай і відэа, усё з аднаго запыту. Вы апісваеце прыгоду, і яна генеруе поўны мультымедыйны вопыт. Гісторыі таксама пастаўляюцца з магчымасцю друку фізічных кніг.

Як працуюць відэа з апавяданнямі са штучным інтэлектам?

Вы ствараеце персаналізаваную гісторыю з ілюстрацыямі і тэкстам. Затым штучны інтэлект стварае апавяданне з выкарыстаннем натуральных галасоў і дадае фонавую музыку, якая змяняецца ў залежнасці ад настрою гісторыі. Ілюстрацыі анімуюцца ў відэафармат, які ваша дзіця можа глядзець на любой прыладзе.

Я рэгулярна дзялюся навінамі пра тое, што я ствараю і як паляпшаю Fable.

Сачыце за мной у X

Гатовыя стварыць сваю ўласную гісторыю?

Стварыце гісторыю ў сваім браўзеры або спампуйце Fable для iOS і Android. Дадайце сваіх уласных персанажаў, ілюстрацыі і апавяданне.