Какво е агентна рамка? | Блог на Fable

Вътре във Fable Продукт и AI

Какво е агентна рамка?

Софтуерът, който помага на AI да пренесе проект от една стъпка към следващата, обяснен чрез създаването на история.

Филмът започва с идея. Създаването му изисква екип: сценарист оформя сценария, актьори дават глас на героите, а редактор събира записите заедно. За да може тази работа да се превърне в една последователна история, всеки трябва да знае какво е решено и какво следва.

Един AI проект се нуждае от такъв вид координация също. Моделът може да помогне за написването на сцена или планирането на илюстрация. Приложението около него трябва да предостави правилната чернова, да стартира инструментите, да запише резултатите и да поддържа проекта в движение. Софтуерът, който се справя с тези отговорности, често се нарича агентна рамка.

Създадохме такъв за Gambit, защото създаването на история включва решения, които трябва да останат свързани: какво казва един герой, как го казва и какво вижда публиката в този момент. Системата помага за пренасянето на тези решения през работата, включително когато промените мнението си.

Мислете за това като за продуцентски екип около модела

На снимачната площадка на филм искане като „нека опитаме тази сцена отново“ задвижва няколко неща. Актьорите се нуждаят от най-новия сценарий, екипът подготвя кадъра и някой записва кой дубъл е избран. Сбруята (harness) играе сравнима организираща роля за система с изкуствен интелект. Тя свързва предложено действие с практическата работа, необходима за неговото изпълнение.

Моделът генерира отговори и предлага действия. Сбруята управлява инструментите, информацията и ограниченията около тези действия. Заедно те могат да формират агент: система, която работи към цел в продължение на няколко стъпки. Терминологията варира между продуктите, но тези отговорности са полезен начин да се разбере какво се случва.

Една заявка, няколко свързани стъпки Модел + инструменти + запазена работа
  1. 01

    Съберете контекста

    Заредете заявката, съответните чернови и вече взетите решения.

  2. 02

    Изберете действие

    Моделът предлага редакция, инструмент за използване или въпрос за задаване.

  3. 03

    Изпълнение

    Изпълнете разрешено действие, като поискате вашето одобрение, когато е необходимо.

  4. 04

    Проверете резултата

    Валидирайте и запазете изхода, след което го използвайте, за да насочите следващата стъпка.

Този цикъл може да се повтаря с развитието на задачата. Ако инструмент докладва проблем, системата може да използва тази информация, за да опита различен подход или да поиска помощ. Подканата допринася с инструкции към този процес; хардуерът предоставя софтуера, който реално го изпълнява.

Същият принцип е важен, когато работата продължава през различни сесии. Изследванията на Anthropic върху дългосрочните агенти описват стойността на ясните записи за напредъка и запазената работа, която следващата сесия може да продължи. Един проект се нуждае от надежден запис на случилото се, дори когато моделът не може да задържи цялата история в текущия си контекст.

Какво означава това, когато създавате история

В Gambit можете да започнете с груба идея и да я развиете чрез разговор. Можете да поискате по-убедителен злодей, по-нежен край или диалог, който звучи по-малко формално. Докато историята се оформя, рамката дава на този разговор посока: редактируем план, сценарий, аудио насоки и сториборд.

Поддържайте работещ сценарий, към който всеки може да се обърне

Продукцията трябва да знае по кой сценарий работи. Gambit запазва основните части на историята отделно: планът задава посоката, сценарият съдържа диалог и инструкции за изпълнение, а „Актьорски състав и свят“ съдържа визуалните препратки. По-късните стъпки черпят от съответния запазен материал, включително разграничението между одобрена версия и чернова, която все още се преработва.

Можете да инспектирате тези части от проекта директно. Това улеснява виждането на това, за което сте се съгласили, какво все още се нуждае от работа и какво ще използва следващият етап.

Работното пространство за сценарий на Gambit, с диалог на героите, инструкции за изпълнение и звукови сигнали за The Eighth Wakes.
Вижте цялото изображение

Улавяне на страничните ефекти от редакция

Помислете за звуков ефект, синхронизиран с определена фраза. Ако пренапишете тази фраза, нейната инструкция за време може вече да няма смисъл. В Gambit директна редакция на сценария, която прекъсва тази връзка, се спира с искане за преразглеждане на думите и звуковата реплика заедно чрез чат.

Това е малка проверка с практическа цел. Тя улавя несъответствие, което иначе би могло да достигне етапа на запис. Моделът за писане може да помогне за намирането на по-добър ред; придружаващият софтуер проверява дали звуковият сигнал все още има валидно място в сценария.

Изградете снимките около изпълнението

Говорената сцена има свое собствено темпо. Актьорът може да направи пауза преди разкритие или да се задържи върху последните думи. Снимките се нуждаят от място, за да следват това изпълнение.

Сторибордът на Gambit може да използва измереното време на генерираното аудио заедно с препратките към героите и обстановката. Неговите проверки включват дали планираните кадри покриват аудио времевата линия. Това дава на визуалната последователност конкретна основа: изпълнението, което публиката реално ще чуе.

Работното пространство за сториборд на Gambit, показващо плана на сцената и илюстрираните кадри за The Eighth Wakes.
Вижте цялото изображение

Знайте какво одобрявате

В продукция обсъждането на друг дубъл и резервирането на сесия за запис са отделни решения. Gambit прави подобно разграничение между разработването на идея и генерирането на платена медия. Преглеждате оферта, преди това генериране да се изпълни, и системата проверява дали одобрението все още съответства на исканата работа.

Промяната на сценарий след запис може да означава създаване на ново аудио. Промяната на сцена може да означава генериране на друго изображение. Тези действия могат да използват повече токени. Запазените версии помагат за проследяване на резултатите, докато стъпката за одобрение ви дава шанс да решите дали следващото генериране си заслужава.

Къде се вписват ChatGPT и Claude?

ChatGPT и Claude са полезни места за разработване на история. Те могат да ви помогнат да проучите предпоставка, да поставите под въпрос мотивацията на герой и да преработите труден пасаж. И двете предлагат начини за организиране на текущата работа.

Проектите в ChatGPT обединяват чатове, файлове и инструкции. Инструменти като Canvas ви позволяват да работите върху чернова заедно с разговора. Проектите в Claude предоставят споделени справочни материали и инструкции за проекта, докато Artifacts дават отделна повърхност за работа, която можете да редактирате и към която да се връщате.

Gambit е организиран около конкретен производствен процес. Той дава на сценария, препратките към героите, гласовата режисура и разчетената сториборд определени места в проекта, с инструменти и проверки, които ги свързват. Можете да прекарате времето си в разработване на историята в рамките на този процес.

Избор на работен процес за вашата история

Избор на работен процес за вашата история: ChatGPT and Claude compared with Gambit
Вашата задачаChatGPT и ClaudeGambit
Develop an ideaОбсъдете възможности, проучете контекста и разработете сюжет.Развийте идеята в план на историята, който можете да прегледате и преработите.
Следете работатаОрганизирайте референтни материали, инструкции и чернови, като използвате инструментите за проекти на продукта.Работете със запазени етапи на историята и избраните резултати, използвани от по-късните етапи.
Редактирайте сценаПоискайте обратна връзка или редактирайте текста в поддържано работно пространство за документи.Редактирайте сценария с проверки за връзки, като звукови сигнали, обвързани с диалога.
Добавете звук и картиниПодредете работен процес, като използвате наличните инструменти и всички други услуги, които изберете.Следвайте вграден процес за насочване на гласа, аудио, визуални препратки и сториборд с времеви график.
Това са разлики в работния процес. Наличните функции варират според продукта и плана; вижте официалните ръководства по-горе за текущи подробности.

Общият асистент може да се впише идеално в процеса на писане, на който вече се наслаждавате. Gambit е полезен, когато искате писането, изпълнението и визуалното планиране да споделят едно работно пространство. Той използва поддържани ИИ модели и медийни услуги, като софтуерът на Fable координира историята между тях.

Вие все още решавате какво прави историята добра

Една добре организирана филмова продукция може да поддържа графика на снимките и реда на кадрите. Режисьорът все пак трябва да реши дали актьорската игра е подходяща. Същото ограничение важи и тук. Софтуерът може да провери дали звуков сигнал съответства на валидни думи или дали кадрите покриват запис. Дали една шега е сполучлива, дали един герой изглежда убедителен или дали краят ще остане в съзнанието ви – това е творческа преценка.

Моделите могат да пропуснат детайли, инструментите могат да се провалят и технически валиден резултат все още може да ви разочарова. Стойността на рамката е в това, че прави работата по-лесна за преглед и ревизия. Тя ви дава начин да действате според решение като „запази тази версия на героя, но опитай сцената отново“.

Това е изживяването, което изграждаме с Gambit. Можете да обсъдите идея, да оформите всяка част от историята и да прегледате резултатите, докато вървите. Ако предпочитате да изберете герой и да оставите Fable да се погрижи за създаването, Fable Go предлага този по-лесен път. Gambit ви дава пространство да насочвате детайлите.

Често задавани въпроси

Едно и също ли е агентният механизъм и подканата?

Подканата казва на модела какво искате и предоставя контекст. Сбруята е софтуерът, който доставя тези инструкции, изпълнява инструменти, запазва напредъка и проверява резултатите. Тя може да използва много подкани по време на една задача.

Помага ли харнесът на AI да запомни всичко?

Harness може да запази информация за проекта и да внесе подходящи части в по-късни заявки. Моделът все още има ограничения за това колко информация може да използва наведнъж и може да пропусне или интерпретира погрешно детайл. Запазената работа му дава по-добра отправна точка.

Gambit AI модел ли е?

Gambit е работно пространство за истории, което използва ИИ модели и медийни услуги. Рамката на Fable ги свързва със сценария на проекта, гласовете, произведенията на изкуството, инструментите и стъпките за преглед.