Čo je to agentný rámec? | Fable blog

Vo vnútri Fable Produkt a AI

Čo je to agentný rámec?

Softvér, ktorý pomáha AI preniesť projekt z jedného kroku do druhého, vysvetlený na tvorbe príbehu.

Film začína nápadom. Jeho vytvorenie si vyžaduje štáb: scenárista formuje scenár, herci dávajú postavám hlas a strihač spája nahrávky dohromady. Aby sa táto práca stala jedným uceleným príbehom, každý musí vedieť, čo bolo rozhodnuté a čo sa stane ďalej.

Projekt AI potrebuje takýto druh koordinácie. Model môže pomôcť napísať scénu alebo naplánovať ilustráciu. Aplikácia okolo neho musí poskytnúť správny koncept, spustiť nástroje, uložiť výsledky a udržať projekt v pohybe. Softvér, ktorý tieto zodpovednosti zvláda, sa často nazýva agent harness.

Jeden sme vytvorili pre Gambit, pretože vytváranie príbehu zahŕňa rozhodnutia, ktoré musia zostať prepojené: čo postava hovorí, ako to hovorí a čo publikum v tej chvíli vidí. Tento systém pomáha preniesť tieto rozhodnutia celou prácou, aj keď zmeníte názor.

Predstavte si to ako produkčný tím okolo modelu

Na filmovom pľaci žiadosť ako „skúsme tú scénu znova“ uvedie do pohybu niekoľko vecí. Herci potrebujú najnovší scenár, štáb pripraví záber a niekto zaznamená, ktorý záber bol vybraný. Postroj (harness) zohráva porovnateľnú organizačnú úlohu pre systém AI. Spája navrhovanú akciu s praktickou prácou potrebnou na jej vykonanie.

Model generuje odpovede a navrhuje akcie. Postroj spravuje nástroje, informácie a limity okolo týchto akcií. Spoločne môžu vytvoriť agenta: systém, ktorý pracuje na dosiahnutí cieľa v niekoľkých krokoch. Terminológia sa medzi produktmi líši, ale tieto zodpovednosti sú užitočným spôsobom, ako pochopiť, čo sa deje.

Jedna požiadavka, niekoľko prepojených krokov Model + nástroje + uložená práca
  1. 01

    Zhromaždite kontext

    Načítať požiadavku, relevantné koncepty a už urobené rozhodnutia.

  2. 02

    Vyberte akciu

    Model navrhuje úpravu, nástroj na použitie alebo otázku, ktorú treba položiť.

  3. 03

    Vykonajte to

    Spustite povolenú akciu, pričom v prípade potreby požiadajte o schválenie.

  4. 04

    Skontrolujte výsledok

    Overte a uložte výstup, potom ho použite na usmernenie ďalšieho kroku.

Tento cyklus sa môže opakovať, ako sa úloha vyvíja. Ak nástroj nahlási problém, systém môže použiť tieto informácie na vyskúšanie iného prístupu alebo požiadať o pomoc. Výzva prispieva k tomuto procesu pokynmi; systém poskytuje softvér, ktorý ho skutočne spúšťa.

Rovnaký princíp je dôležitý, keď práca pokračuje naprieč reláciami. Výskum spoločnosti Anthropic o dlhodobo bežiacich agentoch opisuje hodnotu jasných záznamov o pokroku a uloženej práce, na ktorú môže nadviazať ďalšia relácia. Projekt potrebuje spoľahlivý záznam o tom, čo sa stalo, aj keď model nedokáže udržať celú históriu vo svojom aktuálnom kontexte.

Čo to znamená, keď tvoríte príbeh

V Gambite môžete začať s hrubou predstavou a rozvíjať ju prostredníctvom konverzácie. Môžete požiadať o presvedčivejšieho zloducha, jemnejší koniec alebo dialógy, ktoré znejú menej formálne. Ako príbeh naberá tvar, systém vám dáva priestor, kam konverzáciu viesť: upraviteľný plán, scenár, zvukovú réžiu a storyboard.

Udržujte pracovný scenár, na ktorý sa môže každý odvolať

Produkcia potrebuje vedieť, z ktorého scenára pracuje. Gambit ukladá hlavné časti príbehu oddelene: plán určuje smer, scenár obsahuje dialógy a pokyny pre výkon a Obsadenie a svet uchováva vizuálne referencie. Neskôr kroky čerpajú z príslušných uložených materiálov vrátane rozlíšenia medzi schválenou verziou a konceptom, ktorý sa stále upravuje.

Tieto časti projektu si môžete prezrieť priamo. Vďaka tomu ľahšie uvidíte, na čom ste sa dohodli, čo ešte potrebuje úpravy a čo sa využije v ďalšej fáze.

Pracovný priestor Gambit script s dialógmi postáv, pokynmi na podanie a zvukovými pokynmi pre The Eighth Wakes.
Zobraziť celý obrázok

Zachytiť následné efekty úpravy

Zvážte zvukový efekt načasovaný na konkrétnu frázu. Ak túto frázu prepíšete, jej inštrukcia na časovanie už nemusí dávať zmysel. V Gambite je priama úprava skriptu, ktorá preruší toto spojenie, zastavená so žiadosťou o revíziu slov a zvukového podnetu spoločne prostredníctvom chatu.

Toto je malá kontrola s praktickým účelom. Zachytí nezhodu, ktorá by sa inak mohla dostať až do fázy nahrávania. Písací model môže pomôcť nájsť lepší riadok; okolitý softvér kontroluje, či má zvukový podnet v scenári stále platné miesto.

Vytvorte obrázky okolo výkonu

Hovorená scéna má svoje vlastné tempo. Herec môže pred odhalením pauzovať alebo zotrvať pri posledných slovách. Obrázky potrebujú priestor, aby nasledovali tento výkon.

Storyboard v Gambit dokáže využiť namerané časovanie vygenerovaného zvuku spolu s referenciami postáv a prostredia. Jeho kontroly zahŕňajú aj to, či plánované zábery pokrývajú zvukovú časovú os. To dáva vizuálnej sekvencii konkrétny základ: výkon, ktorý publikum skutočne bude počuť.

Pracovný priestor Gambit storyboard zobrazujúci plán scény a ilustrované zábery pre The Eighth Wakes.
Zobraziť celý obrázok

Vedieť, čo schvaľujete

Pri produkcii sú diskusia o ďalšom zábere a rezervácia nahrávacieho štúdia samostatné rozhodnutia. Gambit robí podobný rozdiel medzi rozvíjaním nápadu a generovaním platených médií. Pred spustením generovania skontrolujete cenovú ponuku a systém skontroluje, či schválenie stále zodpovedá požadovanej práci.

Zmena scenára po jeho nahraní môže znamenať vytvorenie nového audia. Zmena scény môže znamenať vygenerovanie ďalšieho obrázka. Tieto akcie môžu spotrebovať viac žetónov. Uložené verzie pomáhajú sledovať výsledky, zatiaľ čo krok schválenia vám dáva šancu rozhodnúť sa, či ďalšia generácia stojí za to.

Kam zapadajú ChatGPT a Claude?

ChatGPT a Claude sú užitočné miesta na rozvoj príbehu. Môžu vám pomôcť preskúmať predpoklad, spochybniť motiváciu postavy a revidovať náročnú pasáž. Obe tiež ponúkajú spôsoby, ako organizovať prebiehajúcu prácu.

Projekty ChatGPT spájajú chaty, súbory a pokyny. Nástroje ako Canvas vám umožňujú pracovať na návrhu popri konverzácii. Projekty Claude poskytujú zdieľaný referenčný materiál a pokyny k projektu, zatiaľ čo Artifacts vám dávajú samostatnú plochu na prácu, ktorú môžete upravovať a vracať sa k nej.

Gambit je organizovaný okolo konkrétneho výrobného procesu. Poskytuje scenár, referencie postáv, hlasovú réžiu a časovaný storyboard na definovaných miestach v projekte, pričom ich spájajú nástroje a kontroly. Svoj čas môžete stráviť rozvíjaním príbehu v rámci tohto procesu.

Výber pracovného postupu pre váš príbeh

Výber pracovného postupu pre váš príbeh: ChatGPT and Claude compared with Gambit
Vaša úlohaChatGPT a ClaudeGambit
Rozviňte nápadDiskutujte o možnostiach, preskúmajte pozadie a pracujte na zápletke.Rozviňte nápad do osnovy príbehu, ktorú môžete skontrolovať a upraviť.
Sledujte prácuUsporiadajte referenčný materiál, pokyny a koncepty pomocou nástrojov projektu produktu.Pracujte s uloženými fázami príbehu a vybranými výstupmi použitými v neskorších fázach.
Upraviť scénuPožiadajte o spätnú väzbu alebo upravte text v podporovanom pracovnom priestore dokumentu.Upravte scenár s kontrolou prepojení, ako sú zvukové signály viazané na dialógy.
Pridajte zvuk a obrázkyUsporiadajte pracovný postup pomocou dostupných nástrojov a akýchkoľvek iných služieb, ktoré si vyberiete.Postupujte podľa vstavaného procesu pre smerovanie hlasu, zvukové referencie a časovaný storyboard.
Ide o rozdiely v pracovnom postupe. Dostupné funkcie sa líšia podľa produktu a plánu; aktuálne podrobnosti nájdete v oficiálnych príručkách vyššie.

Všeobecný asistent môže presne zapadnúť do procesu písania, ktorý vás už baví. Gambit je užitočný, keď chcete, aby písanie, výkon a vizuálne plánovanie zdieľali jeden pracovný priestor. Využíva podporované modely umelej inteligencie a mediálne služby, pričom softvér Fable koordinuje príbeh medzi nimi.

Stále vy rozhodujete, čo robí príbeh dobrým

Dobre vedená filmová produkcia dokáže udržať natáčanie podľa plánu a zábery v poriadku. Režisér sa stále musí rozhodnúť, či výkon pôsobí správne. Rovnaký limit platí aj tu. Softvér môže skontrolovať, či zvukový signál ukazuje na platné slová alebo či zábery pokrývajú nahrávku. Či vtip vyjde, postava pôsobí uveriteľne alebo koniec vo vás zostane, je kreatívny úsudok.

Modely môžu prehliadnuť detaily, nástroje môžu zlyhať a technicky platný výsledok vás môže stále sklamať. Hodnota postroja spočíva v tom, že uľahčuje kontrolu a revíziu práce. Dáva vám spôsob, ako konať na základe rozhodnutia, ako napríklad „ponechať túto verziu postavy, ale skúsiť scénu znova“.

To je zážitok, ktorý budujeme s Gambit. Môžete prebrať nápad, vytvarovať každú časť príbehu a kontrolovať výsledky počas tvorby. Ak si radšej vyberiete postavu a necháte Fable, aby sa postaral o tvorbu, Fable Go ponúka túto jednoduchšiu cestu. Gambit vám dáva priestor riadiť detaily.

Časté otázky

Je agent harness to isté ako prompt?

Námet povie modelu, čo chcete, a poskytne kontext. Postroj je softvér, ktorý doručuje tieto pokyny, spúšťa nástroje, ukladá pokrok a kontroluje výsledky. Počas jednej úlohy môže použiť mnoho námety.

Umožňuje postroj AI zapamätať si všetko?

Postroj môže uložiť informácie o projekte a priniesť relevantné časti do neskorších požiadaviek. Model má stále limity v tom, koľko informácií dokáže naraz použiť, a môže detail prehliadnuť alebo nesprávne interpretovať. Uložená práca mu poskytuje lepší východiskový bod.

Je Gambit AI model?

Gambit je pracovný priestor na príbehy, ktorý využíva modely AI a mediálne služby. Fable harness ich spája so scenárom projektu, hlasmi, umeleckými dielami, nástrojmi a kontrolnými krokmi.