什麼是代理人框架? | Fable 部落格

走進 Fable 產品與 AI

什麼是代理人框架?

透過製作故事嘅過程,解釋點樣利用軟件幫助 AI 喺唔同步驟之間延續項目。

電影始於一個構思。製作電影需要一個團隊:編劇塑造劇本,演員賦予角色聲音,剪接師將錄音整合埋一齊。要令呢啲工作變成一個連貫嘅故事,每個人都需要知道已經決定咗乜嘢,同埋接下來會發生乜嘢。

一個 AI 項目都需要呢種協調。模型可以幫手寫場景或規劃插圖。圍繞住佢嘅應用程式必須提供正確嘅草稿、運行工具、儲存結果並推動項目進行。處理呢啲責任嘅軟件通常被稱為代理程式框架(Agent harness)。

我們為 Gambit 建立了一個系統,因為創作故事涉及需要保持連結的決策:角色說什麼、他們如何說,以及觀眾在那個時刻看到什麼。這個架構有助於在整個創作過程中貫徹這些決策,即使在您改變主意時也是如此。

當佢係模型周圍嘅製作團隊

在電影拍攝現場,像「我們再試一次那個場景」這樣的請求會啟動幾件事。演員需要最新的劇本,劇組準備拍攝,並且有人記錄選擇了哪一個鏡頭。Harness 對 AI 系統來說扮演著類似的組織角色。它將提議的動作與執行該動作所需的實際工作連結起來。

模型生成回應並提出行動。框架管理圍繞這些行動的工具、資訊與限制。它們共同組成一個代理(agent):一個在多個步驟中朝目標努力的系統。術語在不同產品間有所差異,但這些職責是理解正在發生什麼的有效方式。

一個請求,多個相關步驟 模型 + 工具 + 已儲存嘅作品
  1. 01

    收集背景資訊

    載入請求、相關草稿和已做出的決定。

  2. 02

    選擇一個行動

    模型提出編輯建議、使用的工具或詢問的問題。

  3. 03

    執行

    執行允許嘅操作,並喺需要時請求你嘅批准。

  4. 04

    檢查結果

    驗證並儲存輸出,然後用它來引導下一步。

隨著任務的發展,這個循環可以重複。如果工具報告了問題,系統可以使用該信息嘗試不同的方法或尋求幫助。提示詞為此過程提供了指令;而框架則提供了實際運行它的軟件。

當工作跨越唔同階段進行時,同樣嘅原則亦好重要。Anthropic 關於長期運行代理嘅研究,描述咗清晰進度記錄同已儲存工作嘅價值,令下一個階段可以接續落去。一個項目需要可靠嘅歷史記錄,即使模型無法喺當前上下文入面保存整個過程。

當你製作故事時這意味著什麼

在 Gambit 中,你可以從一個粗略的想法開始,透過對話進行發展。你可以要求更具說服力的反派、更溫和的結局,或是聽起來不那麼正式的對話。隨著故事成形,這個架構為對話提供了發展方向:一個可編輯的計劃、劇本、音訊指導和分鏡腳本。

保持一個大家都可以參考嘅工作劇本

製作團隊需要知道佢哋正喺度處理邊個劇本。Gambit 將故事嘅主要部分分開儲存:藍圖設定方向,劇本包含對話同表演指示,而「演員與世界」則保存視覺參考。後期步驟會參考相關嘅已儲存素材,包括區分已批准版本同仍在修訂嘅草稿。

你可以直接檢查項目嘅呢啲部分。咁樣可以令你更容易睇到你已經同意咗咩、仲有咩需要修改,以及下一個階段會用到咩內容。

Gambit 的劇本工作區,包含《The Eighth Wakes》的角色對話、演繹說明和聲音提示。
睇完整圖片

捕捉編輯後的連鎖反應

考慮將音效與特定短語同步。如果你重寫該短語,其計時指令可能不再合理。在 Gambit 中,會停止直接破壞此連結的腳本編輯,並要求透過聊天同時修改文字和聲音提示。

呢個係一個有實際用途嘅小檢查。佢可以捕捉到可能喺錄音階段先發現嘅不匹配問題。寫作模型可以幫手搵到更好嘅對白;周邊軟件會檢查音效提示喺劇本中係咪仲有合適嘅位置。

圍繞表演構建圖片

一個口述場景有其自身的節奏。演員可能會在揭露真相前停頓,或在最後的字句上徘徊。圖片需要空間來配合這種表演。

Gambit 的分鏡腳本可以利用生成音訊的測量時間,以及角色和場景參考。其檢查功能包括計畫的鏡頭是否涵蓋音訊時間軸。這為視覺序列提供了具體的基礎:觀眾實際聽到的表演。

顯示《The Eighth Wakes》場景計畫和插圖鏡頭的 Gambit 分鏡工作區。
睇完整圖片

知道你批准緊咩

在製作過程中,討論另一個鏡頭和預訂錄音時段是分開的決定。Gambit 在開發構想和生成付費媒體之間做了類似的區分。您會在生成執行前審核報價,系統會檢查核准內容是否仍與所請求的工作相符。

在錄製後更改腳本可能意味著需要製作新的音訊。更改場景可能意味著需要生成另一張圖片。這些操作可能會消耗更多代幣。儲存的版本有助於追蹤結果,而批准步驟則讓你能夠決定下一次生成是否值得進行。

ChatGPT 和 Claude 的定位是什麼?

ChatGPT 和 Claude 是開發故事的實用場所。它們可以幫助你探索前提、質疑角色的動機並修改困難的段落。兩者也都提供了組織持續工作的方法。

ChatGPT Projects 將對話、檔案和指令整合在一起。像 Canvas 這樣的工具讓你可以在對話的同時處理草稿。Claude Projects 提供共享的參考資料和專案指令,而 Artifacts 則為你提供了一個可以編輯和返回工作的獨立介面。

Gambit 是圍繞特定的製作流程組織的。它為劇本、角色參考、聲音指導和定時分鏡腳本在專案中提供了明確的位置,並透過工具和檢查機制將它們連接起來。你可以花時間在該流程內發展故事。

為你的故事選擇創作流程

為你的故事選擇創作流程: ChatGPT and Claude compared with Gambit
你嘅任務ChatGPT 與 ClaudeGambit
發展構思討論可能性、研究背景並構思情節。將構思發展成故事藍圖,方便你審閱及修改。
追蹤工作進度使用產品嘅專案工具整理參考資料、說明同草稿。使用已儲存的故事階段以及後續階段使用的選定輸出。
修改場景在支援的文件工作區中請求回饋或編輯文字。修改劇本,並檢查連接位,例如與對話相關嘅音效提示。
加入聲音同圖片利用現有的工具和你選擇的任何其他服務來安排工作流程。遵循內置嘅流程進行聲音指導、音訊、視覺參考同定時分鏡。
呢啲係工作流程上嘅差異。可用功能因產品同計劃而異;請參閱上方官方指南以獲取最新詳情。

一個通用助手可以完美融入你已經鍾意嘅寫作流程。當你想將寫作、表演同視覺規劃共享同一個工作空間時,Gambit 就好有用。佢使用受支援嘅 AI 模型同媒體服務,並由 Fable 嘅軟件協調佢哋之間嘅故事。

你依然係決定故事好唔好睇嘅話事人

一部運作良好的電影製作可以保持拍攝進度並整理好素材。導演仍然必須決定表演是否感覺正確。同樣的限制也適用於這裡。軟體可以檢查聲音提示是否指向有效的單字,或者鏡頭是否涵蓋了錄音。笑話是否好笑、角色是否可信或結局是否令人難忘,這是一種創意判斷。

模型可能會遺漏細節,工具可能會失效,技術上有效的結果仍可能讓你失望。框架的價值在於讓工作更容易檢查和修改。它讓你能夠根據決定採取行動,例如「保留這個版本的角色,但重新嘗試這個場景」。

這就是我們用 Gambit 構建的體驗。你可以討論一個想法,塑造故事的每個部分,並在過程中審查結果。如果你更願意選擇一個角色並讓 Fable 處理創作,Fable Go 提供了更簡單的路徑。Gambit 則讓你能夠掌控細節。

常見問題

代理人指令(agent harness)和提示詞(prompt)是一樣的嗎?

提示詞話畀模型知你想要咩並提供背景資訊。Harness 係傳遞呢啲指令、運行工具、儲存進度並檢查結果嘅軟件。佢可以喺單一任務中多次使用提示詞。

Harness 能讓 AI 記住所有事情嗎?

安全帶可以保存項目資訊,並將相關部分帶入後續嘅請求入面。模型喺一次可以使用嘅資訊量上仍然有限制,而且可能會忽略或誤解細節。保存嘅工作可以為佢提供一個更好嘅起點。

Gambit 是 AI 模型嗎?

Gambit 是一個使用 AI 模型和媒體服務的故事工作區。Fable 的架構將它們連接到專案的劇本、聲音、藝術作品、工具和審核步驟。