案例研究 03 · 代理治理

WAGF

水資源代理治理框架(Water Agent Governance Framework),在 LLM 代理決策更新人類—水系統模擬之前進行檢查。此框架尚未公開釋出。

  • 結構化決策契約
  • 實體 + 財務 + 行為檢查
  • 確定性稽核軌跡

為何此問題重要

語法上有效的行動,仍可能違反物理限制、家戶財務、行為理論或當前的模擬狀態。

我如何處理

我設計了上下文建構器、結構化決策綱要、解析器、驗證器、針對性修正迴圈、稽核紀錄以及模擬狀態邊界。

帶來什麼貢獻

當每個決策都揭露了提案、失敗的規則、允許的修正以及確切的狀態轉換時,治理才能最為清晰。

此治理模式可轉移至任何具備狀態的代理系統,在執行前行動必須滿足明確的限制並留下稽核軌跡。

系統產出

檢視研究邏輯

公開的治理軌跡是控制流的靜態展示。它並未呼叫即時模型,也不是已發布的產品基準測試。

決策觀測站

證據進場,決策全程可檢視。

合成示例

已拒絕・狀態未變

保護室內財物
protect-contents
提案所需資源
9
可用資源
6
財物保護
尚未套用
  • 格式: 通過
  • 權限: 通過
  • 資源: 未通過

要求 9 單位,可用 6 單位;只需修正資源欄位。

資源代幣僅供示意,並非貨幣。

互動操作需要 JavaScript;完整流程與來源仍列於下方。

評估

  1. 人類證據

    以實測構念與自陳選擇建立經驗基準。

    已出版證據
  2. 決策情境

    無標籤的合成人物設定只帶入核准的屬性。

    示意範例
  3. LLM 提案

    重複執行模型,取得可比較的選擇與簡短理由。

    示意範例
  4. 驗證/修正

    比較方向、群體差異與執行穩定性,不公開個別受訪者資料。

    公開成果
  5. 系統後果

    產出是有邊界的評估結果,不是模型足以代表真人的宣稱。

    示意範例
查看完整案例

治理

  1. 人類證據

    行為與物理限制界定合理行動必須遵守的條件。

    已出版證據
  2. 決策情境

    合成代理狀態限制模型可提出的行動範圍。

    示意範例
  3. LLM 提案

    LLM 只回傳結構化提案,不能直接修改模擬狀態。

    示意範例
  4. 驗證/修正

    驗證器拒絕無效欄位、要求針對性修正,並保留稽核軌跡。

    公開成果
  5. 系統後果

    只有通過驗證的提案才能更新耦合模型。

    示意範例
查看完整案例

模擬

  1. 人類證據

    調查證據與公開洪災資料共同建立行為基礎。

    已出版證據
  2. 決策情境

    居住權屬、風險知覺、資源與暴露形成決策情境。

    已出版證據
  3. 代理決策

    代理在限制下選擇調適、保險或不採取行動。

    公開成果
  4. 驗證/修正

    模型檢查行為、財務與物理狀態轉移是否一致。

    公開成果
  5. 系統後果

    洪災損失與調適會改變下一輪的家戶與環境狀態。

    已出版證據
查看完整案例
研究脈絡與方法

靜態展示 · 無即時模型呼叫

  1. 提案行動
  2. 解析器
  3. 實體檢查
  4. 財務檢查
  5. 行為檢查
  6. 稽核紀錄
  7. 狀態更新
已阻擋

已拒絕:成本超出家戶可用預算

方法細節

  1. 從核可的人物設定與模擬狀態中建構脈絡。
  2. 要求結構化的行動與評分。
  3. 在任何狀態改變前進行解析。
  4. 執行物理、財務與行為理論檢查。
  5. 接受、拒絕或要求針對性修正。
  6. 寫入軌跡,僅在行動被接受後更新狀態。

驗證與限制

驗證

  • 綱要驗證
  • 預設阻擋的解析器邊界 (Fail-closed parser boundary)
  • 具名的規則結果
  • 確定性展示軌跡
  • 狀態更新發生在接受之後

限制

  • 已宣告的規則無法涵蓋所有失敗模式。
  • 修正可能滿足規則但仍產生脆弱的決策。
  • 展示紀錄僅供說明,並非研究結果。

證據切片

從問題追到後果

01問題
未受約束的 LLM 提案可能造成不可能的財務或物理狀態變化。
02我的角色
我設計提案結構、驗證順序、針對性修正與稽核紀錄。
03輸入
合成家戶狀態、行動目錄,以及明確的行為、財務與物理限制。
04決策
模型以型別化參數提出行動,但不能寫入狀態。
05驗證
負擔能力檢查失敗時阻擋更新,只修正無效欄位,再重跑全部驗證。
06後果
通過的提案連同輸入、失敗、修正與最終更新的完整軌跡一起提交。

來源相關公開 FLOODABM 程式庫

聯絡方式

建立將模型行為與真實證據連結的評估

對 AI 決策評估或具證據鏈的科研系統有興趣?歡迎交流研究與開源合作,也可洽談 2027 年暑期實習機會。

了解我的研究歷程