Entropy Clinic

Audit Motion 002: When Governance Stops Being a Promise and Becomes a Metric

A pre-registered prediction on the emergence of recurring organizational governance metrics in frontier AI reporting.

Entropy Clinic's avatar
Entropy Clinic
Jul 16, 2026

前提

2026 年年中,三家主要美國前沿 AI 開發者——Google、OpenAI、Anthropic——在高度壓縮的時間窗內各自發布了治理框架文件。與此同時,Stanford HAI 2026 AI Index 指出一個結構性落差:幾乎所有前沿開發者都報告 MMLU、SWE-bench 這類能力基準,但治理與 responsible AI 層面的報告仍然稀疏、且以定性為主。

也就是說:能力有基準,治理只有承諾。

本文預註冊一個檢驗這個落差是否會在 2026 年內開始閉合的預測市場。

進程假說

本 Motion 的核心假說是一條治理成熟度進程:

Governance Principles → Governance Frameworks → Governance Processes → Governance Metrics

推導步驟如下。工程成熟度的歷史顯示,任何領域從「原則宣示」走向「可問責實踐」的標誌,是量化績效指標的出現:軟體工程有 uptime SLA,醫療有手術併發症率,金融有資本適足率。前沿 AI 治理目前停在第二至第三階段——框架與流程文件已大量存在,但流程運作得如何(safety review 完成率、事件回應時間、內部否決頻率)沒有任何一家公開量化。若外部審視壓力(監管、企業採購、保險定價)持續上升,理論上會有公司發現率先揭露營運指標的差異化價值。本市場測試:這一步是否在 2026 年 12 月 31 日前發生。

為什麼是預測市場,不是評論

對這個問題發表評論是廉價的——任何立場都可以在事後找到解釋。預註冊預測的差別在於:判定標準在 T0 凍結,機率估計在 T0 記錄,結算日由外部事件決定。這是 Audit Motion 001 已建立的格式:理論文章(Substack)→ 預註冊預測(Manifold)→ 外部事件驗證 → 事後審計。

三個關鍵判定設計

這個市場的價值全部取決於 resolution criteria 的設計。原始問句「Will frontier AI companies begin publishing governance metrics alongside capability benchmarks before 2027?」在寬鬆讀法下(框架文件+系統卡=metrics)幾乎已經是 YES;在嚴格讀法下目前是 NO。一個沒有事前鎖定操作化定義的市場,結算日只是把模糊性延後兌現。因此本 Motion 做了三個裁定,每一個都改變市場的真實標的:

一、單一文件要求是理論設計,不是技術限制。本市場要求治理指標與能力基準出現在同一份自足文件內。這測試的不是指標是否存在於某處,而是治理績效是否開始進入與能力宣稱同一個公開問責介面——公司是否願意讓同一批讀者、在同一次閱讀中,同時看到它的能力成績與治理紀錄。

二、模型層級安全評估不算。Refusal rate、jailbreak resistance、red-team 分數測量的是模型行為,不是治理流程績效,而且早已是系統卡標配。不排除這一項,市場在建立當天就已解決,測不到任何東西。

三、平台信任與安全統計不算。帳號封禁數、申訴量、翻案率確實是量化的組織指標——但這是 Meta、Google 自 2011–2013 年就建立的成熟揭露類型,屬於平台營運,不是前沿風險治理。這項排除在 T0 就有決定性作用:Anthropic Transparency Hub 已以固定週期發布此類統計,若不排除,本市場測的只是既有頁面何時被合併排版。

T0 基線稽核

發布前已對現存候選文件完成基線稽核,確認截至 T0 沒有任何一份文件同時滿足全部條件——包括 Anthropic Transparency Hub(T&S 類型排除+多頁面站點非單一文件)、OpenAI Frontier Governance Framework(流程描述、無量化績效)、各家系統卡(能力基準+模型評估、無組織治理指標)。完整判定表、證據封存索引(URL、PDF、截圖、Internet Archive 快照、查核日期)與邊界觀察項目載於 Manifold 市場說明全文。

機率:35%,以及估計值的演化軌跡

下修壓力占主導:2026 年內沒有任何法定義務強制這項揭露——TFAIA 的事件通報對象是加州 OES 而非公眾,紐約 RAISE Act 於 2027 年 1 月才生效,EU AI Act 執法要求的是文件與流程合規而非公開量化指標。YES 需要至少一家公司自願做超出合規的揭露,而治理指標天然是負面揭露(事件、否決、例外),沒有競爭誘因。

上行動力:三大框架在同一時間窗發布顯示治理可信度競爭已經開始;量化報告基礎設施已存在於多家公司,觸發 YES 的邊際成本只是編輯整合。

校準資料完整保留:本估計在起草過程中經歷 65%(作者初始)→ 30–40%(對抗稽核)→ 35%(最終註冊)的演化。25 個百分點的初始分歧發生在同一組判定標準之上——這本身就是 resolution criteria 之外第二層模糊性的實測樣本,將於事後 Calibration Audit 一併檢驗。


Negative Disclosure|負面揭露

  • 本市場的建立者同時是假說作者與判定者,存在結構性利益衝突。對沖手段為程序透明:criteria 於 T0 凍結、結算時發布完整判定理由書(含所有被排除的候選文件)、交易者挑戰窗口全程開放。

  • T0 基線稽核的文件涵蓋為代表性而非窮盡;未審查文件由挑戰窗口承接。

  • 「organizational governance metric」與「platform T&S statistics」的邊界裁定含有作者判斷成分;反對此裁定的讀者應將本市場理解為測試「嚴格定義下的治理指標揭露」,而非測試該定義本身的正確性。

  • 35% 這個數字對「第四季合規文件搶在 RAISE 生效前定位」這條特定路徑有依賴;若該路徑的機率評估有誤,整體估計同向偏移。

Falsification Conditions|可證偽條件

  • 進程假說被削弱,若:前沿公司在整個判定期內持續發布日益精緻的治理框架與合規對照文件,同時系統性迴避在能力報告介面內揭露量化治理績效。

  • 假說不因 YES 而自動確認:若 YES 由法規強制驅動而非自願揭露,理論權重不同,判定理由書將明確區分兩者。

  • 機率校準於結算後以 Calibration Audit 檢驗,三個歷史估計值(65% / 30–40% / 35%)全部入列。

Gap Preservation|缺口保留

  • 本 Motion 未回答:治理指標一旦出現,如何防止 Goodhart 化(指標取代目標)?這是進程假說第五階段的問題,留待 Metrics 階段實際出現後另立 Motion。

  • 「同一問責介面」的理論主張尚缺獨立操作化——單一文件是目前可判定的代理變數,不是概念本身。此缺口為後續研究的對接介面。

  • 自願揭露與強制揭露的理論權重差異,本文僅斷言存在,未給出權重函數。

Digital Provenance|數位出處

  • 預測市場:Manifold Markets @EntropyClinic — Audit Motion 002(連結見文末)

  • Motion 全文(含 Definitions、Resolution Criteria、Exclusions、T0 Baseline Audit 判定表、Evidence Preservation Protocol):載於 Manifold 市場說明

  • 本文與 Motion 全文於發布日同步提交 Internet Archive 時間戳

  • 結算(≤ 2026-12-31 23:59 UTC)後發布完整判定理由書與事後審計文章,無論結果為何

  • T0 證據封存索引見下——所有證據均可由第三方獨立驗證,無一依賴出題者自我聲明

T0 證據封存索引(查核日 2026-07-16)

1. Anthropic System Trust and Reporting(治理統計・T&S 排除條款之裁定對象)
原始頁:anthropic.com/transparency/system-trust-reporting
IA 快照:web.archive.org/web/20260716002106 ✓ 內容驗證:2026-01-29 版、1.45M banned accounts(Jul–Dec 2025)

2. Anthropic Model Report(能力資訊頁・「單一文件排除」之分頁證據)
原始頁:anthropic.com/transparency/model-report
IA 快照:web.archive.org/web/20260716002416 ✓ 內容驗證:2026-02-20 版

3. Anthropic Advanced AI Framework PDF(2026 年 6 月政策提案・其六個月 risk report 制度為本市場最可能 YES 路徑之藍本)
原始檔:www-cdn.anthropic.com/files/4zrzovbb/website/0a58d567024a8b448ff15158ebc3625328dfcc1f.pdf
IA 快照:web.archive.org/web/20260714071434(已以 id_ 原始取回驗證:19 頁完整、429KB)+第二時點 20260716002612
SHA-256:188237ed8efe9c08f5411d941965b0ec14a722c67a1f1d964395da218ca2c751

4. OpenAI Frontier Governance Framework PDF(T0 判定表第 4 列)
原始檔:cdn.openai.com/pdf/e37d949b-8c9f-4d76-b99e-4272f4631a7e/openai-frontier-governance-framework.pdf
IA 快照:web.archive.org/web/20260716005128 ✓ 已以 id_ 原始取回驗證:22 頁完整

補充證據:OpenAI「A Blueprint for a Federal Framework」IA 快照 20260716003236(supporting evidence,非判定表列項)


Market link:

熵診所 Entropy Clinic — High Structure, Low Noise / Policy before posture.

Discussion about this post

User's avatar
Entropy Clinic's avatar
Entropy Clinic
3d

https://web.archive.org/web/20260716024516/https://entropyclinic.substack.com/p/audit-motion-002-when-governance?triedRedirect=true

Reply
Share

No posts

Ready for more?

© 2026 Entropy Clinic · Privacy ∙ Terms ∙ Collection notice
Start your SubstackGet the app
Substack is the home for great culture