Skip to content

沒有公開投影片時,如何讀 Agentic Interpretability|Stanford CS224N 第 15 堂

2026年8月22日1 分鐘
TL;DR第 15 講由 Been Kim 客座談 interpretability,但 Winter 2026 官網沒有公開投影片或 agenda;本文不虛構講授內容,只用官方五篇閱讀建立概念發現、agentic investigation 與新詞彙三條閱讀路線。

🌏 English version

影片狀態:錄影需登入或課程授權。 影片來源與說明

CS224N Winter 2026 官方課表確認第 15 個正規單元在 2026 年 2 月 24 日由 Been Kim 客座主講,官方題名只有 Guest Lecture: Interpretability。這一講和前十四講不同:課程頁沒有公開 Winter 2026 投影片,也沒有列 agenda,只列五篇 suggested readings。

因此這篇不能忠實重建「講了什麼」。以下是官方閱讀清單能支持的閱讀導圖,目的在保存系列位置與材料邊界,不把論文內容冒充課堂內容。

路線一:從解釋答案改成能持續調查的 agent

官方首先列出 Because we have LLMs, we Can and Should Pursue Agentic Interpretability。這條路把 interpretability 從單次視覺化或 feature attribution,推向能提出假設、設計 probe、呼叫分析工具並累積證據的調查流程。

Agentic 不等於可信。調查 agent 的每一步仍需要可追蹤輸入、工具輸出、反例與停止條件;若只讓模型自己解釋自己,再由同一模型評分,容易形成封閉的自我確認。

路線二:從模型內部轉向人的概念

The Pareto Frontier of Human-Centered AI 與 AlphaZero concept discovery 論文把焦點放在人與模型如何交換概念。後者研究從模型中發現概念,再把它們傳遞給人;問題不只是某個 neuron 是否啟動,而是找到的概念能否被人理解、使用,並改善後續判斷。

這帶出多目標取捨:預測效能、人的理解、介入成本與可行動性未必同時最大。解釋若精準但沒有人能用,或很直覺卻沒有 fidelity,都不能只用「可解釋」三字概括。

路線三:現有詞彙可能不夠

We Can't Understand AI Using our Existing Vocabulary 與 Neologism Learning for Controllability and Self-Verbalization探索一個更激進的問題:模型內部可能存在現成人類詞彙無法命名的規律。Concept bottleneck 若只允許既有標籤,可能把未知結構硬塞進熟悉分類。

Neologism learning 嘗試學習新概念 token,讓模型能引用、控制或自我表述那些模式。驗證不能只看新詞聽起來合理;要測它是否穩定對應可重現行為、能跨例子泛化,且介入後產生預期變化。

本講可確認與不可確認的範圍

可確認的是日期、講者、題名與五篇官方閱讀。不可確認的是講者實際 agenda、採用哪些投影片、論文涵蓋比例、現場案例與結論。官網 HTML 裡出現一條被註解掉的舊學期 slide link,並非 Winter 2026 公開材料,本文沒有使用。若官方之後補上投影片,這篇才應升級成逐段 lecture review。

課程影片來源

已即時查核 CS224N 官方課程頁:Winter 2026 課堂錄影放在 Canvas(需登入),官方說明無法開放給非修課者,Canvas 入口實際導向 Stanford 登入頁。官方指向的公開錄影只有 2024 年版播放清單,沒有 Winter 2026 的公開錄影;其中找不到與本講標題對應的講次,因此不嵌入影片,也不以其他年份影片冒充當期錄影。

課程與錄影入口:

查核日期:2026-10-10。

更新紀錄

  • 2026-10-10:標註影片狀態,核對錄影來源與取得方式。
  • 2026-10-10:重查影片狀態。即時確認 Winter 2026 錄影需登入、公開錄影僅 2024 年版且無對應講次,維持原狀態並補上查核日期。

參考資料