Skip to content

MIT 6.S191 Lecture 7:AI 三法則:安全要落在可觀測與評估

2026年8月22日 1 分鐘
TL;DR 2026 第 7 講從 Asimov 的文學法則出發,討論現代 AI 安全協定的限制,以及 trace、測試資料與持續評估。
目錄
  1. 這一講要帶走什麼
  2. 建議觀看方式
  3. 今晚就能做的練習
  4. 這篇沒有涵蓋什麼
  5. 參考資料

🌏 English version

MIT 6.S191 2026 第 7 講是 AI 三法則:安全要落在可觀測與評估。從 Asimov 的文學法則出發,討論現代 AI 安全協定的限制,以及 trace、測試資料與持續評估。這篇只依 2026 官方投影片與影片整理;不把 2025 的同名內容混進來。

這一講要帶走什麼

  • 知道抽象安全原則不能直接變成系統保證
  • 把 observability 視為事後調查與改進的前提
  • 用固定測試集追蹤模型或 prompt 更新造成的退步

這些概念的共同點是:不能只會認名詞。你要能指出輸入、輸出、學習訊號與限制,才算真的接上後續內容。

安全原則要經過 policy、可觀測事件、測試案例與告警門檻,才會變成能執行的控制。trace 能回答系統做過什麼,固定 evaluation set 能回答新版是否退步;兩者仍無法證明所有未知情境都安全。

建議觀看方式

先快速看一遍官方投影片的章節與圖,再看官方影片。第二遍遇到公式或架構圖就暫停,用自己的符號重畫;影片播完後,不回看資料,寫下三個核心概念與一個仍不確定的地方。

今晚就能做的練習

替自己的 AI 功能保存十個代表案例、輸入輸出與版本;下一次更新後逐項重跑。

完成標準不是「看完」。你應留下可檢查的圖、計算、程式輸出或短筆記,並能向另一個人解釋其中一個失敗點。

這篇沒有涵蓋什麼

6.S191 是高強度入門課,本篇也只做單講導航,不替代完整影片、數學推導或正式作業回饋。若某個主題需要嚴格理論,應接一學期制課程或原始論文。

參考資料