探索、RL 理論、多任務學習與開放問題｜Berkeley CS285 第 19–25 堂
最後七講從 exploration 與理論界線，經兩講期中複習，走到 advanced exploration、multi-task RL 與仍未解決的研究問題。
#cs285
6 篇文章CPU、GPU、H100 成本分界｜Berkeley CS285 主題單元
五份作業從 CPU 友善的 imitation learning 走到 H100 LLM RL 與六小時 offline RL runs；自學者應按成本分三階段，而非整套照搬。
模仿學習、分布偏移與 RL 基礎｜Berkeley CS285 第 1–4 堂
前四講從 behavioral cloning 走到 MDP；HW1 再用 MSE policy、DAgger 與 flow matching，讓分布偏移從概念變成可觀察的失敗。
從變分推論、LLM RL 到 Offline RL｜Berkeley CS285 第 11–18 堂
L11–18 把 control as inference、LLM RL、model-based RL 與 offline RL 接成一條主線，並用 HW4、HW5 呈現兩種高運算成本實作。
Policy Gradient、Actor-Critic、DQN 與 SAC｜Berkeley CS285 第 5–10 堂
L5–10 用 policy-based 與 value-based 兩條路建立深度 RL 核心；HW2 可用 CPU，HW3 的 Atari 與 HalfCheetah 則約需數小時 GPU。
深度強化學習：從決策概念到策略學習與實驗｜Berkeley CS285 課程總覽
Spring 2026 CS185/285 公開 25 講投影片、9 組討論課資料、5 份作業與 starter code；講課錄影已公開在 RAIL YouTube 頻道，但 Ed、Gradescope 與助教時間仍限修課生，HW4 預設 H100，不能把它包裝成零成本公開課。