用 AI 寫教材、當家教,研究測到什麼:內容錯誤率、人工把關、學生評分與家教實驗
讓 GPT-3.5 直接寫代數與統計的解題提示,32% 的題目答案和過程都錯;人工逐題篩過之後,學習效果和真人寫的提示分不出差異。AI 家教的隨機實驗有正有負:不設防的聊天機器人讓高中生考試變差,正向結果多半綁著逐題寫好的解答、老師在場或多出來的上課時間,而且沒有一個研究隔一段時間再考同樣的內容。
讓 GPT-3.5 直接寫代數與統計的解題提示,32% 的題目答案和過程都錯;人工逐題篩過之後,學習效果和真人寫的提示分不出差異。AI 家教的隨機實驗有正有負:不設防的聊天機器人讓高中生考試變差,正向結果多半綁著逐題寫好的解答、老師在場或多出來的上課時間,而且沒有一個研究隔一段時間再考同樣的內容。