最近許多用戶表示 ChatGPT - 4「變笨、變懶」,不僅理解能力下降,還會擺爛不回答問題。根據研究,許多模型在處理早期資料時之所以有優異表現,是受到「任務污染」,意為某些資料在 AI 訓練時已經「看過」了,導致閉源模型零樣本或少樣本的評估性能有誇大的可能。對大型模型來說,降智搞不好是共同命運,因重新訓練模型成本過高,而機器學習模型沒有持續學習能力,若無法適應變化將造成性能退化。
資料來源:technews.tw/2024/01/08/llms-become-dumb/
責任編輯:沈思妤(就讀於:政治大學 傳播碩士學位學程)