問:付費版 AI 給的答案讓我很沒信心,一直懷疑它對不對。是我指令下得不好嗎?可以改善嗎?會不會是我常常跟他講一些模糊或錯誤的要求,導致他被訓練差了?

答:(蔡依橙)

如何正確使用 AI?

「把 AI 訓練差了」,這個不用擔心。其實 AI 沒有那麼脆弱。如果你真的很擔心,就跟它說「忘掉所有我說過的話,用你本來的狀態回答我」,它就會重設了。或者進到設定裡把你認為不希望他記得的記憶,選起來刪除,也可以。

AI 是一個非常勤奮、工作迅速的小助理,但它沒辦法當指導老師。它接收你的問題,根據你的問題回答,不會主動往後退一步,用更高的視野去檢驗「你的問題」本身有沒有問題。

所以當你問它搜尋策略、問它統計方法,它給的答案讓你沒把握,根本原因往往是:你還不確定正確答案長什麼樣子。這不是 AI 的錯,也不是你指令下得不好,而是這類問題本來就需要你先知道標準是什麼,才判斷得了它說的對不對。

用 AI 就是這樣。知道正確答案,或至少知道方向,它幫你快速執行;不知道正確答案,連方向自己都不太確定,它做出東西來,你也沒辦法驗收。

進階用法是 AI Agent,但門檻更高

現在 99% 的人用 AI,都是問答模式:你問,它答。進階一點的做法是 AI Agent,也就是幫它設定一整個工作小隊:一個負責生成搜尋策略,另一個負責質疑跟審查,審查有評分表,低於多少分就打回去重做,一直到符合標準才交給你。

這個方法在概念上是對的,但有一個根本的前提:你要先知道正確答案是什麼,才有辦法定義評分標準。如果你不知道一個好的搜尋策略長什麼樣,它做出來一個東西,你還是驗收不了。

統計的部分更明顯。AI Agent 解決統計問題,不是幫你操作 MedCalc,它會自己裝 R、自己搜尋統計方法、自己跑完。但它跑出結果,你看不懂、也不知道對不對,甚至無法揪錯,那這個工具對你來說意義還是有限。

所以,「知道什麼是正確的」這件事,比「讓 AI 說出正確的」更重要。

建議的作法

我的建議是:用我們課程的指定論文、互動實作跟回家作業的內容當標準,遇到 AI 給的答案,就拿這些東西去對照。指定論文的脈絡跟內容,都是為了讓同學能夠複製跟應用而規劃的,是最可靠的對照基準。

畢竟,指定論文登上了 6 分左右的 SCI 期刊。