只問一個 AI,你得到的答案聽起來總是很有把握:結構清楚,有推理也有數字。問題在於,你沒有任何可以拿來比較的東西,而這正是造成錯誤確定感的原因。
所以我做了一個簡單的測試:把同一個問題同時丟給四個模型,分別是 GPT-5.6 Sol、Claude Sonnet 5、Gemini 3.6 Flash 和 Grok 4.6,然後並排閱讀它們的回答。以下是結果。
第一個問題:應該投入多少錢在加密貨幣上
我刻意挑了一個有實際風險的問題,數字錯了就會賠錢。在大方向上,四個模型的看法一致:這取決於你的個人狀況、市場波動很大、你可能會全部賠光、不要用借來的錢、要諮詢專業人士。
到目前為止,意見完全一致。差異出現在數字上。
應該配置多少比例的資金:
- Claude Sonnet 5 建議風險承受度高的人配置 5–10%
- Grok、Gemini 和 GPT 建議 1–5%,其中 GPT 允許風險承受度非常高的人最多到 10%
市場可能下跌多少:
- GPT-5.6 Sol 提到可能出現 50–80% 的回檔
- Claude 和 Gemini 描述的是短期內常見的 20–50% 波動
- Grok 描述了大型的週期,但沒有給出確切的百分比範圍
請在這些數字上停一下。如果你只問了一個模型,你就只會帶著一個數字離開,並把它當成事實。「配置 1%」和「配置 10%」之間相差十倍。「可能下跌 20%」和「可能下跌 80%」之間的差距,會完全改變你準備的方式。
它們都沒有說謊。每個模型的訓練方式不同,權衡事情的方式也不同。但放在一起看,這些數字告訴你一件單一答案無法告訴你的事:根本沒有唯一正確的數字,只有一個連專家都意見分歧的範圍。
讀過四個回答的最終綜合分析也正是這麼說的:這些數字只是參考,並非保證,稅務細節則需要向會計師確認。這不是判決,而是一張不確定性的地圖。
第二個問題:沒有廣告預算,如何讓新網站在 Google 上成長
這個問題不涉及金錢,只涉及時間。我選它是因為這是很多人都會搜尋的實際問題。
同樣地,在基本原則上大家意見一致:自然搜尋最佳化(SEO)、網站速度快、行動裝置優先、HTTPS、網站地圖、Search Console、符合真實搜尋意圖的內容、自然獲得的反向連結,以及以月為單位的耐心。
而這一次,有趣的部分同樣在差異上,其中一項還是直接的矛盾:
Claude、Gemini 和 Grok 建議在 Search Console 中為重要的頁面手動要求建立索引。 GPT-5.6 Sol 則明確表示,沒有必要為每篇文章手動要求建立索引。
三比一。但「三比一」不代表那三個就一定是對的,而是代表你碰到了一個實務做法有分歧的地方,值得在做選擇之前先查清楚。
較小的差異:
- 文章長度: Claude 建議寫內容充實的文章,1500 字以上。其他模型則強調相關性,沒有固定的門檻。
- 詳細程度: GPT 和 Grok 給出了逐步的 90 天計畫。Claude 和 Gemini 則給出較短的最佳做法清單。
- 頁面速度: Gemini 給出了具體的目標,低於 2–3 秒。其他模型只說「提升速度」。
兩次測試讓我學到的事
共識不等於證據。 當四個模型說的都一樣時,很容易把它當成確認。但模型可能會以同樣的方式出錯,特別是在會變動的事情上,例如法規或稅務規定。在兩次測試中,綜合分析都特別指出了這一點:模型之間意見一致,並不代表資訊已經過查證。
分歧告訴你該往哪裡深挖。 比較中最有價值的部分,不是模型意見一致的地方,而是它們不一致的地方。那幾乎總是主題比表面上更複雜的地方,或是取決於情境的地方。
從單一答案中取得的單一數字,是有風險的。 不是因為模型在說謊,而是因為你看不到真正的範圍有多寬。
我是怎麼進行測試的
我使用的是 MultiAI Chat 的 AI Council 模式:同一個問題會同時送給選定的模型,回答會並排顯示,接著由一個綜合分析層進行比較,整理出它們共同支持的觀點、彼此的差異、需要查證的內容,以及合理的下一步。綜合分析不會宣布贏家,也不會自行加入資訊,只會比較模型說了什麼。
為了說清楚,有兩點需要注意:這些測試是在特定日期、用當時可用的模型版本進行的。AI 的回答每次執行都會有所不同,所以重複測試不會得到一字不差的結果。此外,本文不包含任何投資建議,我只是描述模型的回答,而它們共同的結論本來就是要諮詢專業人士。
結論
一個 AI 的回答能給你一個方向。四個回答放在一起讀,能讓你看出這個方向有多可靠,以及在做決定之前,哪些地方應該看得更仔細。
想自己比較看看嗎?請參考 ChatGPT vs Claude vs Gemini vs Grok:你應該用哪一個?