為什麼 ChatGPT 比 Hermes 快？AI 算數、畫圖和影片的差距在哪裡？

感謝你用心的提問！差距大多不在大語言模型本身，新聞裡那些成果背後有專用模型，專用資料和整個團隊，還經過大量篩選，你手上則是一個通用模型直接上場，投入的時間與人力無法相比。

新藥研發那類成果，用的多半是專門拿蛋白質或分子資料訓練的模型，例如 AlphaFold，還要配上累積幾十年的實驗資料庫，最後再進實驗室驗證，跟我們聊天用的語言模型是不同的工具。AI 短影片也一樣，靠的是影片生成模型，再加上人工挑片，剪輯和配樂，你看到的那一支背後通常生了很多次才挑出來。

你遇到的狀況我不了解，但我猜測看看：

數據比較：語言模型是用「讀」的方式在看數字，很容易算錯或漏掉。請它寫程式或用試算表計算，再附上算式讓你核對，準確度會差很多。ChatGPT 有時比較準，很可能就是因為它自動跑了程式在算。

畫圖和影片：語言模型本身不會畫，它是去呼叫生圖或生影片的模型。做不出來的時候，先看有沒有接到這類模型。語言模型比較適合負責寫提示詞，分鏡和檢查。

這就是 C0-1 提到 Ethan Mollick 說的鋸齒邊界，AI 有些事強到嚇人，有些事又會突然出包，而且很難事先猜到，所以要先測過，不要直接假設它每件事都可靠。

至於 ChatGPT 比 Hermes 好又快，這很正常。

ChatGPT 是 OpenAI 自己調好的完整產品，跑程式，生圖和搜尋都內建，單次問答當然順，而且他會把 Hermes 優點學習過去。

Hermes 是一個 Agent，品質主要看你接的是哪個模型，思考強度開多少，對話累積多長，開了多少工具。它還要多做讀檔和選工具的步驟，所以單次會比較慢。

現在比較實際的分法是，我會把大部分工作交給 ChatGPT ，只有 ChatGPT 做不到的才交給 Hermes，但實際上 ChatGPT 做不到的事情非常少。