欧美性啪啪_韩国av不卡_99国产精品免费观看视频re_日本在线中文_日韩毛片子_欧美福利在线观看_av美女在线播放_色偷偷偷_亚洲大片在线播放_曰韩在线_亚洲精品观看_国产午夜理论片不卡_三上悠亚一区二区三区在线_精品人伦一区二区三区四区蜜桃牛_国产精品久久久久久久久大全_日本人吃奶玩奶虐乳视频_99精品视频免费观看_日韩16p_欧日韩在线_av一区二区在线播放

(相關(guān)資料圖)

IT之家 9 月 7 日消息，斯坦福大學(xué)的一項(xiàng)新研究發(fā)現(xiàn)，熱門生成式人工智能（AI）聊天機(jī)器人 ChatGPT 的能力在幾個(gè)月內(nèi)有所波動。

斯坦福大學(xué)的團(tuán)隊(duì)評估了 ChatGPT 在幾個(gè)月內(nèi)如何處理不同的任務(wù)。他們發(fā)現(xiàn)，ChatGPT 的能力隨時(shí)間的推移而出現(xiàn)了不一致。目前，ChatGPT 有兩個(gè)版本 —— 免費(fèi)的 模型和更智能、更快速的付費(fèi) GPT-4 版本。 研究人員發(fā)現(xiàn)，GPT-4 在 3 月份能夠有效地解決數(shù)學(xué)問題，識別質(zhì)數(shù)的準(zhǔn)確率為 %。 三個(gè)月后，其準(zhǔn)確率下降到了 % 。而另一方面， 卻變得更好，從 % 的準(zhǔn)確率提高到了 %。

研究人員還注意到，在編寫代碼和視覺推理方面也有類似的波動。斯坦福大學(xué)計(jì)算機(jī)科學(xué)教授 James Zou 稱：“當(dāng)我們調(diào)整一個(gè)大型語言模型來提高它在某些任務(wù)上的表現(xiàn)時(shí)，那可能會有很多意想不到的后果，可能會損害這個(gè)模型在其他任務(wù)上的表現(xiàn)…… 這個(gè)模型回答問題的方式有各種各樣的相互依賴性，這可能導(dǎo)致我們觀察到的一些惡化行為。”

研究人員認(rèn)為，結(jié)果并不能真正反映 ChatGPT 性能的準(zhǔn)確性狀態(tài)， 而是顯示了微調(diào)模型帶來的意外后果 。本質(zhì)上， 當(dāng)修改模型的一部分來改善一個(gè)任務(wù)時(shí)，其他任務(wù)可能會受到影響 。為什么會這樣很難確定，因?yàn)闆]有人知道 ChatGPT 是如何運(yùn)作的，而且它的代碼也不是開源的。

隨著時(shí)間的推移，研究人員注意到，ChatGPT 的回答不僅變得不太準(zhǔn)確，而且還停止了解釋其推理過程。

由于 ChatGPT 的運(yùn)作方式，要研究和衡量它的表現(xiàn)可能很困難，這項(xiàng)研究強(qiáng)調(diào)了觀察和評估驅(qū)動 ChatGPT 等工具的大型語言模型（LLM）性能變化的必要性。該研究已經(jīng)在 arXiv 上發(fā)布，并正在等待同行評審，IT之家附鏈接在此。