GPT-4調用插件40次依然不成功經常出現無效調用拒絕回答等

2023-08-13 15:56:54 編輯：公孫素琳來源：

導讀來自紐約大學的 Ernest Davis、德克薩斯大學奧斯汀分校的Scott Aaronson，給ChatGPT背后的大模型GPT-4調用的插件做了一次摸底考試。在本...

來自紐約大學的 Ernest Davis、德克薩斯大學奧斯汀分校的Scott Aaronson，給ChatGPT背后的大模型GPT-4調用的插件做了一次摸底考試。在本次測試中，帶有任一插件的GPT-4明顯強于GPT公司本身，而且可以確定GDP-4強于一年前存在的AI。但是GPT-4的可靠性還遠遠不夠，經常會出現輸出錯誤的答案以及無法輸出任何答案的情況。

從研究中可以看出，GPT-4和插件之間有很大的改進空間。GPT-4調用相關插件40次，試圖要選取某個事件的日期，但最終都沒有成功，只能選擇放棄，沒有插件的GPT-4都能明確指出該事件的日期。 GPT-4在使用的過程中，并不能充分利用插件的功能。通常在人類傾向于使用空間可視化解決問題上表現出較弱的一方，并且不擅長解決涉及組合多種不同類型的計算問題。

標簽： GPT-4、調用插件