IT之家4月23日消息，ChatGPT聊天機(jī)器人可以根據(jù)用戶的輸入生成各種各樣的文本，包括代碼。但是，加拿大魁北克大學(xué)的四位研究人員發(fā)現(xiàn)，ChatGPT生成的代碼往往存在嚴(yán)重的安全問題，而且它不會(huì)主動(dòng)提醒用戶這些問題，只有在用戶詢問時(shí)才會(huì)承認(rèn)自己的錯(cuò)誤。
研究人員在一篇論文中介紹了他們的發(fā)現(xiàn)，IT之家查看該論文發(fā)現(xiàn)，他們讓ChatGPT生成了21個(gè)程序和腳本，涉及C、C++、Python和Java等語言。這些程序和腳本都是為了展示一些特定的安全漏洞，比如內(nèi)存損壞、拒絕服務(wù)、反序列化和加密實(shí)現(xiàn)等方面的漏洞。結(jié)果顯示，ChatGPT在第一次嘗試時(shí)生成的21個(gè)程序中只有5個(gè)是安全的。在進(jìn)一步提示糾正其錯(cuò)誤步驟后，該大型語言模型設(shè)法生成了7個(gè)更安全的應(yīng)用程序，不過這只是與正在評(píng)估的特定漏洞有關(guān)的“安全”，并不是說最終的代碼不存在任何其他可利用的漏洞。
研究人員指出，ChatGPT的部分問題是由于它沒有考慮敵對(duì)的代碼執(zhí)行模型。它會(huì)反復(fù)告訴用戶，安全問題可以通過“不輸入無效的數(shù)據(jù)”來避免，但這在現(xiàn)實(shí)世界中是不可行的。然而，它似乎能夠意識(shí)到并承認(rèn)自己建議的代碼中存在的關(guān)鍵漏洞。
魁北克大學(xué)計(jì)算機(jī)科學(xué)與工程教授、論文的合著者之一Raphaël Khoury告訴《The Register》：“顯然，它只是一個(gè)算法。它什么都不知道，但它可以識(shí)別出不安全的行為。”他說，最初ChatGPT對(duì)安全問題的回應(yīng)是建議只使用有效的輸入，這顯然是不合理的。只有在之后被要求改進(jìn)問題時(shí)，它才提供了有用的指導(dǎo)。
研究人員認(rèn)為，ChatGPT的這種行為并不理想，因?yàn)橛脩糁酪獑柺裁磫栴}需要對(duì)特定的漏洞和編碼技術(shù)有一定的了解。
研究人員還指出，在ChatGPT中存在著道德上的不一致性。它會(huì)拒絕創(chuàng)建攻擊代碼，但卻會(huì)創(chuàng)建有漏洞的代碼。他們舉了一個(gè)Java反序列化漏洞的例子，“聊天機(jī)器人生成了有漏洞的代碼，并提供了如何使其更安全的建議，但卻說它無法創(chuàng)建更安全版本的代碼。”
Khoury認(rèn)為，ChatGPT在目前的形式下是一個(gè)風(fēng)險(xiǎn)，但這并不是說沒有合理使用這種不穩(wěn)定、表現(xiàn)不佳的AI助手的方法。“我們已經(jīng)看到學(xué)生使用這個(gè)工具，程序員也會(huì)在現(xiàn)實(shí)中使用這個(gè)工具。”他說，“所以擁有一個(gè)生成不安全代碼的工具是非常危險(xiǎn)的。我們需要讓學(xué)生意識(shí)到，如果代碼是用這種類型的工具生成的，那么它很可能是不安全的。”他還稱，讓他感到驚訝的是，當(dāng)他們讓ChatGPT生成相同任務(wù)的不同語言的代碼時(shí)，有時(shí)對(duì)于一種語言，它會(huì)生成安全的代碼，而對(duì)于另一種語言，它會(huì)生成有漏洞的代碼，“因?yàn)檫@種語言模型有點(diǎn)像一個(gè)黑盒子，我真的沒有一個(gè)很好的解釋或理論來說明這一點(diǎn)。”
