ChatGPT編程問(wèn)題錯(cuò)誤率52% 但39%程序員沒(méi)看出來(lái)

一份最新報(bào)告指出，ChatGPT回答關(guān)于編程方面的問(wèn)題時(shí)，內(nèi)容錯(cuò)誤率高達(dá)52%。

普渡大學(xué)的一個(gè)研究小組于5月初出席計(jì)算機(jī)-人交互大會(huì)，并提交了一份報(bào)告，檢查了ChatGPT回答的517個(gè)Stack Overflow問(wèn)題，發(fā)現(xiàn)錯(cuò)誤率高達(dá)52%。

調(diào)查結(jié)果顯示，人類程序員在35%的情況下更喜歡ChatGPT的答案，認(rèn)為其提供的內(nèi)容更全面，且有清晰的語(yǔ)言風(fēng)格；更糟糕的是，在39%的情況下，人類程序員并沒(méi)有發(fā)現(xiàn)ChatGPT給出了錯(cuò)誤答案。

雖然這只是對(duì)ChatGPT功能的一個(gè)方面進(jìn)行的研究，但它確實(shí)表明，生成式人工智能機(jī)器人仍然容易犯很多錯(cuò)誤，而人類可能無(wú)法發(fā)現(xiàn)這些錯(cuò)誤。