普渡大學(xué)的一個(gè)研究小組于5月初出席計(jì)算機(jī)-人交互大會(huì)，并提交了一份報(bào)告，檢查了ChatGPT回答的517個(gè)StackOverflow問題，發(fā)現(xiàn)錯(cuò)誤率高達(dá)52%。調(diào)查結(jié)果顯示，人類程序員在35%的情況下更喜歡ChatGPT的答案，認(rèn)為其提供的內(nèi)容更全面，且有清晰的語言風(fēng)格；更糟糕的是，在39%的情況下，人類程序員并沒有發(fā)現(xiàn)ChatGPT給出了錯(cuò)誤答案。雖然這只是對(duì)ChatGPT功能的一個(gè)方面進(jìn)行的研究，但它確實(shí)表明，生成式人工智能機(jī)器人仍然容易犯很多錯(cuò)誤，而人類可能無法發(fā)現(xiàn)這些錯(cuò)誤。