普渡大学测试发现,ChatGPT在代码编写时经常出错

高丽看国际 2023-08-15 19:48:16

据telecompaper网8月14日报道,ChatGPT 可能很擅长回答快速问题,甚至帮助用户撰写博客文章,但其编码技能仍待提高。

图片来自:telecompaper

普渡大学测试了 ChatGPT 如何回应来自 Stack Overflow (SO) 的 517 个不同问题,结果相当令人失望。检查结果显示,ChatGPT的答案中有52%包含不准确之处,77%是冗长的。更令人担忧的是,聊天机器人所犯的错误中有54%似乎来自它并不理解所问问题的概念。在它确实理解问题的情况下,它经常难以提供正确的答案,这突出了检查 ChatGPT 答案的重要性。

聊天机器人在编码方面并非完全无用。根据一份内部文档显示,今年2月,谷歌向ChatGPT提供了编码面试问题,并根据AI的回答,确定将其聘用为三级工程职位。另据Insider报道,同样在今年,亚马逊的一名工程师使用ChatGPT回答了该公司软件编码工作的面试问题,机器人把这些问题都做对了。

(编译:墨书)

0 阅读:33
高丽看国际

高丽看国际

感谢大家的关注