最新研究: 在创造性思维方面 ChatGPT可以与前1%的人类相媲美
财联社7月17日讯(编辑牛占林)据美国蒙大拿大学的一项最新研究显示,在创造性思维测试方面,人工智能(AI)聊天机器人ChatGPT可以与排名前1%的人类思想家相匹配。
研究人员对ChatGPT使用了托伦斯创造性思维测试,这是一种最常用的创造力测试方法,并记录了ChatGPT给出的8份答案。然后还提交了由24名蒙大拿大学学生组成的对照组的答案。
这些分数与参加托伦斯创造性思维测试的2700名全国大学生进行了比较。所有提交的答案都是由学术测试服务机构评分的,而该机构并不知道人工智能也参与其中。
值得注意的是,托伦斯创造性思维测试是受保护的专有材料,因此ChatGPT也不能通过在互联网或公共数据库中访问有关测试的信息来进行“作弊”。
研究作者、蒙大拿大学商学院临床助理教授ErikGuzik指出,研究结果令人惊讶,有些回答很新奇。Guzik的研究领域包括企业家精神和创造力经济方面。
Guzik表示:“对我来说,创造力就是用不同的方式做事。我喜欢企业家精神的一个定义是,作为一名企业家,要以不同的方式思考。所以,人工智能可以帮助我们将创造性思维应用到商业和创新过程中,这让我着迷。”
托伦斯思维测试包含两种不同的评估:一种是文字评估,一种是图像评估。两者都测量发散性思维,或用于产生创造性想法的思维过程。
在文字评估中,会给考生提供图片或口头提示,并要求他们以书面形式作答。例如,他们可能会看到一个事件的图片,并被要求对结果进行假设。或者向他们展示一个产品,并询问改进它的方法。
他们的回答被用来评估三个心理特征:流畅性(相关想法的数量)、独创性(想法的与众不同)、灵活性(不同类型想法的多样性)。
而图像评估要求考生画出答案。例如,他们可能会被要求完成一幅画。除了流畅性和独创性外,图形测试还评估细化和标题的抽象性等。
在这项研究中,ChatGPT的回答在流畅性和独创性方面都处于前1%。但在灵活性、产生不同类型和类别想法的能力方面有所不足。
Guzik表示:“对于ChatGPT和GPT-4,我们首次表明它在创意方面的表现位居前1%。”他很高兴地注意到,他的一些蒙大拿大学的学生也进入了前1%。然而,ChatGTP的表现超过了全国绝大多数大学生。
Guzik补充说:“我们都在对ChatGPT进行探索,我们注意到它做了一些我们没有想到的有趣的事情。有些回应新颖而令人惊讶。就在那时,我们决定对它进行测试,看看它到底有多有创意。”