Blog

AI人工智慧在創造力測試中超越人類

Blog Image
AI人工智慧在創造力測試中超越人類

July 10, 2023

重點摘要:
人工智慧(AI),特別是GPT-4,在標準創造力測試中,證明可以匹配人類思維的頂尖1%。使用GPT-4開發的AI應用程序ChatGPT,在托倫斯創造力思考測試(一種廣泛認可的評估創造力的工具)中表現出了流暢性和原創性。

這一突破性的發現表明,AI可能正在發展與人類能力相當甚至超越的創造力。主要研究者Erik Guzik博士預計,隨著AI的快速進步,它將成為商業創新和創業的關鍵工具。

關鍵事實:
- 研究顯示,ChatGPT在原創性方面進入了頂尖1%的行列,這是AI的新成就。
- AI在全國創造力測試中優於大多數大學生。
- 儘管ChatGPT取得了成功,但它提出了需要更精密的工具來區分人類和AI產生的想法的需求。

- 來源:蒙大拿大學

蒙大拿大學及其合作夥伴的新研究表明,人工智慧可以在標準創造力測試中與人類思維的頂尖1%相匹敵。

該研究由蒙大拿大學商學院的助理臨床教授Erik Guzik博士指導。他和他的合作夥伴使用了托倫斯創造力思考測試,這是一種用於評估人類創造力的眾所周知的工具,已經使用了幾十年。

研究人員提交了由ChatGPT生成的八個回答,該應用程序由GPT-4人工智慧引擎驅動。他們還提交了來自24名參加Guzik的創業和個人理財課程的蒙大拿大學學生的對照組答案。

這些分數與2016年參加TTCT的2700名全國大學生進行了比較。所有提交的答案都由學術測試服務公司評分,該公司並不知道涉及到AI。

結果將ChatGPT列入創造力的精英行列。該AI應用程序在流暢度(產生大量想法的能力)和原創性(提出新想法的能力)方面位於頂尖百分位。

該AI在靈活性(產生不同類型和類別的想法的能力)上略有下滑,到了97百分位。

“對於ChatGPT和GPT-4,我們首次證明它在原創性方面表現在頂尖的1%之內,” Guzik說。“這是新的。”

他滿意地注意到,他的一些蒙大拿大學學生也在頂尖的1%之內。然而,ChatGTP的表現超越了全國大多數大學生。

Guzik在春季學期期間測試了AI和他的學生。他的工作得到了UM Western的Christian Gilde和Vilnius University的Christian Byrge的協助。研究人員在5月份的南俄勒岡大學創意會議上介紹了他們的工作。

“我們在會議上非常小心地不對數據進行太多的解讀,”Guzik說。“我們只是呈現了結果。但我們分享了有力的證據,表明AI似乎正在發展與人類能力相當甚至超過的創造力。”

Guzik說,他問ChatGPT如果它在TTCT上表現良好會表明什麼。AI給出了一個堅決的答案,他們在會議上分享了:

“ChatGPT告訴我們,我們可能並未充分理解人類創造力,我認為這是正確的,”他說。“它還建議我們可能需要更精密的評估工具來區分人類和AI生成的想法。”

他說,TTCT是受保護的專有材料,因此ChatGPT無法“作弊”,無法通過互聯網或公共數據庫獲取關於測試的資訊。

Guzik一直對創造力很感興趣。當他在馬薩諸塞州小鎮帕爾默長大時,他是一個才華橫溢的學生項目的成員。

那次經歷讓他認識了由先鋒心理學家Ellis Paul Torrance開發的未來問題解決過程,Torrance也創造了TTCT。

Guzik說,他在那時就愛上了腦力激盪,以及它如何激發人類的想像力,他仍然積極參與未來問題解決組織,甚至在其一次會議上遇到了他的妻子。

Guzik和他的團隊決定測試ChatGPT的創造力,因為他們在過去一年中一直在與之互動。

“我們都在探索ChatGPT,我們注意到它做了一些我們沒有預料到的有趣事情,”他說。“一些回答是新奇且令人驚訝的。那時候,我們決定將其付諸測試,看看它到底有多創造性。”

Guzik說,TTCT測試使用模仿現實生活創造任務的提示。例如,你能想出產品的新用途或改進這種產品嗎?

“比方說這是一個籃球,”他說。“盡可能想出籃球的用途。你可以投籃,也可以用它做展示。如果你逼自己去想出新的用途,也許你可以把它切開,用作花盆。或者用磚塊你可以建造東西,或者它可以用作紙鎮。但也許你把它磨碎,並將其改造成全新的東西。”

Guzik原本預期ChatGPT會擅長創造很多想法(流暢性),因為這就是生成型AI的功能。並且它在回應提示的時候,產生了許多評估者認為相關、有用並有價值的想法。

他更驚訝的是它在生成原創想法方面做得如何,這是人類想像力的標誌。測試評估者獲得了對於提示的常見回答的清單,這些幾乎預期會被提交的回答。

然而,AI在提出新鮮回答方面處於頂尖百分位。

“在會議上,我們得知了一年前對GPT-3進行的先前研究,” Guzik說。

“那時候,ChatGPT在涉及原創性思維的任務上的得分並不如人類。現在有了更先進的GPT-4,它在所有人類回答中位於頂尖的1%。”

隨著AI進步的加速,他預期它將成為商業世界的關鍵工具,並成為區域和國家創新的重要新驅動器。

“對我來說,創造力就是以不同的方式做事情,” Guzik說。

“我喜歡的創業的定義之一是,成為一名創業家就是要有不同的思維。因此,AI可能會幫助我們將創造性思維應用於商業和創新過程中,這對我來說簡直太有趣了。”

他說,蒙大納大學商學院對於教授AI並將其納入課程是持開放態度的。

“我認為我們知道未來將以某種方式包括AI,” Guzik說。“我們必須小心其使用方式,並考慮所需的規則和法規。但是,許多企業已經在使用它進行許多創造性任務。在創業和區域創新方面,這是一場遊戲的變革。”

新聞原址: AI Outperforms Humans in Creativity Test - Neuroscience News