AIの発想スコア、カナダ大が10万人平均を上回る

モントリオール大学らの研究は主要なAIモデルと人間10万人の発想力を比較しました。複数のAIが人間の平均点を上回った一方で、上位半数や上位10%の成績はすべてのAIを上回り、最高性能AIでも到達しない可能性が示されています。

カナダのモントリオール大学などの研究チームは、文章生成型のAIと人間の発想力を比較する大規模な研究を公表しました。研究では、人間10万人分のスコアと主要なAIモデルの成績を並べて分析しています。発想力の測定には、意味の関連が低い単語を10個挙げさせるテストを用い、自由な連想が多いほど高得点になる方式です。本成果は国際学術誌「サイエンティフィック・リポーツ」に掲載されています。 報じられている点： ・被験者は人間10万人分のデータを使用している。 ・測定は意味が関連しない単語を10個挙げる発想テストで行われた（例：「銀河」「フォーク」「自由」など）。 ・人間の平均スコアは約80をやや上回る程度と報告されている。 ・一部のAIモデルは人間の平均を上回り、85付近の成績を示したモデルもある。 ・人間の上位半数は85超、上位10%は90超で、すべてのAIモデルを上回った。 ・研究にはモントリオール大学のカリム・ジェルビ教授やヨシュア・ベンジオ教授が参加している。 まとめ： 研究は主要AIモデルが人間の平均を一部上回る一方で、最も創造的な人間の成績には及ばないことを示しています。研究者はAIが創作者の仕事を完全に代替するとは限らず、支援する道具になるという見方を示しています。今後の追加発表や実験の予定については現時点では未定です。