人工知能の分野で、ChatGPT は強力な言語生成能力から広く人気を集めていますが、最近の実験では予想外の失敗を経験しました。エンジニアのロベルト・カルーゾ氏はシミュレーターを使って、1977年に発売されたクラシックなゲーム機、アタリ2600(Atari2600)と国際象棋の対戦を行わせました。結果は驚くべきもので、ChatGPT は試合に負けただけでなく、何度も誤りを犯していました。
この試合にはアタリ1979年の『Video Chess』を使用し、90分間の戦いの末、ChatGPT のパフォーマンスは非常に不振でした。カルーゾ氏はLinkedInでこの実験の詳細を共有し、ChatGPT が「ルーク」(ロクロク)を「ビショップ」(飛車)だと勘違いしただけでなく、ポーンの分岐攻撃も見逃していたことを指摘しました。また、何度も駒の配置を混乱させました。ChatGPT はアタリのゲームアイコンが抽象的すぎると不満を述べましたが、標準的な国際象棋の譜面に切り替えた後でもパフォーマンスは改善しませんでした。カルーゾ氏は冗談交じりに、「ChatGPT が三級の国際象棋クラブで笑われるほどのミスを犯している」と述べました。初心者レベルでも完全に打ち負かされました。
興味深いことに、コンピュータが国際象棋で圧倒的な力を示す例として、1997年にIBMのディープブルーがグランドマスターのガリー・カスパロフを破ったことが挙げられます。しかし、今回の実験が ChatGPT の国際象棋での無価値さを意味するわけではありません。ChatGPT はあくまで言語モデルであり、専門的に設計されたスーパーコンピュータではないため、棋譜の対戦では限界があるのは当然です。むしろ、国際象棋について議論する方が役立つかもしれません。
この実験を通じて、人工知能が特定の分野で抱える制限が明らかになり、技術に対する深い考察を促しました。多くの分野で優れたパフォーマンスを見せる ChatGPT ですが、複雑な棋譜の対戦においてはさらなる努力が必要であることが示されました。