PROJECT
プロジェクト概要
Gran Turismo Sophy（GT Sophy）は、Sony AI、Polyphony Digital（ポリフォニー・デジタル、PDI）、 そしてSony Interactive Entertainment（ソニー・インタラクティブエンタテインメント、SIE）が共同開発した革新的なレーシングAIエージェントです。GT Sophyは、「グランツーリスモ」のトップドライバーと競い合うことで、新たなゲーム体験を創り出すために開発されました。
GT Sophyは、Sony AIが開発した最先端の深層強化学習アルゴリズムと学習シナリオから成る深層強化学習技術、PDIによる精緻なドライビングシミュレーターである「グランツーリスモ」、そしてSIEのクラウドゲーミング・インフラストラクチャを活用した大規模なトレーニングの組み合わせから生まれました。
-
Sony AIは、AIエージェントであるGT Sophyの実現にあたり、その学習に用いられた深層強化学習プラットフォームを開発。新規アルゴリズムや学習シナリオの開発・評価を含む深層強化学習技術全般を担当。
-
「グランツーリスモ」の開発を行うPolyphony Digital（ポリフォニー・デジタル、PDI）は、レースに関する専門知識や『グランツーリスモＳＰＯＲＴ』とそのAPIへのアクセスを提供すると共に、グローバルなGTプレイヤーコミュニティとのコミュニケーションを担当。
-
Sony Interactive Entertainment（ソニー・インタラクティブエンタテインメント、SIE）は、「PlayStation Now」を支える自社のクラウドゲーム用インフラを強化し、GT Sophyの大規模なトレーニング環境を整備。
GT Sophyのスキル
GT Sophyは、深層強化学習を通じて、世界トップレベルのGTドライバーと競い合うために必要な以下のドライビングスキルを習得しました。
選手コメント
世界トップレベルのGTドライバーとの対戦を通じて、GT Sophyの性能評価を行いました。ここでは、GT Sophyと対戦した選手たちのコメントを紹介します。
-
「“AIと対戦している”ということをいつの間にか忘れてました。すごく楽しかったです。もっとGT Sophyと一緒にレースしていきたいですね」
宮園 拓真（TAKUMA MIYAZONO）
『FIAグランツーリスモ選手権 2020 ワールド
ファイナル』にて
三冠を達成 -
「GT Sophyのレース・テクニックは本当にエキサイティングでした。たくさんのインスピレーションを受けました」
エミリー・ジョーンズ（EMILY JONES）
『FIAグランツーリスモ選手権 2020 ワールド
ファイナル』
マニュファクチャラーシリーズ
アウディ代表 -
「GT Sophyは、今まで想像もしなかった新しい可能性を示してくれました」
イゴール・フラガ（IGOR FRAGA）
『FIAグランツーリスモ選手権 2018 ワールド
ファイナル』
ネイションズカップ チャンピオン
（初代チャンピオン） -
「GT Sophyはこの先、プレイヤーにとっての相棒になると思います」
龍 翔太郎（SHOTARO RYU）
『2019年 茨城国体 eスポーツ グランツーリスモ
部門』
少年の部 準優勝
AI技術の進化
これまでのゲームAIの開発においても、その歴史の転換点となったAIが存在します。例えば、チェスや将棋、碁などの戦略ゲームやリアルタイム・マルチプレイヤー戦略ゲームにおける複雑な意思決定が可能なAIがその代表例です。
GT Sophyは、対戦相手とわずか数十センチの距離を保ちながら競り合うなど、複雑で非線形な動的特性を持つ車体を、対戦相手や路面状況に応じてリアルタイムにコントロールするという点で、これまでのゲームAIとは一線を画しています。
これらの成果をまとめた論文「Outracing champion Gran Turismo drivers with deep reinforcement learning」は、AI史に残る技術革新として認められ、国際的な科学ジャーナル『Nature』の表紙を飾りました。
GT Sophyに関わる技術の詳細に関しては、こちらをご覧ください。
プロジェクト沿革
- 2016
ソニーのR&D部門で初期検討を開始。
- 2020年4月
株式会社ソニーAIを設立。「ゲームAI・フラッグシップ・プロジェクト」を開始。
- 2020年8月
チューリッヒ大学との共同研究に基づく論文 “Super-Human Performance in Gran Turismo Sport Using Deep Reinforcement Learning”が発表。
- 2021年1月
独自の非同期分散型学習プラットフォーム、DARTがオンラインで稼働。GT Sophyの大規模学習が開始。
- 2021年3月
元GTトップドライバーやPDIメンバーとのテストレースを開始。
- 2021年6月
GT Sophyとエミリー・ジョーンズ選手（オーストラリア）、ヴァレリオ・ガロ選手（イタリア）、イゴール・フラガ選手（ブラジル）とのOne on Oneタイムトライアルレースを実施。
チューリッヒ大学との共同研究に基づく論文 “Autonomous Overtaking in Gran Turismo Sport Using Curriculum Reinforcement Learning”が発表。
- 2021年7月2日
GT Sophyと世界トップレベルのGTドライバーによる第１回公式戦「Race Together 2021」を開催。GT Sophyが3つすべてのレースでベストラップタイムを記録し、3つのうち2つのレースで1位を獲得するも、GTトップドライバーチームは合計スコア86対70でGT Sophyチームに勝利。
- 2021年10月21日
GT Sophyと世界トップレベルのGTドライバーによる第２回公式戦「Race Together 2021」を開催。GT Sophyは3つのレースすべてで1位と2位を獲得し、チームの合計スコアでも104対52でGTトップドライバーチームに勝利。
- 2022年2月
Sony AIが『Nature』にて論文 “Outracing champion Gran Turismo drivers with deep reinforcement learning”を発表。
- 2022年7月
GT Sophyが世界のトップドライバーとザルツブルク・オーストリアRed Bull Hangar-7にて開催されたGran Turismo World Series 2022 (GTWS 2022) Showdown Eventの会場でエキシビションレースを行う。
- 2022年11月
GT Sophyが世界のトップドライバーとモナコで開催されたGTワールドシリーズ 2022 ワールドファイナルの会場でエキシビションレースを行う。
ムービー
-
The Making of
Gran Turismo Sophyドキュメンタリームービー2022年2月10日AIは、世界最高峰のグランツーリスモドライバーを追い抜くことができるのか？ ソニーAI、ポリフォニー・デジタル、そしてソニー・インタラクティブエンタテインメントが組織を超えてワンチームを結成し、画期的なテクノロジーを駆使して開発したGran Turismo Sophy。 AIの革新的な進化のみならず、これまでにないゲーム体験やエンターテインメントを実現することでAIの力を新たなステージへと躍進させます。
-
The Team
Behind GT Sophy - Part1ドキュメンタリーシリーズ2022年8月10日第1弾となる本動画では、当時インターン生だったプロジェクトメンバーが東京のアパートで9台のPlayStationを使って1日24時間のレースシミュレーションを行い、莫大な電気代を会社に請求したという、プロジェクト発足時の場面からその後のプロジェクトの成り立ちを紹介します。 このテストレースは最終的に、グランツーリスモにおける世界最速の人間ドライバーにも走り勝つためのAIエージェントをトレーニングする、という技術的な課題を克服するグローバルプロジェクトチームの編成に繋がりました。
-
The Team
Behind GT Sophy - Part2ドキュメンタリーシリーズ2022年8月22日本動画では、「グランツーリスモ」をプレイするためにソニーAIにより開発・訓練したレーシングエージェントを採用し、究極のテストレースを行っています。2021年4月のRace Togetherイベントで、GT Sophyは「グランツーリスモ」において世界で最速といわれる人間ドライバーと対決しました。如何にしてチームは、AIエージェント（GT Sophy）に、eスポーツのチャンピオンと戦うために必要となるスキルの習得を教えたのか？！
-
The Team
Behind GT Sophy - Part3ドキュメンタリーシリーズ2022年9月8日ビデオシリーズ 「The Team Behind GT Sophy」 の3本目となる本動画では、GT Sophyのすべてのトレーニングとそこに至る過程を明らかにします。また、AIレーシングエージェントであるGT Sophyが、最初の対決で敗れた後、世界最高の人間ドライバーに再度挑む様子を紹介します。
