Kaggleにて開催されたゲームAIの国際コンペティション「Hungry Geese」において、弊社所属の田中一樹とquantum社の大渡勝己(DeNAでも強化学習の研究開発に従事)のチームHandyRLが875チーム(計1,039名)参加中1位を獲得し優勝しました。

本コンペティションでは、「Hungry Geese」というゲームをプレイするAIを開発し他チームのAIと強さを競いました。「Hungry Geese」は、古典的なコンピュータゲームであるヘビゲームを4人プレイヤーに拡張した対戦ゲームです。このゲームは相手のヘビを追い詰めるだけではなく時には協力が必要であることや相手のヘビを対戦中に分析し戦略変更するといった多人数ゲームならではの課題があります。本取り組みを通じて多人数ゲームにおけるAI技術の発展が期待されます。

チームHandyRLはDeNAがOSSとして公開している並列強化学習ライブラリ「HandyRL」を用いて、近年発展した強化学習技術と、既存のゲームAI技術とを組み合わせたAI開発を行いました。また、国際コミュニティにおける強化学習人材の増加と育成に貢献すべく、「Hungry Geese」に対応した機能をHandyRLライブラリ中に実装、コミュニティに公開し、多くの参加者がHandyRLを通じて強化学習に触れるきっかけを作りました。さらに、本コンペティションに関する講演等も行いました。

HandyRLチームの解法はこちら

田中コメント「私自身業務を通じて強化学習の価値、面白さを強く感じていました。今回HungryGeeseとHandyRLを通じて世界の多くの方が強化学習と出会い、その面白さを気づくきっかけに少しでも貢献できたならば嬉しいです。」

大渡コメント「最近の強化学習技術のみならず、将棋や囲碁、大富豪等のAI研究の成果の素晴らしさが示された大会でした。偉大な先人たちの功績にこれまで以上にスポットライトを当てられるようにしていきたいです。」

DeNAではこの経験を活かしつつ、強化学習技術を用いたAI研究開発や実ビジネスへの応用にチャレンジし続けます。

Hungry Geeseのゲーム画面。自分のヘビ（実際はガチョウ）を操作し食べ物を食べて体を伸ばしながら相手のヘビにぶつからずに生き残る必要がある。