サッカーを強化学習する - 思考の本棚

はじめに この記事は強化学習苦手の会Advent Calenderの12日目の記事です。 私は11月末までKaggle上で開催されていたGoogle Research Football with Manchester City F.C.に参加していました。このコンペはGoogle Researchが用意したサッカーゲーム上でサッカーエージェント(プレイヤー)を作成し、その強さを競うというものです。 私はhigeponさんとチームを組ませていただき、強化学習アプローチでコンペ開催から終了まで取り組みました。そこでサッカーエージェントを強化学習で育成する際に工夫した点や苦労した点を共有できればと思います。 kaggle: Google Research Football competition www.kaggle.com GitHub: Google Research Football gi

[barringtonia]

いくつか試合を見たけど、ゾーンでもマンツーでもないワーワーサッカーになりがちな印象。この動画のReal Bayesians vs Frequentist Unitedに笑った https://www.youtube.com/watch?v=F8DcgFDT9sc

[kyukyunyorituryo]

サッカー中継から戦術を抽出できたら面白そう

[sh19910711]

"オウンゴールをしていたエージェントがちゃんとパスをして相手のゴールに向かっていく姿にはちょっぴり感動 / 書籍では知っていた強化学習を行う上での難しさ(報酬設計、データ効率、過学習)を身をもって"

[misshiki]

Kaggle“このコンペはGoogle Researchが用意したサッカーゲーム上でサッカーエージェント(プレイヤー)を作成し、その強さを競うというもの”強化学習アプローチ

[gorilla213]

珍しい強化学習の記事ですね〜 手法がまとめられていて読みやすかったです

[tomex-beta]

答え合わせありがたい

[wfunakoshi235]

“ ”

[endok]

学生時代に研究の題材にしてたRobocupシミュレーションリーグを思い出して懐かしみ。

[z1h4784]

全選手の能力が同じである前提で、行動パターンを一定数に限定することで何とか試合として成立するようにした感じなのかな。面白いけど現実世界のサッカーとは別の何かだなｗ

[y_uuki]

これめちゃおもしろそう

[hamamuratakuo]

ギャンブル、ブックメーカーへの応用　公営競技（競馬、競輪、競艇、オートレース）

[yumu19]

へー。面白そう。

[Nyoho]

「この学習にざっくり20万円近くのコストがかかっています。」すごい。