MinecraftをAIがプレイ、10分で「ダイヤモンドのツルハシ」を高速作成 米OpenAIが技術開発

Innovative Tech： このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。 米OpenAIの研究チームが開発した「Video PreTraining （VPT）: Learning to Act by Watching Unlabeled Online Videos」は、人間がプレイするMinecraft（マインクラフト）の映像から複雑な動作を学習するモデルだ。学習したモデルは、熟練した人でも20分以上かかるダイヤモンドツールの作成を10分程度で成し遂げ、その有効性を示した。 人がプレイしたマインクラフトのプレイ動画がWeb上に多く存在する。今回のモデルはこの膨大な動画データで学習するわけだが、これら動画からは何が起きたかが分かるだけで、マウスの動きやキーの押し順

[Snail]

10分でクリアしたならその動画を紹介しないでどうすんのさ。とおもったら本家のツイッターに動画があったのでどうぞ。 https://bit.ly/3On3vxs

[mashori]

すげーな。自分がマイクラ始めたら小さな砂の島スタートで木材も十分に得られず松明作れないうちにクリーパーにやられ島も壊され全ロス状態で詰みかけたまま進められないんだが……

[inatax]

動画を見たけどリセマラ上等なRTA的なプレイっぽくて多分10分っていうのは平均じゃないと思うので、人間の平均20分と比べるのはちょっと誠実じゃないかな… / それはそれとして機械学習としてはすごい

[genkai_nada]

TASもAIが作る時代になるのかしら......(biim式で動画投稿してくれるところまでAI化してほしい)

[judenimori]

動画見た。木のツルハシ→直下掘り→適当な深度で鉄ツルハシ作る→ダイヤ掘るという挙動。飯食わないし松明作らない。なら普通に遅いし恐らく成功率低い。でもこういうのは気づけば自分より上手くなってるからなあ。

[buhoho]

動画見たけど効率よく採掘ツール作り変えて掘り進めててRTAみたいなプレイだな。こんな複雑な映像理解してゲームのルールとかキー入力操作まで対応するの凄すぎる

[boxmanx99]

id:yujilabo （ネタバレ）ダイヤモンドの出やすい深度が決まってるのでそこを掘る。ただチェストに入ってることもあって、それで入手したのでは？

[kabayakin]

自分がやったら真下掘りでマグマダイブする未来しか見えない

[paradisemaker]

これ、自動テストで応用できそう

[hin_dareta]

掘っても掘ってもダイヤが出ないうちのワールドでやってくれよ

[maninthemiddle]

これだけうまくこなせるなら、大体の半知的労働はAIのほうがうまくやるだろうな...

[srng]

これを映像から学習したっていうのが面白い

[kuzumaji]

つい数年前は２Dのマリオのステージ１をクリアだったのに、今や３Dゲームまでいけるようになってるのか…つよ

[cartman0]

マグマあったら死ぬムーブだったけど初期だと関係ない的な判定なのかしら

[nobodyplace]

なんかこういう選手権的なものやってみて欲しいな。ゴールももっと遠い感じに設定して

[masudanohitokoto]

もしシンギュラリティが起こるとしたら、一つのAIが人間に近づくのではなく、複数のAIの集合体を連結したものがそう呼ばれるようになるかもしれない、という思いがある。

[Big_iris]

AIって特性上何度も試行して直下にダイヤがあるシード引き当てたのと変わらないし突き詰めるとTASになるんじゃない もしシード値固定ならダイヤにある場所事前に学習してそこに向かうだけだから意味ないし

[queeuq]

うーむ。クラフトのUIとかブロックの設置とかを学習でできるようになっているというのはすごい。ダイヤのつるはしが10分でできたのは完全に運だけど

[kabuquery]

こわいよー

[junjun777]

まあチャンピオンデータで10分！と喜んでるのはどうでも良いけど、ラベルなし動画で学習できるということは、なんらかの方法でリセマラのコストを莫大にすれば、リセマラ上等ではなくなりそう。素晴らしい。

[kaakaa_hoe]

OpenAIこんなところまで…

[neogratche]

TASの世界にAIを導入したら新しい領域に到達できそう

[star_123]

プレイとしてはスタート地点がが当たりで上手くいったパターンの動画という感じだけど動画と相対したキー入力情報なしでこれ学習出来るのはシンプルに驚きだ

[kitamati]

てことはCS:GOでも実践できそうだしひいては戦闘ヘリやドローンにAIアシスト機能搭載からの自動火器管制までできそうな伊予柑……

[tomute]

凄いね。

[nunune]

ブコメからプレイ動画見たら開幕直下堀りでめちゃ笑った。なんて剛毅なプレースタイルなんだ。

[canadie]

初期の風景からseed値を逆算して素材が埋まってる座標を割り出すまでしてるんだよ（適当）

[shields-pikes]

いきなり真下を掘り続けて最短距離でダイヤが露出した洞窟に当たったのは、まあ運が良かったとしても、松明が無いのに明るいのはズルくね？　　まずは木炭→松明→石炭になると思う。あと、あんなに掘ると腹減る。

[magi00]

自動化botをAIに動画で学習させて自動生成みたいな感じ？日本だとAI＝意思があるみたいな捉え方をどうしてもされるなー

[n314]

真下に掘り進んでるけど、リセマラ前提？これ死なずに元の場所にも戻れるルールにしたら、階段作ったり梯子作ったり落下死しないようになるんだろうか？

[ipinkcat]

AIでRTAしてるの？次はぜひともマリオ64に挑戦してほしい

[daichirata]

キーボードとマウスの動きを少量学習させた後はラベルなし動画で学習できるのめっちゃ便利そう

[raitu]

映像学習AIの話。該当動画 https://twitter.com/OpenAI/status/1540032456559955968

[mayumayu_nimolove]

それでも10分かかるのか

[kijtra]

ウォーデンと戦っていい攻略法をあみ出してほしいw

[tantakatanZ]

つまり、TASってこと？

[mak_in]

エンダードラゴンを討伐してほしい

[lnimroder]

真下彫りしてるところといいリセマラ前提っぽさあるな