Result of learning and playing one side of Super Mario Bros with artificial intelligence

[@ko-ji]

マリオのような横スクロールゲームをFPS視点でプレイしてみた kzbin.info/www/bejne/eKK4Y42lqq6pgaM

[@kinopy-youmu]

ドラム缶じゃなくて土管では？

[@strebenlernen4195]

こーじのレーダーがなんか..。ね..(笑)。

[@墓石ンインファロス]

ガチのFPS視点のゲームがあったはず

[@misutir-K]

現在の気持ち ポッキー美味しいーーーー

[@荒れてるコメント欄だいたい俺の自]

4:10 6/5走法

[@nekokahaE]

これの協力プレイ版もやったら面白そう

[@elecheailes3337]

もうすでにコンピュータが自我を持ってるんですね

[@kwea123]

6:30 ただ報酬を設定してもだめですよ。そのがよい行動という学習ができるほど、探索を行えるチャンスが少ないから。そういういわゆるsparseな報酬も探索、学習できるようにするにはアルゴの工夫が必要です。今のml-agentsのPPOじゃ絶対にできません。

[@Demiemon]

3:45これは人生に関わる深い言葉に聞こえた...

[@lenato1138]

進路学習とかで言われそうw

[@ほうじ茶-q7t]

ステージ作ってる時点で凄い

[@steamelegance1121]

なまぽがんすキョウヘイブラザーズつくりてえなあ

[@user-ec2bk7um1q]

ちょっと動画の趣旨とズレてるかもしれませんが カービィのゲームの制作現場でもAIが使われてるそうですよ AIにカービィをプレイさせることでバグ等が自動で発見できるそうです

[@super-kosian]

はえーすっごい・・・

[@hiranotk2000312able]

へぇーすげーぇ

[@Akita_ken2236]

確かにマリオより変身が多い分助かるよな

[@youichis3928]

初めて知った。もうそんな時代なんですね。

[@shiyu_VRC]

最後の1人称視点、FPSゲームでマリオ再現した動画思い出した（10年くらい前の動画）

[@user-nq8wt1nb9k]

回数重ねなきゃだけどタイムが短いほど大きい報酬とか

[@nekitai]

何気に「ハイパーコージブラザーズ」が好き()

[@柚野ハル]

ブラザーズやないやん

[@井上恭輔-m3w]

棒読みちゃんを2Pにしたら本当の意味でブラザーズになる

[@しまうま-w1d]

すごいな

[@限界受験生の逆転日記]

しょぼんのアクションもやってほしい

[@とわ-t3w]

これと同じ要領で「しょぼんのアクション」が見てみたいです！

[@aaaaaa-ip3eb]

卒論でもっと簡単なゲームを学習させてるから励みになる

[@m.mishima9485]

なるほど、センサー配置して学習の情報に使うのか

[@user-xc7eq9us8f]

いつの間にかTASさんになってそう

[@titan_4649]

採用ありがとうございます！！

[@shrk838]

すご。

[@nezunyan_]

逆にいきなりレベル5からやり始めて学習していく人間ってすげー

[@俺はゴリラと戦う]

それよりも、AIを作ってるのが人間だしな

[@user-me3tj9yh6h]

やはり、AIは人間には追いつけないのか

[@Tasukaru417]

2045年には追い越しますよ☺️

[@シラスと鯖缶]

逆にレベル5からでも理解できるようにした人間もすごい

[@遠藤さくら-o5e]

逆に段階を踏めば確実に成長をするAIにはいつか追い越されるやろな

[@user-wd4ei2sd8i]

テスト前の俺より学習してて草生えぬ

[@Aten-sun]

じゃあお前いつ勉強するんだ？テスト舐めてるとろくな大人にならないぞ 俺みたいな。

[@user-qc2bp6dc4i]

（勉強を）やらねば

[@おさるのジョージガチ考察チャンネル]

風立ちぬみたいに言うなw

[@dokkano_sato]

ポリプロピレンピレピレ どんな行動をすれば将来的に大きな報酬を貰 うことが出来るのか 学習してどうぞ 3:50

[@pachiki.daisuki.ningen]

高学歴で良い仕事に就けば幸せになれるわけじゃあないけども、やりたいことが見つかった時に偏差値で困らないようにある程度は勉強するべき。やりたいことが既に決まっているなら自分の能力を鑑みて必要な分すればいい。子供のうちから無駄に真面目すぎると車輪の下敷きになっちゃうからね。

[@Potechin_Hunter]

2:01 ゴール後の城が「山」にしか見えないw

[@user-wi8pb4sh7s]

時間割引率は入れましたか？

[@sakuramocio0424]

素晴らしい

[@sousou24668]

何気にこーじの動画で一番好き

[@田中太郎-w9y7z]

AI賢いなと思ったけどそれ以上にこーじさんが賢すぎるわ

[@AA-rz7fj]

あんたすげーよ

[@虎影-q4d]

傘をさした状態で歩いて（走って）どの角度が一番濡れないのか検証して欲しいです。

[@kreagaw1287]

逆リーゼントみたいな髪型と 足の開き具合と なんかぺらっぺらなのが なんか怖い

[@あおいとり-r5y]

Unityでスクリプトからキーイベントってどう起こしてらっしゃいますか？keybd_eventでしょうか？

[@原瀬忍]

ハテナブロックを叩くと報酬、敵を倒すと報酬とかも入れてみたいね

[@奥福]

7:10 マイクラで再現した配布ワールドはちょうどこんな感じ

[@渡部三枝]

人間の脳って凄いな

[@worldhello1717]

ほんとそれ

[@skyouya.8998]

うぽつです すごいなあ これからも応援してます

[@user-mb4re9hk7w]

強化学習でスーパーマリオブラザーズとは、これまた懐かしいですね。

[@as2682]

これはすごい

[@248yuchuke]

ジャンプの時に時々左向くのは何のためになんだろう？ ゴールまでのスピードとかにも報酬つけて学習させてみてほしいなー

[@零鉄]

初めて見たから知らんけどクリアをしようとするAIを邪魔するAIやったら面白そう

[@桐-n3f]

コンピュータでも報酬が欲しいんだな・・・

[@CyclopsSenpai]

発想の天才

[@川上-s3c]

1-1から1-4までお願いします

[@ふっくら-f4z]

これって逆にくそ難しいステージを作らせることもできるのかな？

[@丁酉]

Horizon Zero DawnではAIにバグチェックをやらせてるって言ってたな

[@丸投げ製麺]

しょぼんのアクションしな3Dを思い出した

[@赤石山脈]

俺よりゲーム上手い。

[@山中あきら-p2n]

実に面白かった。段階的な攻略法＝急がば回れ！がよくわかる感じで、3Dも親しみが持てます。納得！

[@threereisfield]

これがターミネーターになるんやな

[@にんじん-z9n]

日本語自動生成字幕にしてたら0:22辺りから下ネタ

[@shinobukawaguchi2362]

なるほど、AIがどれだけ頭悪いのかよくわかった

[@worldhello1717]

ほんとに、AI はおばかだよね

[@user-hm4iq9dv5i]

これを発展させてもっと色々なことをしてみてほしいです！

[@ひん名無しの]

すごい！！

[@ih4737]

これ題材にして論文書けると思うわ

[@sci_worlds]

更新頻度すげーー

[@DarkWindEX]

人工知能については詳しくないのですが、こういうのってランダムに試行してみて、報酬がもっとも高かったパターンをキープし、そのパターンからランダムに変えてみて更に高いポイントを得られるパターンが出たらベースとなるパターンを更新、の繰り返しなんでしょうか？ だとしたら、人間的な「知能・考察」よりは「ただのDB」に近いのかな、って。

[@miyakyo6825]

ゴールタイムによって報酬が変わったらクリアが早くなるのかな？

[@藤田達也-r8h]

ブラザー”ズ”という事は、まさか2Pカラーが⁈

[@稲荷寿司-e6r]

地球サイズのボールを投げる大谷翔平はどのくらいの体積、質量をもち 球速はどのくらいになるのかを調べてください！

[@worldhello1717]

地球サイズのボールは投げれないと思うよ。足を踏ん張る場所が無いから力を入れれない。

[@hikarutsu4171]

よく見ると1フレーム刻みで逆方向に進むことで同じ方向に進むにしても速度が微妙に変わるのが凄い 最初は完全にランダムだけど学習していく過程で面白い発見ができるのが強化学習の面白いところ

[@アウク]

コイン、敵撃破に微小報酬を与えるなら クリア時間でも報酬を与えないと、無駄な敵まで倒して時間がかかりそうですね この後が気になるので登録させていだきます

[@twinklelittlestar7384]

プレイしてみたい☆☆

[@aoki23nori]

あらためてスーパーマリオブラザーズの完成度ってすごいんだなと思うわ

[@reI_512_]

懐かしいですねマリオ強化学習

[@user-zg6dv3sh4s]

タイムアップの罰則やクリア時間に比例した報酬のアップが考慮されていないようですね。

[@照り焼き二郎]

いやクリボー怖すぎるだろw

[@蒼氷のグリフォン]

クモボー

[@fmikios]

強化学習 でバグ発生しました私 なぜか 足を上げて歩くように設計した AI が平行移動しました その後 そのはどんどんスピードを上げてゲームが壊れました

[@太郎-d7v]

AIかわいい

[@柚野ハル]

18コメです(´・ω・｀) 傘をどうやったらパラシュートのように使えるか検証ってできますかね…

[@user-rv5mr7rt9u]

きになる！

[@柚野ハル]

@@user-rv5mr7rt9u なんか嬉しい

[@user-rv5mr7rt9u]

のばすぞー！

[@柚野ハル]

@@user-rv5mr7rt9u ｵｰ(^^)/

[@dekisugi_214]

桜餅ましまろん 僕ものばすために貢献！

[@kitakitsune773]

こーじの足の長さでワルイージにしか見えんがw

[@もこういえいきしばく-e4p]

美脚

[@miyo_1945]

時間が経てば経つほど罰を与えれば早くなりそう

[@user-os4sc7tl8m]

改めてTASのプログラムってすごいと思った

[@Mr.モンキー]

これ制限時間と残り時間に応じた報酬付けたら人外の効率プレイできるようになりそうw

[@geromarururu]

TASさんのはじまりであった...

[@ファミリーマート-d4v]

Gero Maru TASは人間なんだよなあ

[@タッツファール]

ファミリーマート 金髪幼女なんだよなぁ…

[@youichis3928]

このAI使ったtas動画面白そうですね。新たな流れが生まれるかもしれませんね。人間だとこうだけどAIだとこうとかなりそうですね。

[@nu2981]

報酬の為にって どんなアルゴリズム

[@user-xn3oj6mt3b]

我々もこんな風に作られたのである

[@user-oo4ul5ld9g]

実はマリオの1-1ってマリオのステージの中で一番最後に作られたステージなんだよね 詳しくは調べたら分かるけど(例:土管の長さを段階的にしたり、穴のギミックの前に穴がない似たようなオブジェを置く)プレイヤーが"段階的に学習して"クリアに辿り着けるように作られてる aiにこのコースをさせる動画はとても合っていると思う(誰目線)

[@renk1310]

さあ、行こう！ってQuizKnockの動画で使われてたやつやん

[@accessoriessiam1339]

初めてあなたの動画を見ました。こーじさん、すげー! あなたのようなスキルが欲しい!!

[@Daiwa_tuki]

こ　ー　じ　に　人　工　知　能　を　搭　載　し

[@user-vc1xn5zq9q]

人工知能シリーズ大好き

[@user-tako8aki-3]

未来がここにスゴ！

[@たこ-q2h]

AI 同士で卓球とか出来そう

[@user-nx2dc4ro2f]

物理エンジンでのマリオの学習も楽しいですね

[@STICKHUMAN_MT]

パワーアップアイテムは葡萄、 敵はその他の果物、ラスボスは料理人、の ハイパーコージヒトリーズの発売 待ってます！

[@Tokage_1984]

棒人間マツタケ 1人なのに複数形のsをつけるっていう

[@GilAka3rd]

速くクリアさせるなら、タイムを設けて、残り時間が多いほど報酬もらえるとかなら良さそうですね！

[@Hentaichou]

スーパーマリオの身長で敵に当たったら一発死... むずそう

[@user-uy1pq8xw7z]

最初からレベル5(元のステージ)から学習させるのと、レベル1〜5までで学習させるのとで比較してほしい

[@MANJYUU_UDON]

コージtasですな

[@JNaminori]

タイムが早いほど報酬増加で

[@常磐路唐揚げ蕎麦チャンネル]

あとはバーの高さが高ければ高いほど追加報酬とか

[@chokominto83]

それは思った

[@user-hikoyuzu]

スピランをする人工知能はエモい

[@なかやま-p3t]

毎秒罰を与えるとかね

[@manbodama]

@@なかやま-p3t なるほど賢い

[@yazuya828]

0:23 字幕つけたらやばくてわろた

[@amonw1044]

おっぱいパンパン

[@user-mk6lf9xj3t]

おっばっっpaimerパンッ

[@kata2054]

あのん マッハ

[@dree_f1ll3twrt]

クソワロ

[@user-vq5rk2cn6l]

サブちゃん宣伝のうまさ◎

[@anchira]

もう一人AIを用意して相手よりも早くゴールしたら報酬を貰えるとしたらもっと学習できたりして

[@okasimoti]

今見ると1の1ってこんな長かったんだ

[@richard-gj8fs]

そのうち、しょぼんの一面も強化学習でAIにやってみてほしい

[@Hokuchan1130]

AIも大変なんだすね

[@user-he3vy2eq4s]

この手の知識ないけど時間立つほどに報酬マイナスにしたら左向く回数はへったりするんですか？

[@notsnanashi2652]

なんて懐かしいものを……

[@nm9171]

強化学習だ！

[@vongola8902]

ジェノサイドステップをしたがるAI

[@user-ve1yc2pg2f]

Jステは基本はっきりわかんだね

[@kk-gs9ob]

切れたアキレス腱 Gやで、先輩

[@user-zh1fx1fm5u]

ちょこちょこ止まりながら走るのはニュートラルフレームも罰にすると改善できたりしないかな？

[@クリームマカロニ]

字幕をオンにした途端にとんでもないカオスになりました。 どうしてくれるんですか