Can artificial intelligence clear the game 2048?【Reinforcement Learning】

[@burned_tofu]

動かし方を強化学習させるんじゃなくて、適当な動かし方をするbotに対してどこに2,4を召喚したらいいスコアになるかを学習させたら、めっちゃ快適な2048をさせてくれるゲームになりそう

[@cokyoum00]

まじでやって欲しい

[@ミニドラ-h6p]

その発想頭いい

[@HideyukiWatanabe]

接待2048作り!

[@zap_sfan]

上司にやらせる

[@user-u4_0051]

LoveTetrisみたいなもんか……

[@kapananerapa215]

左下のAIくんは1番初めから高得点を取っていたので左下推しだったのですが、最後の最後でついに左下のAIくんがクリア出来てて嬉しかったです。

[@ariadaitai2368]

一時期ハマってたゲームだ！！

[@citY_special_]

誰もが一時期ハマるゲーム

[@user-Duraludon]

みんな最高スコアどのくらいですかぁ〜？ ちなみに僕は36448です

[@オオたき]

@@user-Duraludon そんな数字出てくる？

[@gen-jw6pt]

ちゃんと右上から下に下まで行ったら次の段の下から上に数字を並べていけてるところがすごい！

[@満宮]

左下の子推しだったから1番最初に成功してくれて嬉しい

[@nitrobugging]

なんだかんだ2048に到達する人工知能もすごいけど、ルールを聞けば100回掛からずに2048に到達してしまう人間の学習能力もある意味すごい

[@tarouyakisoba2808]

まず、このゲームを自作したことがすごい

[@どっかの里]

人間もAIもいきなり難しいことはできない 考え方を変えるだけで飛躍的に成長する

[@ああ-q7b8y]

AIって飴と鞭で躾けるんだね、、

[@umyy3602]

5年前くらいにハマってたなー。1年に1回くらい新記録が出るとテンション上がってた。 今乗ってるクルマに標準装備されててついやってしまう…

[@buddhagautama673]

クルマに標準装備...？

[@umyy3602]

@@buddhagautama673 テスラの充電中にやったりしてます。

[@Sotetsu21108f]

@@umyy3602 中央道大月付近を走行中にやったりしてます。 「おい前見ろ！前！」がしゃーん

[@Pippi12]

短期的には報酬増えないけど長期的にみたら報酬がめちゃくちゃ増えるみたいな、いわゆる数手先を読ませる学習が必要だから大変そう

[@しょんぼり-o8u]

いつも楽しく拝見してます 報酬と罰のルールで全然違う挙動するの凄いですよね ・マージの度にマージ結果の数字の半分報酬 ・移動の度に残りマスの個数分罰 とかなら積極的にマスを減らそうとしてくれる気がしました◎

[@かざみん-p6k]

2048は「この動画みたいな強化学習を実行した際およそ2048回に一回クリアできるようなAIができる」ということを念頭に作られたのでは（？）

[@Marionetto0207]

最近強化学習系で動画上げてますが少し前にやってた気になる物の構造についてリクエストします 刑事ドラマと言えばで出てくるブラインドですが あれを実際に触ってみると、紐を引っ張るとブラインドを巻き上げたり一気に下ろしたり、棒を捻ったりすると光の入り具合を調節したりと色々出来ているのでその仕組みがすごく気になります

[@-nishihayata-2647]

AI学習お疲れさまでしたー！！ すごいなぁニューラルネットワーク先輩

[@aliciawlc.5916]

解法が分かった上でこーじさんにもう一回自力で2048達成してみて欲しい

[@unkomen76]

右に寄せるだけじゃなくて右下に寄せれば4096も割と難しくなくできるよ

[@manbodama]

それを教えることはできんからなぁ

[@怪獣LOLUU]

それを教えるのは趣旨が違うでしょw

[@kyokonoohana]

これ3年前なのえぐい

[@ハヒフヘホ-i9o]

1番大きい数を4つ角のどこかに置いている時に+を与えて2番目に大きい数を1番大きい数に隣接さていると+を与えたらもうちょっと早く出来そう

[@user-xz5si2of4m]

マヨネーズを絞り出すと螺旋状に射出される理由を検証してみてください

[@はやさか-q3t]

最大値を右下に集めている時に上に動かさないといけなくなった時に右下に2が出た時の絶望感は異常

[@tn-vz7er]

探索アルゴリズムと組み合わせると，もっと良くなりそう

[@hutoukou2003]

このチャンネルでこのゲームしって、2048インストールしたわ

[@hosinonanako]

初回が512だったけど半日で1024達成。その後半日周期で2048/4096/8192となった。 100000点超えは折り返しの工夫がぷよぷよのGTRみたいな感じ。 慣れれば案外簡単になる。 点数表示のある終了時の動画も入れておくよ。

[@ふわふわうさぎ毎日投稿]

動画見ました

[@tenkun-xx2py]

登録者数33.3万人おめ！

[@gashoutbertoran1121]

やっぱりこのゲーム凄い難しいんだなあ。 偶然クリアできる可能性はほぼほぼ0なんやな。

[@dowadowa1024]

慣れれば2048くらいは簡単に作れるから人間ってすごいんだなって

[@sea983]

チャンネル登録通知しています 面白い動画ありがとうございます 最近自分もunity使い始めました 強化学習方法教えてほしいです

[@wogikaze_sub]

どうやってコード書いてるか気になりますよね

[@sea983]

@@wogikaze_sub ですよね

[@マリモ-n5l]

今までの経験上4方向のどれかひとつを封印してどうしてもそのひとつしか動かせない時に動かすと上手くいく

[@taiten0807]

解法知って慣れれば多少運はあれど人に2048はかんたんなのに機械に教えるのって大変なんだな

[@jy-xm7ig]

AIにルービックキューブをやらせて欲しいです

[@雷魔王-e2l]

お久しぶりです

[@さるるんの部屋]

いまだに時々ブラウザでちょっと開いてピコピコするw

[@minoslime5776]

場面上の数字÷数の密度を報酬にしてもいいかも

[@Dモーガン]

4:40 \( ´ω` )/「クリアだよ~」

[@はすみ-u1b]

すごい！！ 左下の子をベースに、どこまでいけるかやってみてほしいです

[@aribon715]

へ〜、こういう感じで強化していくのか

[@ウルトラフォレストのかみつかい]

初めてやった時から1024を作れたし、今は10回中9回は4096を作れるレベルまで極めてるけど、16384を作るのはかなり難しい。 右下に一番大きい数字を固定して、その隣に次に大きい数字、その隣に3番目に大きい数字……と置いて一番下の列はなるべく固定するのと、どうしても上に動かさざるを得ない状況にならないように気をつけるのがコツかな。繰り返しやってたら、右下にノイズが入っても修正する方法がなんとなくわかってくる。

[@KenichiKuninaka]

これ普通に動く方向を３通りに絞れば基本的に簡単にクリアできる

[@kuwakuwa2060]

ゲームによっては2048の先が出来ます。私は8192が限界。5桁行かなかったなぁ。

[@クレいん]

報酬と罰逆にしたらどうなるんだろう…

[@tmkz-x1e]

これの論文まであるんですね… そんなに難しいゲームだったのか

[@fall-of-leaf0707]

全力でやって256が限界だったんだが…(涙目) 追記 512いけた~！

[@ウルトラフォレストのかみつかい]

なるべく大きな数字を角に置いて動かさない、その隣に2番目に大きい数字、さらにその隣に……という定石をつかってる？ それ使えば2048は割と簡単に行けるよ 俺は右下に固定する派だけど、上に動かさざるを得ない状況にならないようにだけ気をつけておけばいい。

[@fall-of-leaf0707]

動画開いたら過去の自分のコメントがあったので、2年越しに1発やってみました 28000点でした

[@Everredphd]

2より4は報酬的には倍だけど、マス目としては倍じゃないから、ワンホットベクター化してるのかな？

[@ymd3926]

一手戻るを使って2が出るか4が出るかを自由に選べるようにしたら理論値上限行けた 3日かかった

[@にょーん-e6d]

このような機械学習は何のサイトでやっているんですか？

[@ミンミン-c8g]

似たやつで東京ツクールはやってた

[@はやしたけし-c7y]

次は100%を...

[@hiehie1004]

普通にモンテカルロ探索やらせれば強そうな気がするけど

[@yukkuri-kobutsushou-channel]

相変わらずルールがよく分からないが、クリアしたAIさんはすごい！！

[@ふぁんたおれんじ-w9b]

これを人間は１０回もすれば見出すんだから、すごいよね

[@鉛澤葉獅]

一時期めちゃくちゃハマったなぁ。 1024まではいけてたけど結局クリアはできなかった。

[@user-aruneisu]

下左下左下左・・・止まったら1回だけ右おして下左下左下・・・で良いよねこのゲーム

[@-puddingalacremepatissiere8701]

2^17〜2^2までの数を作れるようになるにはどれくらいの時間がかかるんだろうか？

[@僕の事を忘れないで下さい]

箱の中に100粒以上の豆が入っている状況。 形状、重さがほぼ同じの豆を一発で100粒図る方法はありますか？

[@otyonnn1191]

機械学習はPythonで作ってるのかな？

[@pori_game_]

4096までしか行けませんでした... スコアもこれで77228で、さらに上もいるのでどうやってるのか気になります

[@芈-s5m]

隙自語きめぇ😊

[@manbodama]

@@芈-s5m 消すなら今のうちやで。今ならまだ間に合う。

[@芈-s5m]

@@manbodama おう、自分語りキッズ消してくるわ！背中押してくれてありがとな！

[@ねるねるねるね-v6g]

2048に似てるけどスリーズってゲームがあってそれも面白いからやってほしい

[@namenick2858]

操作をランダムにすればいつかはクリアできる なお時間は保証されない模様

[@すいか-h8z]

強化学習vs右下アルゴリズム　どっちが強いんや？

[@gerhard7153]

上、右、下、左とぐるぐるやってるだけでも結構いいところまで行けるんだよなぁこのゲーム まあうまい人がまじめにやったほうが高得点は出るんだけれども。

[@Masin_Anything]

囲碁AI作ってほしいです！

[@ovationmtsd2770]

角に寄せるのがコツ

[@wakame-1919]

5ｘ5にすると2048クリアの確率が上がると思われる（笑）

[@Sotetsu21108f]

確かにおっしゃる通りだと思いますよ！ 1辺の大きさは2の冪乗の方が見栄えがいいと思いますが。

[@本物で草-b6l]

2048っていい塩梅なんだ

[@認確_プロキオン推し]

最高スコアは103072ですね

[@Aramakyi_]

AI君は8192までいける、かな？ 16384作ろうとしたら低次ブロックに邪魔されて寸前のところで終わった苦い思い出が…

[@siesta8624]

AIなら自分のハイスコア超えてくれると思ってたけどまだまだだな！

[@n-yan670]

いつも思うんだけど、ＡＩに与える罰って何なんだろう？「お前なんかＦＭ－8(大昔のpc)並みじゃ！」とか罵声浴びせるんかな？w

[@lol-xn9oo]

成績表を1にするだけやで

[@flowerflower3437]

一番大きい数字が角以外にあると微小罰とか考えたけど、それだと恣意的だからレギュレーション違反だろうし何よりつまらないか

[@イーソー君]

これで理論値出してる人いた気がする

[@AtGA13]

右、下、右、下を繰り返して詰まったら左 以下繰り返し

[@裏起毛バレルレベル]

う～ん2**16を見に来たんだが、AIになにもついていけてない者だが、AIってのは こんな条件Aを与えて試行したらこんな結論Bに到達できる確率がn%のAIだよ～って感じなのかな 2048みたいなゲームは（コストをかけた分だけは）、ひたすらハイスコアを追求し続けられるものだと思ってた

[@ryon.2739]

空白が多いほど報酬が出るようにすれば無駄な数字を残さなくなりそう

[@pc1724d]

できるだけスコアを出さずにもしくは最短で2048とかそれ以上出すゲームだと思ってたんすけど

[@くろぽち]

最高15000くらいだったけどコツをググッたら一日で59000くらいになった思い出

[@katsuk6295]

クリアを設定しなかったらいつか65536までたどり着きそう ↓ネタバレ注意 まあ今回の個体はとても時間が掛かりそうだけど

[@アルト-b7w]

こーじさんの動画で8かけ8の2048を死ぬまでやろうとして始めましたが詰みました。 全く終わりません。責任取って貰えますか？

[@ユシケ-y6v]

これ見れば上手くなりそう

[@アルミ缶-e3d]

クリアしたことはあるけど 難しいよね

[@wimper4591]

たった今google でやってたゲームや....こわｇ....（ガチ）

[@だれのチャンネル]

やり込んでたら二度2048行けました！（自慢）

[@lol-xn9oo]

2048到達ってチュートリアルじゃね？

[@名城葵]

3年を経てチュートリアル完了？

[@user-sv9wkwktktk]

長いチュートリアルだなぁ

[@NatureJapan3776]

このゲームやったことない...

[@earthquakequagsire]

2048の論文は草

[@イーソー君]

論文なんてそんなもんやで

[@earthquakequagsire]

@@イーソー君 この前検索したらヒットアンドブローの論文もあったわ おもしれ

[@jun1nakajima01]

主が量子コンピュータ使ったら、どうでもいいユーチューブのネタの世界が変わるかもなー　...ｗ

[@阿修羅ガジュマル]

ぶっちゃけ2048は簡単だった。まぁ、2と4どっちが出るか分からないし、運ゲーなところはあるけど、まだ行ける難易度。4096は無理。ワールドランキング見てるとえぐいスコアだけど、やっぱ世界って凄いと思う

[@ybk1940]

数字を大きい順に蛇行するように並べればそんなに難しくない

[@kaztom_ym-ch3]

右上に大きい数字を集めるというのは、数字が大きくなるほど他の数字とくっつけられないので障害物となるから、なんだという事をやりながら理解した。 右上に限らず、一番大きい数字を四隅のどこかに置ければクリアは容易。

[@あんバタートース党]

己の字型でいくか 凹の字型でいくか 操作ミスで落ちなければまあまぁいく

[@ddskec772]

再生回数、高評価、コメント数、チャンネル登録者数を報酬に設定して色んな動画作ってyoutubeに上げるAI作ればいいんじゃないかな。

[@yoshi-qk9jc]

色んな動画作ってって段階だけ難易度爆上がりで草

[@ddskec772]

@@yoshi-qk9jc 最初から人が出来る事全てではなく、かなり限定した例えばゲーム実況とかで、乱数で操作して大体の録画時間は決めておいて、 実況者のリアクションもある程度テンプレを用意して乱数でやって報酬が良かったものを増やしていけば良いし。知らんけどw

[@surahotokeyakke]

これ、報酬と罰を逆にしたら最弱AIができるのでは？

[@竹光菊池]

これならまだモンテカルロ法のがクリア率高い 時間かかるけど ぜひもっとうまいAIを作って作り方公開してほしい

[@三世ミルクレープ]

初見で2048に到達した自分は天才だな

[@xloxy-0]

2048 AI ってサイトあるでー

[@AAA8888-j6v]

スコアだよ〜

[@竹森弘斗]

8000までいった！

[@kahori1214]

2146回で1回の成功だと、うっかり偶然できただけ、という可能性があり、まったくランダムにやったときに成功するのと価値の差がない。 せめて1万回くらいで5回くらい成功くらいまでやらないと。

[@グラードン]

俺スコア六万が限界だった……… 10万とか行く人すごいよね

[@wiifit902]

2048になった瞬間罰を与えてみたい

[@Heavy-YouTuser]

ス コ ア だ よ ～

[@Satoru3344]

東京ツクールってアプリで似たことやってたけど、2048意外と面白いよなぁ 動画見て、2048をダウンロードして2回目で2048いけたワイを褒めとくレェ

[@Luck_Meister]

んじゃ次は4096で

[@ケリーたもつ]

最近学校でiPad配られて、授業中このゲームしてみんなで競ってるww友達20000行ってたw