iiinova — where your digital self keeps evolving

むしこあ

@mushicore0.bsky.social

8 followers 8 following 38 posts

神経科学や深層強化学習に興味があります。 YouTubeチャンネルはこちら youtube.com/channel/UCTR4c0xE-pIFgS…

Posts Replies Media

むしこあ @mushicore0.bsky.social · 26/03/2026

AIガオガエンに使っていたマシンを使ってOpenClawで遊び始めてしまったので、しばらく配信は休止になるかもしれません…。

むしこあ @mushicore0.bsky.social · 11/02/2026

AIガオガエンですが、ちょっと電気を止めなければならない事情があって一時停止しました。そのうち再開するつもりです。

000

むしこあ @mushicore0.bsky.social · 28/12/2025

まずはAtariのゲームで裏でテストします。

000

むしこあ @mushicore0.bsky.social · 28/12/2025

トランスフォーマーのコードにいくつかバグがあったかもしれません…またテスト中です。

000

むしこあ @mushicore0.bsky.social · 28/12/2025

ちょっと時間がありそうなのでトレーニング周辺の改良と、トランスフォーマーモデルの見直しに着手します。

むしこあ @mushicore0.bsky.social · 14/12/2025

ClaudeもGeminiもGPTもコーディングで試していますが、今のところ一番扱いやすいのはGPTかなと思っています。最も指示に正確に従ってくれる印象です。かなり感想に個人差があるので、評価が本当に難しいですね。

むしこあ @mushicore0.bsky.social · 01/12/2025

5以降 ChatGPT が証拠もないことを大げさな確度の表現で(絶対に、等)言うので、言うことを真に受けられなくなってきたのですが、そんな経験みなさんありますか…? Base style を Professional にしてみたことに関係があるのかもしれないな、とも思っていますが…。

000

むしこあ @mushicore0.bsky.social · 29/11/2025

遊び用のコードなので、Cursorにざっくりと書いてもらって、ちょっと確認して動かしてます。仕事でやる人はもうちょっとよく確認すべきでしょうね…。

むしこあ @mushicore0.bsky.social · 29/11/2025

ただ、以前やったトランスフォーマーのモデルがうまくいかなかったのが気にはなっているので、そこに一度戻る可能性もあることをお伝えしておきます。

000

むしこあ @mushicore0.bsky.social · 29/11/2025

強化学習のセルフプレイではただ2つのエージェントを対戦させるだけではなく、多数のエージェントと試合をすることで行動の多様性を確保するらしいので、そういう方向に進むのもありかもしれません

000

むしこあ @mushicore0.bsky.social · 29/11/2025

ガオガエンは関係ないのことですが、 The Last of Us を始めました。楽しいゲームだといいのですが…。

むしこあ @mushicore0.bsky.social · 29/11/2025

www.youtube.com/watch?v=_SZK... セルフプレイですが、なんとなくうまく動き始めた気がします。勝率65%に到達するごとにプレイヤーが切り替わります。エージェントプールなどの実装はまだなく、動作確認をしつつ今後ゆっくりと実装していこうと思っています。いよいよかねてからやりたかったことができるようになってきた感じがします。

【AIガオガエン】セルフプレイテスト vs ベレス 1-1 モデル (Large) スマブラ × 深層強化学習 💪😼🔥🖥

YouTube video by むしこあ@スマブラ深層強化学習

むしこあ @mushicore0.bsky.social · 28/11/2025

セルフプレイ始まったのですが、なかなか上手くいきませんねえ…。勝率60%は比較的簡単なんですが、65％になると急に難しくなる。なぜなのでしょう。

000

むしこあ @mushicore0.bsky.social · 23/11/2025

セルフプレイ用のロジックを書いてます。テストしてからYouTubeでストリームしようと思いますが、ここで進捗を報告します。

000

むしこあ @mushicore0.bsky.social · 21/11/2025

AIガオガエンですが、ついにMiiを除く全ファイターの攻略が完了しました。クリア集のプレイリストはこちらです。 www.youtube.com/playlist?lis... 次はセルフプレイがまたできるようにプログラムを変更していこうと思っています。少しお時間をいただきます。

【ウィニングラン】vs ソラ Lv9 1-1 モデル (Large) #3 スマブラ × 深層強化学習 💪😼🔥🖥

YouTube video by むしこあ@スマブラ深層強化学習

むしこあ @mushicore0.bsky.social · 08/06/2025

ちょっとブレーカーが落ちちゃって配信止まってます。そのうち復帰させます。

000

むしこあ @mushicore0.bsky.social · 05/06/2025

Switch2は結局発売日に店頭で買えました。アメリカではeBay などで転売が横行しているようです。アメリカのメルカリでも日本からの出品者が日本語版を販売しているようです。アメリカの人は日本語専用版の存在を公式からは知らされていないのでちょっと紛らわしいですね。

000

むしこあ @mushicore0.bsky.social · 29/05/2025

クリアした回を集めたプレイリストを作りました。 www.youtube.com/watch?v=YtOu...

【クリア】vs マリオ Lv9 1-1 モデル (Large) #3 スマブラ × 深層強化学習 💪😼🔥🖥

YouTube video by むしこあ@スマブラ深層強化学習

むしこあ @mushicore0.bsky.social · 29/05/2025

トランスフォーマーのモデルはうまくいきませんでしたね…。数日前からLSTMのモデルでLv9のファイターを全部倒す企画を始めました。マリオは一日半ほどでクリアして、今はドンキーコングです。

むしこあ @mushicore0.bsky.social · 20/04/2025

AIガオガエンの配信のサムネイルをてんてんさん @pipipi1010.bsky.social に描いていただきました! これからも(ガオガエンが)頑張っていきますのでよろしくお願いします!

むしこあ @mushicore0.bsky.social · 19/04/2025

たまたまかもしれませんが崖で受け身をとる姿を見ることができました。 youtube.com/clip/UgkxdFX...

むしこあ @mushicore0.bsky.social · 16/04/2025

トランスフォーマーですが、どうやら最初の方はLSTMに成績が劣るのは仕方ないのかもしれませんね。長期的にトレーニングしたら上回るかもしれません。今は実行中のLSTMガオガエンのデータを借りて裏でトランスフォーマーのトレーニングだけ回しています。

むしこあ @mushicore0.bsky.social · 14/04/2025

トランスフォーマー、実装自体はできた気がするのですがいかんせんカンガルーの成績が悪い…。(アタリのゲームです)いかがなものでしょうね。

000

むしこあ @mushicore0.bsky.social · 13/04/2025

GTrXL with RoPE になりそう…。

000

むしこあ @mushicore0.bsky.social · 13/04/2025

トランスフォーマーのモデルの実装に失敗し続けています。のんびりやります…。

000

むしこあ @mushicore0.bsky.social · 10/04/2025

FP王子来ました！

むしこあ @mushicore0.bsky.social · 10/04/2025

空下メテオしました。これは初めて見ました。 youtube.com/clip/UgkxkaW...

Share your videos with friends, family, and the world

むしこあ @mushicore0.bsky.social · 10/04/2025

トランスフォーマーのモデルは裏でAugment code君が書いてテストしてくれてます。

000

むしこあ @mushicore0.bsky.social · 10/04/2025

対戦相手をメタナイトLv9にしました。 www.youtube.com/watch?v=w7YA... ネットワークはリセットして最初からトレーニングです。

メタナイトLv9 2-2モデル通常速度 #1 スマブラ × 深層強化学習 💪😼🔥🖥【AIガオガエン】

YouTube video by むしこあ@スマブラ深層強化学習

000

むしこあ @mushicore0.bsky.social · 10/04/2025

戦場リヒターLv9をクリアしました。 www.youtube.com/watch?v=R54E... 次はメタナイトにしようと思っていますが、またキャラが出ていないのでちょっと灯火の星をやってきます。

むしこあ @mushicore0.bsky.social · 09/04/2025

前回ここでつぶやいてからかなり進展がありました。今の配信はこちら。戦場でLv9リヒターと戦っています。 www.youtube.com/watch?v=TG58...

戦場リヒター Lv9 (再戦) #8 スマブラ × 深層強化学習 🦾😼🔥🖥【AIガオガエン】

YouTube video by むしこあ@スマブラ深層強化学習

000

むしこあ @mushicore0.bsky.social · 09/04/2025

というわけで、今後はこちらをメインにしようかと思っています。

むしこあ @mushicore0.bsky.social · 04/03/2025

データ取得+ストリーム用のMacがカーネルパニックで止まってしまいましたね。報酬にちょっと問題がありそうだったので、それが解決し次第復活させます。

000

むしこあ @mushicore0.bsky.social · 28/02/2025

AI ガオガエンの配信を再開しました。データ取得用のコンピュータとトレーニング用のコンピュータを分離したのでまずは動作確認をしています。 www.youtube.com/watch?v=lsdU...

スマブラ × 深層強化学習 🦾😼🔥🖥【AIガオガエン・放置枠】

YouTube video by むしこあの動画

000

むしこあ @mushicore0.bsky.social · 25/02/2025

より大きな入力画像に対応したのですが、1時間あたり10GB程度のデータが出てきて大変です…。

000

むしこあ @mushicore0.bsky.social · 23/02/2025

AI ガオガエン、ゆっくりですが再開しています。まだ配信はしていませんが、昨日データ取得とトレーニングのコンピュータを分けたところです。余裕ができたリソースで、贅沢なモデルを使ってやろうと画策しています。

000

むしこあ @mushicore0.bsky.social · 13/02/2025

AIガオガエンの参考になるかと思い、この論文を読んでいます。旧AIガオガエンはRainbowベースだったので上位互換のようなモデルがあるのは嬉しいことです。 arxiv.org/abs/2411.03820

Beyond The Rainbow: High Performance Deep Reinforcement Learning On A Desktop PC

Rainbow Deep Q-Network (DQN) demonstrated combining multiple independent enhancements could significantly boost a reinforcement learning (RL) agent's performance. In this paper, we present "Beyond The...

000

むしこあ @mushicore0.bsky.social · 21/01/2025

AIガオガエン再始動しようかなあとか思ってます。

000