NokiMo
無能一文
無能一文

fanbox


[活動報告/雑記]動画生成AIの活用方法についての検討を実施しました

Xの方でも言及しましたが、ここ数日ほど、巷で話題のオープンソースの動画生成AI『wan2.2』の調査をしていました。

もちろん、無能の主な興味はこの技術が『ゲーム制作にどう活かせるか』にあります。

結論だけ先に言っておくと、

「やっぱり、すぐにゲーム制作に活かすのは難しいかなあ。

 活かすとしても、ごくごく限定的にしかできそうにないかも」

というのが無能の感想です。


ただ、せっかくなので、活動報告として調査の一端を示しておきます。


まず、以前もここにUPした制作中のゲームのキービジュアル。

photoshopと生成AIででっち上げたやつですね。

(※キャプション除去版を用意しました)



これを、今、巷で話題のオープンソースの動画生成AI『wan2.2』に突っ込んで動かしてみました。

元画像から動画を生成する。いわゆるi2v(Image to Video)ってやつです。

その結果が以下です。

0811_035626_Share_00001

0810_234105_Share_00001

一つ目に関しては、ただ口をパクパク動かしているだけですが、まあ使えないわけではありませんね。

例えば、ひそひそ声での陰口などを音声として複数乗せてあげれば、ちょっとした演出として使える場面はありそうな気がします。


二つ目に関しては、それなりに良い感じに動かしてくれているように思います。

おもらしによる場の盛り上がりを表現する女の子声のガヤなどを、しっかりと入れればそれっぽくはなりそうです。

さて、ちょっと話はずれますが、これだけキャラクターがみっちり詰まっていても、誰一人として、男の子に引きずられて『一緒におもらししてしまう女の子』がおらず、『一緒に泣き出してしまう女の子』もいないことに無能は驚きました。

……いやまあ、画像生成AIでおもらし画像を作っていると、ちょくちょくあるんですよね。

「お前も漏らすのかよ」

ってことが。

周囲で笑っているはずの女の子も一緒に漏らしていたりね。漏らしてないけど、泣いていたりね。

それがないのは「ふーん、やるじゃん」って思います。

元画像を渡して、そこから動画生成するi2vであるせいかもしれません。


上に示した通り、wan2.2の性能は上々だと感じました。

だから、動画生成AIもぼちぼちゲーム制作に部分的にでも活かしていきたいという気持ちはあるんです。あるんですけどねー……。

ただ、ループとか文章とかの兼ね合いもあるから、動画をゲーム的に活かすのって、元々けっこうハードルが高い気がするんですよね。

特におもらしの染みと水たまりね。アレが難しい。

おもらしにはあの厄介な極まりない2要素があるせいで、ループで処理するってわけにはいかないんですよねー……。(ループすると、水たまりやおもらし染みが戻ってしまう)

あとコマ数が多くて、途中のコマを間引くと動きがカクカクになっちゃいます。

バラしてpngなりwebpにしてしまうと、容量も喰いますし。

いい感じの音声も準備する必要が生じてきがちで……。

考えれば考えるほど、作業量も多く、めんどくさくなってきます……。

実現性がないように思えてきます……。


以上で、巷で話題のオープンソースの動画生成AI『wan2.2』の検討調査を終わります。

動画は性質上、ぱっと見で派手で目を引くんですけど、ゲーム制作に組み込んでいこうとすると色々と障害や制約が大きすぎるんですよねー。

無能のメインスキルである文章との相性も、基本的には良くないです。(音声との相性は良い)

この動画生成AI、ゲーム制作への良い活用方法を思いつく方がいたら、教えて欲しいです。


以下、

・動画生成AI『wan2.2』

・音声生成AI『AivisSpeech』(音声合成モデル:るな)

・テキスト演出:無能一文

で戯れに作ってみたキャラクターの自己紹介動画です。(左隣の席の日野みどり)

ついでにキャラクター設定でも載せておきますね。

※※※声が出るので注意!※※※

test

・日野みどり(出席番号:21)

新城えりか達のグループの下っ端的な存在。

基本的にはアホの子で、小心者のくせにすぐに調子に乗るタイプ。

勉強もできない。授業中はよく舟を漕いでいる。(居眠りをしている)

新城えりかの幼なじみであり、昔から彼女にいつもくっついていたせいで、自然と

『ギャル系グループの中に何故かいる普通の垢抜けない女子』

という立場になってしまった子。

新城えりか達の威を借りて、主人公を嘲笑してくることもしばしば。

コイツに馬鹿にされたらむかつくだろうなー、という雑魚っぽいキャラクターを目指したい。

全体的に子供っぽく、『青春』や『王子様』といったものに密かな憧れを抱いている。

是非この子には、テーマ曲として、『ボギー大佐』(「サル、ゴリラ、チンパンジー」の替え歌で有名なあの曲)を採用したい。

[活動報告/雑記]動画生成AIの活用方法についての検討を実施しました
[活動報告/雑記]動画生成AIの活用方法についての検討を実施しました

Comments

返信ありがとうございます!! 17年も前に作ったゲーム『くねくねFairy』を覚えてくださってとても嬉しいです!! AI生成コンテンツに関する考え方も理解しました!! 自分も参考にさせてもらいたいと思います!!

テルラ

初めまして。テルラさん。 『くねくねFairy』の頃から存じ上げております。 お心遣いありがとうございます。 さて、AI生成コンテンツに関するpixivFANBOXの姿勢・規約につきましては、規約が修正された当初から注目していたので、経緯も含めてある程度は把握しているつもりです。 ただ、生成AIを使っていようがいまいが、公開停止の判断はFANBOX側が独自の基準でするものです。 規約変更の主たる目的であろう『AI絵師』と呼ばれていた彼らと、私の活動内容は明らかに異なっているので、当初から、 「とりあえず、FANBOXさんの判断に委ねますー」 という感じで私はやっていますね。 有料記事はCi-enにほぼ移行済みで、FANBOXのはほとんど無料公開分ってこともあります。 結果、これまでFANBOXからは、何の警告もなく、非公開にされた記事も特にありません。 まあ、発見されていないだけかもしれませんが。 あと、製作中のゲームに関しては、ゲームが公開できる状況になった時、出せる場所・出せる方法で公開すればいいかなー、と思っています。 Fanboxにこだわりはありませんので、大丈夫です。 場合によっては、最悪、無料公開でしょう。

無能一文

はじめまして! いつも楽しく見ています! 「スッキリした子とスッキリしない子」 「トイレ待ち行列の中ほどから血相変えて抜け出す子を追った結果」 「間に合わなかった系おもらし」 「間に合ったけど空いてなかった系おもらし」 のイラストが好きで何回も見ています! pixivFANBOXは2023年5月にAI生成コンテンツの取り扱い禁止の方針を発表し、2023年7月25日に規約を改定して明確に禁止事項として定めています。 2025年8月現在でもおそらく「AI生成コンテンツは禁止事項のままになっている」と思われます。 自分も全然知らない人からいきなり「pixivFANBOXにAI生成画像を投稿することは~」とやたら上から目線で言われて物凄くイヤな気持ちになりました。(泣) pixivFANBOXではなくpixivであれば公開可能なようです。 せっかく時間をかけて作品を完成させても自分が公開したいサイトで作品を公開できないと寂しいと思ったので、一応コメントしておこうと思います。 (ちなみに私がpixivFANBOXに投稿していた生成AIで作成した画像は全て自分で非公開状態に変更しており、運営からの公開停止になったわけではないです。そして、なぜか生成AIを使っていない投稿がいくつか運営からの公開停止になりました・・・。)

テルラ

コメントありがとうございます。 無能もその子の笑い方が良かったので、思わずこうして雑記を書きたくなったというのが真相です。 別枠でリンクの意味するところは、すみません、ちょっとわからなかったのですが……。 マスクして、カットイン風に動画の一部分だけ挿し込むとかですかね。動くカットイン、みたいな。 まあ、現段階で無能が思いつく利用方法は、キャラ紹介動画程度ですねー。 あれも立ち絵を動かしてみていた時に、偶然口がパクパク動いていたので、合わせてセリフを当ててみただけです。 再現性は多分ないので、狙って他のキャラのを作れるかどうかはわからないんですよねー……。

無能一文

2つ目の動画の左の上にいる子の笑い方めっちゃ好きです。 ゲームにそのまま使うのは難しそうですね。 動画だけその場面の別枠でリンクするとかですかね? 伝わらなかったらすみません。 キャラ紹介動画音声もついて中々いいですね。 他の子も見てみたいです。

あおほ

コメントありがとうございます。 ほんと、よく発生したんですよねー。画像生成AIだと。 でもまあ、画像生成AIも、最新のやつはプロンプト理解力が高くなってきているらしいので、ならなくなっているのかもしれませんけどね。

無能一文

『一緒におもらししてしまう女の子』がおらず、『一緒に泣き出してしまう女の子』 これ私も知りますよねwwww

haruma


Related Creators