AI動画生成モデル「シーダンス」の紹介とハタラカザウルスの初アニメ化
AIメディアを運営しているMiraLabの平岡です。 この番組は、AIメディア運営者が、AIの最新情報や論文、ユースケースなどを30分で解説し、
AIの未来を考察するポッドキャストです。 ということで、今日も二人に来ていただいております。
お願いします、南です。 ヌメです。よろしくお願いします。 お願いします。ということで、今日はアニメーションを作ってみよう。
ということで、ヌメちゃんがね、あの絵描きなんですよね。 絵描きというか、デザイナーというか、あのメインキャラクターがいるんだよね。
そうそうそうなんです。働きたくない恐竜のハタラカザウルスっていうのを描いていて、まあ、ちょくちょくね、自分では動かして見てるんです。
カクカクながらね。 ああ、そうなんだ。そうそうそうそう。まああの、なんだ、ジフアニメーションみたいな感じで、
パラパラ漫画の延長戦みたいな感じですね。 なるほどね。超めんどい。めんどくさいよね。マジで。半端ない。
コマごとに描くってことでしょ。 もう本当に、二、三十枚描いて、2秒とかでキレてる。いつも。なんやねん、それ。もっとあるだろ。なってる。
なるほどね。じゃあ今日はそれをAIで作っていこうと。 ああ、絶望したらどうしよう。こんな簡単なのか。つって、あるよ。
そっちの絶望あるんじゃない? あるぞ。ありそう。あるぞ、これ。
今日はですね、じゃあシードダンスっていうのを使っていこうかなって思うんですけど。
シーダンスじゃないんだよ。 ああ、シーダンスか。俺、ずっとシードダンスって言ってたわ。
すごいね。楽が。楽がすごい。
シーダンスはですね、TikTokで有名なバイトダンスが作ったね、AI動画生成モデルなんですよ。そうなんだ。
そうなので、中国の巨大企業っていうところなんで、今の日本だとアクセスできないんですよ、実は。そうなの?このモデルに直接はね。
だから途中違うツールを経由して挟んで使うみたいな感じになりますね。
このシーダンスがすごくクオリティが高いっていうことで、オープンAIから前、ソラっていう動画アプリ出てたじゃないですか。
あれとか、Googleのベアとか、これらよりも圧倒的にいいっていうことで。
でも確かにこのシーダンスで作った動画みたいなのをちょっと調べて見てみたけど、すごいね。すごいですよね。
綺麗だし、なんかもう、それでええやんって気持ちになってしまうよね。
最初に絶望的なこと言うとですね、いろんなサイトから使えるんですけど、今日はYappaっていうところを経由して使おうと思うんだけど、
1回の生成コスト、見てもらうと分かるように10秒で200円ぐらいします。
高えな。昔の電話か?
だから1分作ろうと思ったら1200円ぐらいするってことですよね。
失敗とか諸々考えると、まあまあ結構します。
すごく申し訳ないですね。
申し訳ない。
お金かかるね、すごいね。
商用的に作ろうと思うと結構回収困難な感じはするんですが、
無理です。
時間を買うかって。
今後ね、安くはなっていくと思うのと、
シーダンス2.0なんですけど、今日使うのはね、7月頃にはシーダンスの2.ちょいが出るらしいです。
2.ちょい。
2.5なのか2なのか分からないですけど。
新しいバージョンが出るらしいです。
なのでその点もちょっと知っておこうという。
今の感じがどういうものかっていう感じでございます。
早速なんですけども、
ヌメちゃんの動きを出してみたい画像を僕にいただいてもいいですか?
ヌメちゃんに今絵をその場で描いてもらいました。
生成コストと「ちいかわ感」の出現
これをシーダンスにぶち込んで作っていこうと思うんですけど。
どれだけやってくれるんですか?
プロンプトちょっとどうするかなんですけど、
プロンプトはクロードに作ってもらうかと。
いいですね。
思いますので。
かなり信頼してますね。クロードさんのことは。
ちょっと音声入力で、こういうアニメ作りたいというか、アニメーション作りたいみたいな要望をいただいてもいいですか?
恐竜が二足歩行の恐竜が激しくダンスをしている動画を作ってください。
絵柄は緩い感じでお願いします。
参考になるような作品とかあります?
ちい皮にしよう。
この動画はシーダンスを使って制作するので、
シーダンスのベストプラティックスを調べてからプロンプトを作ってください。
できましたね。
クロード君がですね、このシーダンス使う上でのプロンプトのコツみたいのを調べてくれるので、
それを元にプロンプトを作ってくれました。
ありがたいね。
日本語版とイングリッシュバージョンも作ってくれてるんですけど、
こういうモデルって結構英語が強い場合が多いので、
英語を使ってみましょうと。
先ほどの内容が、ずんぐりした二足歩行の小さな恐竜のキャラクターが、
画面の中央で全身を使って激しくダンスをとっている。
太い輪郭性のフラットな2Dアニメ調合ってるね。
確かに。
で、もちもちした手描きアニメーション。
大丈夫そうだね。
いけそう。
じゃあちょっとこのプロンプトを使ってみましょう。
これでできちゃったら、もうこれで作るよね。
このシーダンスにこれを突っ込んで、で、画像にうめちゃんの絵をぶち込んで。
じゃあこれでいきますか。
はい。
で、待ってね。これ要素って何だろう。
参照動画、参照音声。
だから要素とか動画とか、
はいはい。
ぶち込めるっぽいっすね。
それだったらさ、もうさ、はたらかザウルスのさ、一回作ったものをさ、ぶち込んだらいいの?
あるならそれでもいいかもね。
YouTubeにあるよ。
あ、そうなの。じゃあ一回これで作ってみて、次やってみましょうか。
送信!
頼む!
どんぐらいの時間かかるんですかね。
どんぐらいの時間。
残り約8分って書いてある。
おーすごい!
まあまずはこのペラペラの画像一枚で何をやってくれるかということですね。
そうですね。
これでもちなみにどうなんですか?この、やっぱり自分で書きたいよなみたいな欲は。
あー自分で書いたほうが楽だよね。そのなんか細かい指摘をさ、プロンプトで入れてくっていうのは絶対思い通りにならないと思うから。
まあそうだね。細かい描写はそうだよね。
で、直していくうちにいっぱい課金されてるわけでしょ。
そうだね。
恐ろしいよね。
まああとはなんかさ、そのポリシー的なさ、ところは。
ポリシーね。まあ自分で書いたほうがいいよねとは思うよ、結局ね。
まあね、結局はね、まあその音楽の制作のときもそうでしたけども。
で、10ドルのやつに課金したんだけど、月で1000クレジットもらえるんですよ。
あ、へー。配給があるの?
そう、毎月1000クレジット配給があって。
へー。
で、ここにね、書いてあるんですよ。この消費するクレジットが。180クレジット。
じゃあまあまあいいね。
だから200円ぐらいだね。
高い!
だから200円分の価値が今ここに出てくるっていう感じなんで。
まじかよ。
5回までだったら生成できるわ。
うわー!こりゃすごい商売だ。
これ、嫌なことからすぐ逃げる?
あ、そうですそうです。それがMVですね。嫌なことからすぐ逃げるんだよ、みんな。
そうだね。あ、すごい。PVだ。
そうそうそう。アニメというか、ミナミ君とやってる酒かすってバンドで曲を作って、それに対して絵を当ててるっていうのをちょくちょくやってますね。
なるほどね。
そうそう。
これは大変だ。
めんどくさかったなり。
これ最初にさ、ストーリーボードみたいなの作るの?
それがですね、そんなことはしないです。
あ、もうその場で描いてってみたいなこと?
もうその場で描いて、できることを描き集めてやってる感じかな。
じゃあこれ動画をアップロードしまして。
あれか、8秒しか生成できないから、どこを真似たいかによるよね。
確かにね。走ってるとこが一番わかりやすいかな。
なんか踊ってったっけな、これ。
じゃあここまでを参照させますか。
はい。
ヘイ。
あ、なんかできてんじゃない?これ。
なんかできてるぞ。なんかしかも良さそうな感じあるぞ。
1個できましたね。
わーい。
ちょっと見てみましょう、8秒の。
お、いいね。
激しいかはわからないけど。
怖っ。
うわー。
うわ、怖い。怖い。
ちいかわ感が出ちゃった。
しょうがないね。
なるほどね。
勝手に目をつけられた。
怖い。
怖いね、これは。
なんか一応落ちみたいな。
確かにね。
やってくれたんだろう。
落ちをつけないといけないからね。
あ、でも動きはいいよね。
最初のこの感じいいね、でもね。
これは。
これすごいな、後ろまで。
そのさ、背中になるとこすごいと思うわ。
確かに、背中になるとこちょっともう一回。
何、背中になるとこって。
くるっと回るとこ。
そうそうそう。
もうちょっと先かな。
うん。
あ、ここね。
そう。これをさっきの絵からここまで勝手にやってくれるのは結構すごいと思う。
なるほどね、確かにね。
あの回転だけでも結構な枚数を描くよね、だって。
そっかそっか。
ここね。
「柔らか戦車」風アニメーションへの挑戦と評価
そうそうそうそう。
ここまで解釈してくれるんだっていうのは、やるじゃねえかって感じですね。
なるほどね。
そうかもね。
うん。やるじゃないか。勝手に目つけられたけど。
あれ。そうだね、ちょっとあれは。
恐怖映像みたいな。
ちょっと怖かった。
うわーい。
片目だけだった。
怖い。
片目だけっていうのが怖いよね。
いいね。これじゃああれだね、希望のさ、何々みたいにをさ、それこそちーかわじゃなくて、柔らか戦車みたいにとかになったらどうなるかは気になりますね、全く同じ素材で。
うん。
柔らか戦車?
そう。
じゃあちょっとクロードに作ってもらいましょう。
柔らか戦車知ってますか?
僕は知らないです。
あ、そうか。
うん。
いいよ。
いいんだ。
そう。つつくと腐るから。
つつる、え?腐る?
そう、腐る。桃のように柔らかいなんか戦車みたいな生き物のアニメーションなんですよ。
うーん。で、つつくと腐るの?
そう。っていう、まあなんか歌があるのね、それこそ。
へー、そうなんだ。
なんか割と働かざうるすのこの曲と絵を合わせれば私は柔らか戦車にこう感化されてる部分あるかもね。
あ、そうなんだ。
うん。られこさんっていう人がやってた。
なるほどね。じゃあ、絵柄を柔らか戦車みたいにしてほしいです。
プロンプトを書いてください。
あとさっきのプロンプトだと急に目をつけられたので、目は作らないようにしてほしいです。
キャラクターの外観を壊さないようにとか。
あー、確かに確かに。
なるほどね。
あくまで柔らか戦車を雰囲気だけでみたいな。
そうね。
いやー、いいな。これをきっかけにまたちょっと柔らか戦車が盛り上がってくれたらだいぶ嬉しいですけど。
そっち。
そっちだ。
柔らか戦車が盛り上がってくれた方がいいな。
だって一応さ、あれだよ。太鼓の達人にも入ってるし、カラオケでも歌えたからね。
先ほどの動画を添付したバージョンができたので、ちょっと見てみましょうか。
いかほど。
こんな感じです。
一緒や。
一緒や。
あ、ちょっと跳ねた。
あー。
あー、上がってくれる。
あー、なるほどね。
おー。
あ、すごい。
めっちゃいい。
あれだね。今回は破綻しなかったね。
あー、すごいすごい。
最後ジャンプする前のところ、かわいい顔してた。
あー、いいね。
おー。
これは確かにいいな。めんどくさいもん、あれ書くの。
やっぱそうなんだ。
うん。
これ単発単発だったらいいのかね、そう思うと。
確かに。
こういう機能がAIアシストみたいな感じで、今このGIFアニメーションを短い分数で作るアプリにくっついてくれたらめっちゃ最高だけどね。
あー、なるほどね。
なんか似たようなのはあるんですよ。腕どことか指定して、それをこういうふうに動かしてほしいみたいなのはやってくれたりするんで、もうちょっと進化したらね、ジャンプとかやってくれたらめっちゃいいな。
確かにね。
できました。
これが柔らか戦車風のやつですね。
多分解釈間違われてる気がする。
あー、さすがです。
あー、怖い。
キメロだ。
あー、いいですね。逆に。
あー、いいですね。
まあまあ、こうなるよね。
まあ、そうなるよな。
そうだよね。
あー。
あー。
まあ、確かにね。
あー、怖い。
あー、いいですね。
キメロだ。
これはこれで愛おしいですね、かなりね。
めっちゃ怖いけど、だって。
夢で出るやつ。
めっちゃ怖い。
あと2回くらい生成できるから、ダンスじゃなくて、なんか違うの、なんかもっと難しそうな動き指示してくれる。
複数キャラクターでのアニメーション生成とアスペクト比の問題
転がるとか?
あー、確かにね。転がって倒れるね。
走って倒れて転がって。
あとバトルするとかね。
あー、確かに。
結構難しいんだよ、バトルとかって描写が。
もう1回聞いたらいいの?そしたら。
もう1人登場させてみる?
いるいる。
手を繋ぐとかできるのか?
あー、なるほどね。
喧嘩仲直りみたいな。
8秒の間で。
そう。画像データ、黄色い、黄色いなんか鳥的なものが。
あ、これだね。
あ、そうそうそうそう。
いいね。
OKOK、じゃあこれで作ってみましょう。
これ横にするか。横にして。
おー、いいですね。
いいね。ジャンプぐらい激しい戦いをしてほしい。
10秒にしようか。
おー。
うわー、超弱だー。楽しみだなー。
え?ちょ、何?
満たしてないって。
何を?
アスペクトがダメって書いてあんな。
0.4から2.5の範囲にある画像を使用してください。
ちょっとないってかわかんないわ。
OK。
わかる?
うん。
さすが。
はい。
じゃあこれでアスペクト比またあるじゃない。
あ、そっか。
横にしてみて。
いけるかな?
あ、いけましたー。
おー。
すげー。
いけー。
で、こっから8分ぐらいかかるでしょ、また。
はい。
8分クッキング。
8分クッキング長いね。まあまあ。
まあまあいいご飯が作れますね。
あんまり刺さんなそうだね、8分は。
8分クッキング。
そりゃ作れるだろうぐらいの。
斧ができる。
いいなー。ちょっとこの間にまさやに絵描いてもらおう。
あ、そうね。
せっかくだし。
絵心ある方?
ないよ、全然。
楽しみですね。やっぱそういう方が。
なんかこの間ね、ワークショップで絵を描いて、自分を表現してみようみたいなの参加したんだけど。
すごいのに参加してるね。
そう、なんか展示会に行ったんだけどさ。
なるほど。
いろんな企業が出展するね。
そこの中の1個のワークショップがあって、そこは指で描くんだよ、絵の具。
あー、いいね。楽しいよね。
あれがすっごい楽しくて。
おー。
絵楽しいなってなった。
いいねー。
寿司描けばいい?
寿司むずいそうだよね、でも。
むずそう。
寿司むずそう。
せっかくだし、このままTシャツにできたらラッキーだから。
なんかキャラクター描いてもらう?
キャラクター?
寿司?寿司でもいいか。
寿司T作ろう。
寿司T作ろう。
寿司ね。
それ売ればいいじゃん、オフ会の時に。
うわー。
いいね、寿司Tシャツ。
なんだよ寿司って、むずいな。
これうまいか下手かわからんじゃん。
原画バージョンとAIで作り直したバージョン。
かわいそう。AI絶対完成度高いじゃんそんなの。
それは無理だって。
ちょっと待って。
なに?
寿司でしょ?
ちなみに指2本タップで消せたりするよ。
OK、ありがとう。
1個前に戻ったりする。
独特ですね、描く順番が。
寿司とキリンがいいな。
これはTシャツにできないかもな。
できるか。
できるんじゃない?
できそうだね。
色付いたら結構かわいかった。
美味しくなさそう。
寿司はむずいよね。
確かにね、悪かったね、レイがね。
猫も描いてほしいな。
猫?キリン?
何がいいかな。
AIアニメーションの可能性、コスト、著作権、そしてアニメーターの重要性
できたできた。
遊んでる間に。
一回ちょっと見てみましょうか。
でけえな、なんか。
こちらが柔らか戦車風のスタイルで、
まず2体が向かい合い、短い手でぶつかり合い。
ぺちぺち叩き合うように、じゃれ合って戦う。
かわいい、かわいい。
で、最後は手をつないで歩いていくと。
いいね。
友情。でけえな、なんか。
いいね。
かわいい。
めっちゃいいじゃん。
すごいかも。
めっちゃええやん。
すごいじゃん。
めっちゃええやん。
なるほどね。
なんかこの水彩タッチになったんだね、なぜか。
柔らか戦車なんじゃない?これ。
これが。
違うかな。
ぼやぼやしてるね、なんか。
かわいい。
めっちゃいい。
なんか自分で作るのめんどくさいな、これ見ると。
これは。
これ結構むずいことしてるよね。
そうだよね。
という感じで。
すばらしい。
ございましたね。
こんなのが作れるよと。
1億点満点です。
これすごい。
これでもさ、
曲ありきにしたとしてさ、
この曲に合わせてなんか踊ったりなんだりしてるみたいなやったら、
課金する3分何秒とかの部分課金したらさ、
とりあえず1本できる。
すぐできるよね。
できるんじゃない?
そうだね、課金しちゃえばとりあえず作れるね。
確かにね。
たぶんストーリーボードみたいなの作って、
ここはこういう動きで、こういう絵柄でってちゃんと指定してあげたら、
何分から何分のサビで、ここはこういうやつっていうのバーってやったらできちゃうんじゃない?
できそうだね。
1回やってみるか、それ。
ちょうど今ね、曲をレコーディングしてるんですよ。
そうだよね、言ってたね。
それを自分の絵を使いつつやったら、
ちょっと1回クロードにいくらかかるか試算だけしてもらおう。
確かに、それはいいかもしれない。
これでも、若干この顔の輪郭みたいなところ気になるところあるけど、
いやすごいね。
いやすごいね。
いやすごいね。
どういうこと?
あのさ、目が線になるところもさ、ほんとあんな感じだよね。
そうだね、思った通りですね。
思った通りになってるよね。
ここの倒れたところの、ああいう顔の絵もあるもんね。
すごいや。
すごいね。
今日はアニメーションをちょっと作ってみようの回なんで、
よかった、これをそのままクロードでホームページ作ったと思うんだけど、そこにちょっと差し込んでみるとか。
確かに、それいいかも。
そういう使い方もできそうですよね。
ありがとう。
あとでデータちょうだい。
はい、もちろんでございます。
すごいね。
ちょうど、うちら平成生まれなので、平成を忘れないようにということをテーマに1曲ね。
そんなことテーマにはしないんですけど。
そんなことテーマにはしないけど、リズムとか歌の乗せ方みたいなのを、
ちょっと平成っぽくしてみよう。
なるほどね。忘れないようって。
そうそう、っていう曲が1曲あって、あれは確かに作画負担が半端なさそうだなとは思ってたから、
あの曲についてはこれ使ってもいいかもな。
なるほどね。
と思いますね。
夏的な、夏をテーマに海沿いで楽しそうな、手を叩くみたいな。
手を叩くとかを入れたいのですが、めんどくさいと。
なるほどね。
欲しいけどめんどくさい。
なるほどね。確かに作れそうだね。
ね、これはいいかもしれない。
確かに。ちょっとね、お金かかりますけども。
そうなんですよね。
はい。
ハウマッチ問題ですね。
ハウマッチは結構あるかもしれないけど。書く、まあ早いはね早いと思うからね。
うんうん。
ちょっとぜひチャレンジをしてみてくださいと、お願いしますと。
素晴らしい。素晴らしかったです。
うんうん。
すごい。
だから世の中のアニメーターはすごいですよ。
それは本当そうだね。
もうさすがにこれを見て、すごいアニメーションこんなのでできちゃうじゃん。
じゃあアニメーターいらないねとはやっぱりならないというか。
まあそうですね。
アニメーターは必要ですよと思うというか。
現段階では全然必要だよね。
アニメーターの結晶がね、今これになってるわけだから、すごいよねって思う。
そうだね。いろんな意味でね、ちょっと怖いよね。
そうね。
それこそ乗せられないような判件形もいっぱいあるので。
確かにね。
そういうのが奪われて誰でも使えるようになるっていうのはね、ちょっと問題でもあるなとは思うから。
確かにね。嫌な二次創作とか出てきそうですね。
なのでね、ちょっと使う時も基本的には判件形は気をつけながらで作ってもらえればと思います。
はい。
番組の感想、質問、ミートアップ告知
それでは今日は番組の感想、質問を深掘りしてほしい話題などお待ちしております。
お便りフォームは概要欄からお待ちしています。
あと、ミートアップ、11月の28日に決定しまして、時間は多分お昼からやるんじゃないかなと思っております。
ぜひ来てください。
来てほしいです。
AI未来話の番組フォローとレビューもお願いします。
来週も木曜にお届けします。
通勤通学の30分にAIの未来をキャッチアップしていきましょう!
イエーイ!
それでは本日は平岡とお相手は
南と
ヌメでした。
ありがとうございました。
