AIで作ったアバターでVTuber風に
明日のファクトリーオートメーションへようこそ。メインパーソナリティの高橋です。
クリスです。
はい、よろしくお願いします。
よろしくお願いします。
はい、クリスさん、お久しぶりです。
お久しぶりです。
はい、というわけでですね。
お久しぶりですね。
はい、お久しぶりですね。
まあ、YouTubeでしかわからないですけど、私、今日、ちょっと画像が違うんですけど。
そうだね。今日は、なんか、お姉さんがいましたね。
そうですね。バ美肉してますね、今日はね。
YouTuber、YouTuberになっちゃった。
Takahashiさんがこの辺が違うんじゃうとちょっと思いました。
そうなんですよ。ちょっとこの話からしますか。
そうだね、YouTuber話しましょうか。
そうですね。もしかしたらこれ、あれね、ポッドキャスター、ビデオポッドキャスターにしてるかもしれないですけど、
最近あれなんですよ、ちょっと、ラダコイっていうゲームを作ってたじゃないですか。
やりましたね。遊んでますよ。
そうですね。それで、AI費用が尽きたんで辞めてたんですけど、
ちょっとスポンサーが尽きそうになって、じゃあ課金するかと思ってクロードコードに課金したんですよ。
そうしたらちょっとAIの時間がちょっと余るようになったんですね、余裕ができて。
うんうん。
で、じゃあちょっとバビニックするかと思って、モデルを作って、今、今日、栗さんに見せようと思って。
すごいなと思って、最初見たらちょっと違和感がありました。
いつもTakahashiさんの声だけど、カメラマンお姉さんになってるという、メイド耳が合ってないという話。
そうですね。
TakahashiさんでYouTuberとか何か見ますか?
YouTuberは、見るときは見ますよ。人並みにね、好きですよ。
画像生成と顔トラッキングの仕組み
結構難しいんじゃないかなと思って、Takahashiさんに聞いたら意外と簡単だね。クロードを頼んだだけですよ。
そうですね。キャラクター作るのそんなに難しくないじゃないですか。
難しくないね。
そのCatGPとかのSAIツールにこういうアニメキャラを描いてくださいって言うと出してくれるじゃないですか。
うんうん、出してくるね。
で、あとはそれを1枚入れて、これをベースにライブ2Dっぽいモデルを作成する画像を全部出すようなプロンプトを描いてって言うと、30個ぐらいガーッと描いてくれるんですよ、プロンプト。
なるほどね。
で、それをCatGPにバーンって全部戻して、じゃあいっぱい画像がバーンって出てきて、できたやつまた入って渡して、やったらあとは待ってたらこの通りですよ。
すげえ。これ今Takahashiさんのカメラから連動してるんですか?
カメラから連動してますね。今僕の顔をトラッキングして。
右、左とちょっとフラフラしてて、たまに目がつぶったりとか、あれも実際Takahashiさん目がつぶってるんですか?
つぶってますよ。これあれですね、口角が合うと笑顔判定になるんですよ、こうやって。
へえ、なるほど、すごい。じゃあTakahashiさん今後ろで笑顔してることを想像したらちょっとあれだけですね。
そうなんですよね。
これね、自分の顔隠すと笑顔になるんですよ。
最近そういう仕様になるってことはわかりました。自分で作ったあれですけど。
これどこまでフリスビシティあるんですか?どこまでなんでかな?
じゃあTakahashiさん、このカメラから離れたらどうなるんですか?
カメラから離れたら多分初期状態に戻ります。
普通に立って左右フラフラしてる?
これ今止まったじゃないですか。
はい、止まってるんですね。
これがカメラの角から外れたやつですね。
どこまで動けるんですか?手でも上げるんですか?
手は上がらないです。上がらないようにしてます。
じゃあ上げようと思えば上げるってこと?
いや、それちょっと作り直さないといけないですね。
これ作ってるから制限するんですか?
そうそう、一枚の絵を動かしてるだけなんで。
これも肩とかちょっと動いてるじゃないですか。
動いてるね。
これ元画像をちょっとバラして、そこだけちょっと動くようになってるんで、元画像にない動きはできないんです。
なるほど、じゃあ手を上げた画像とか何色の画像を作ったら、その分もこの動作をフレームで差し込めるっていうイメージですね。
そうですね、そこまでいったらもう多分3Dモデルにした方がいいんでしょうね。
すごいね、高畑さんどんどんやらしい。次回3Dモデルとか高畑さんは。
それは先生がそれができるようになったらやるんじゃないか。
自分では多分やらないでしょうね。
高畑さん次は3Dなんですね。今回まだ若干2Dっぽいですね。
昔ちょっとやりたかったの、1年くらい前、2年くらい前、ポッドキャストやったくらいの時は、ちょうどUnityとVtubeモデルをリンクさせて、ちょうどKinectとかがあって、人のモーショントラッキング
みたいなのがめっちゃ流行った時期があったじゃないですか。
あったあった。
その時にちょっとやりたいなと思ったんですけど、僕の技術力じゃ到底できなくて。
AIで下がったものづくりの敷居
なるほど、それで今チャッピーが、チャッピー達来てて、その力借りて。
力借りて、今ついに今日Vtuberデビューですよ。
すごいなんか、色々作り、物を作るの、敷地がすごい下げましたね。
そうですね、これだって僕あれですよ、自分の実動で言ったら多分15分くらいですよ。
そうなんだ、ずっと放置。
ずっと放置、放置。実際時間は3時間くらいかかってると思うけど。
放置、放置プレイみたいな、放置ゲームみたいな時間。
すごい物作り、敷地が下げたなと思いましたね。
自分も最近のお客さんに、いろいろデモンストレーションとかMock作ってるんですけど、
全部チャッピー頼んだらすぐ作れるからね。
Mockだけど、Mockくらい出たらほんとすごいなと思って、
今まではこんなの自分で絶対作れないわと思ったやつを作れるようになったなと思いましたね。
いやそうだよね、ほんとに。
まあこの体験、まあすごい時代だなと思って、
やっぱりこれをためにご飯で食っていく人はちょっと大変だなと思いましたね。
そうだよね。
ああ、まだ終わったな。
一応これ、クリスさんのモデルも準備してたんですけど、
クリスさんはもうそれはちょっと私のポリシーに反するということで。
たかさん何すんの、すごいうるさいから。
3チームコアラガのリゾートはあるから、リゾートじゃないとやっぱり不満です。
じゃあ次ちょっとリソーゾーを作ってください。
リソーゾーを作るので、リソーゾーを作って、このリソーゾーを元についてやったら、
ちょっとたっぴり頼むわ、リソーゾーを。
ちょっとうるさいから、これだけ1時間後に喋るわ、リソーゾー。
まあてかベースの画像だけくれたらやりますよ、あとこっちで。
そっか、ベース画像。
ベース画像だけくれたら。
助けますね。
いやー楽しい時間になりましたね。
いやほんとにね。
でも見るのが悪いかわからないけどな、これ。
いやさあこれ、口のリップシンクっていうのかな、これ多分。
これ音声に連動して喋ってくれたり、あと口をこうやってアーって開けると、ちゃんとアーって開いたり。
いい時代ですよ。
なんかよくYouTuber見てるんですけど、聞きながら仕事してるんですけど、
ちょっとそういう仕組みなんだなと、たかさんが説明してくれた。
どうやってこういう動きをやってるんだろう、連動するんだろうと思って。
なるほどなと、たかさんが説明してくれた。
納得できたわと思いましたよ。
そう、ちゃんと視線をさあ、検示してるからさ、
左の右のモニターを見ると右に視線が行くんですよね。
そうだよね、なんか瞳が右行ったり左行ったりするんですよね。
そうそう前の画面2つあるからそれを行ったり来たり見てると。
そうそうだからね、クリスさんの話に集中してないかどうか、これでバレるっていう。
まあバレていいですよ。
いつもね、いつも誰も私の話を聞いてないので大丈夫です。
最後でございますか。
笑ってる笑ってる。
でもなんかね、やっぱりVTuber見るとなんか癒されるな、笑ってるのがお姉さんっぽいので超癒されるな、気持ちいいけど。
例えば声のたかさんでも。
VTuberっていいな、いいな、ずっと見てるだけだけど今こんな感じになったら。
だから次1週間後か2週間後はクリスさんのモデルも作ってやりましょうよ。
これどう実行するの?何か環境いるんですか?
これHTMLです、ただの。
これブラウザで動いてます。
たかさんが実際にディスコードを動いて映してるのはHTMLってこと?
HTML映してそれを仮想カメラでカメラに飛ばしてるだけですね。
やりたいんですけどちょっと説明してくださいというところまで。
Live2Dから使い捨て自作ソフトへ
最初さ、もうちょっと詳しい話すると最初はLive2DとかVTube StudioとかそういうVTuberが動くソフトあるじゃないですか。
それ用のモデルを作ったんです。
でもそれも一応作れたんですけど、ただめっちゃ時間かかったんですよ。
8時間くらいかかってそのモデルを作るのに。
他何もしてないけど、
グロードコードが勝手にVTubeのモデルを作るソフトを立ち上げて自分で勝手に設定をして、
それで作ってくれたんですけど、何かちょっと違うんですよ、やっぱり。
何が違うんですか?
もっさりしてる、なんか。
もっさりしてるの?
これもっさりってどういうこと?
例えば首とか稼げたらちょっとこうなるじゃないですか。
いい感じ。
ちょっと一瞬だけなら。
そうそう、それがめちゃくちゃ違和感。
ちゃんと自分で調整しなあかんのやろうなっていうところがいっぱいあって、
それを何回もグロードコードで打ち込んだりしたら治るんですけど、
クッソだるくてその往復が。
どんどん嫌いになっちゃってる。
でも何かやってるうちに別にこんな機能いらんしなあって。
自分ただ今この画面に映ってる女の子が自分の体のトラッキングをして、
で、表情もちょっと反映されて口も動いてぐらいしか別にやらんでいいよねって思ってて。
これも何かそのソフト作った方が早いんじゃねみたいな。
専用ソフトね。
ていうのでVTuberのソフト使い捨てみたいな感じで今日こしらえて今に至る。
なるほど。
すごいなこの発想すごいな。
使い捨てのソフトを作るの発想すごいな。
終わっちゃったらたぶんずっとこの制定屋に悪ずっと的押しながらやれやれと言うかもしれないな。
使い捨てという言葉のコンセプトすごいね。
でも何かAIが最初に何かこんな感じですかみたいな感じでその使い捨ての画面みたいなの出してきて、
何かこうこれだよこれみたいな感じでやってたら、
どんどんVTuberのモデルを作っていくことに何かそれから離れてきて、
あれ何か俺のモデルと違うみたいな。
やりたいことずっとずれてるってこと?
そうそうそう。
最初のが良かったのになって思って。
じゃあこれ最初のやつをそのままソフトにしてもらえれば良くないみたいな。
結構スムーズですね思ったより。
何かもうちょっと何か柄からガチャガチャって動いてると思ったんですけど。
めっちゃ軽いよ10メガぐらいですからねこのHDM。
10メガバイトぐらいですから。
普通にメールで送れますよクリスさん。
私はメールで10メガ大丈夫ですよ。
送ってください。
そうだよね。
でも高須さんこのキャラクター何かこだわりあるんですか?
いや特にないです。
ただ僕はナッキボクロが好きなんでそれが付いてるのが良いなって思ってます。
なるほどね。
高須さんもうちょっとこだわりが堅いと思ったんですけど。
あんまりこだわり強くするとなんかあれじゃないですか出したくなくなるじゃないですか。
確かにね。
そのなんか完全じゃないみたいな。
俺のこだわりがあるのにこの完全じゃないこれを外に出すのはちょっと嫌だなってなるんで。
あんまりこだわり入れずにまずはもう叩き台レベルで。
どっかでねそのこだわり版はバンって変える可能性ありますけど。
高須さんVTuberそしてデビューするときにまだこのゾーンに身で定着しちゃうじゃないですか。
VTuberのじゃあ名前つけますか。
そうそうVTuberデビューと一緒に作ってると思ったんですけどずっと。
今はあれですよVTuberも厳しい時代ですからねそんなちょっとやるだけじゃダメですよ面白くないと。
面白くないともう実況ないんやないとなライブで。
そうなんですよね。
YouTubeライブをラジオのようにつけっぱなしにする
いやでもさやっぱりなんかその僕2年やってきたわけじゃないですかねビデオも。
そのYouTubeライブずっとやってきたわけじゃないですか。
で僕実はちょこちょこ過去回見直してるんですよ過去の回をね。
100回分あるからたまにそのこの時どうやったかとかYouTubeを見返してる時があるんですよ編集のために。
やっぱりおっさん2人がその喋ってるがずっと続くのは辛いなっていうのが思うことがあって。
でもこれはYouTubeだからでしょまあまあSpotifyだったら多分声しかないからいいんですけどYouTube見るとやっぱりおっさん2人だとしんどいな。
私もしんどい。
でもさ結構YouTubeライブ見てくれてる人多くてさ。
嘘そうなの。
最近普通に100回以上回ってるよYouTubeライブを。
私ねてきりつけたらもう仕事行くと思ったんですけどもうたっぷり落ち着いて仕事つけながらじゃないんだねライブ見てる人いるんだ。
まあ見てはないと思うけどね多分その長いからいいよねって思ってる人たちは多分いるんだと思う。
なるほどね。
5時間とかあるじゃないですか僕らのYouTubeライブって。
つけっぱなしするにはちょうどいい長さらしい。
分かるわでもたまにそういう3,4時間ラジオつけっぱなしするんで本当に聞きながら何かやるみたいな感じですよ。
そうそうだから聞いてるっていうかつけっぱなしにしてるみたいな。
テレビは同じ素材なんですよ。
まあでもラジオってそういうもんだからね。
そうそうこういうところいいよねつけっぱであんまり体ぶたはないし隠れるしいいよね。
そうそう。
なるほどね。
まあそういう感じでねちょっと今日は私女の子の一緒になってるわけですけど。
そうですね。
私も次はもう自分こだわりをとりあえずまた。
簡単に試せるAIアバター制作
いやでもさなんかパッと作った割にはそれなりに良くない?
いいね。
いいね。
これ3時間かけたらたかさん実際動くから時間十分でしょ?
十分。
十分。
いいじゃなかったわ。
チャピーじゃないとチャピーじゃないとライフ2Dなんちゃら使ってくださるって言って嫌だ。
嫌です。
あーそうそう。
だからラダコイのゲーム作った時の反省が活かされてるからまあ実際ね始めてたらもうちょっと長いと思うけど。
いいねこれ。
いい動きだし思ったよりスムーズだし。
もうちょっとガタガタと思ったんですけど全然いいな。
画質も良かった。
そうなんだよね。
いやーこれちょっとwebカメラがちょっと良くないやつ使ってるからちょっとカクカク触れてるけど。
そこまで?
あ、そうカメラの画質がもうちょっと捉えるフレーム数が多くてそれまでスムーズに動けるってこと?
そうですね。
いや普通になんか今日ノートパソコンのさその前に描いてるフロントカメラあるじゃないですか。
あれだったらもっと綺麗でしたけどね。
なるほど今どんなカメラ使ってる?
今なんかその辺で買ったジャンクの300円ぐらいのwebカメラが付いてるよ。
そういうカメラ売ってるの?300円のカメラ。
いやいや秋葉原とか行ったらこう売ってるじゃないですか。
あれはジャンクマーケットですね。
そうだからちゃんとしたwebカメラ欲しいんですよね。
私のカメラどうですか?あんまり微妙?
いやいや全然。
全然?
いやいいと思うよ。
じゃあ私はこのカメラ使ってYouTuberでも大丈夫ってことですね。
そうそう全然大丈夫ですよ。
なるほど。やっぱりLive2Dいらないですって言われた。
もう全然いらないですって。
VTubeStudioなんだ?
VTubeStudioはそのなんか再生する時に使うソフトみたいですよ。
でもいらない。VTubeStudioも使いたくない。
使いたくない。
どんどん要件をよく影響していく。
結局やっぱなんか自作が早いね。
自作が。
そう早い。
やめてよ。
確かにこういうソフトを使っていじってこのペンを擦るより
一発で使い捨てる自作が早いかもしれないな。
そうですよね。
たかさんそうだな今自作で。
いやー私もやろう。
ちょっと今チャッピーの壁打ちしようとしてます。
大丈夫これ残ったの?
今日収録終わったんでペットボトルでゴロゴロしながら
壁打ちしたいと思います。
これちょっと送りますねこの後。
このファイル送るんでこれチャッピーにぶち込んで
こんな感じでって言ってくれると思うんで。
押す押す。
ありがとうございます。
というわけでまず1本目ですけどVTuberになりました。
VTuberでデビューしました。
デビューではないけどね。
やってみたよって思ったより簡単にできたから
皆さんも是非クロードコードだとか
ChatGP契約してる人はやってみていただければいいかな
というふうに思います。
多分3000のプランでも全然やれると思うので
ちょっと止まるかもしれないけど途中で
今はちょっと壁打ちしてるところなんです。
そうですね僕の使ってるこのファイル欲しかったら
言ってくれれば送るんで。
隠そうでもないですからね。
チャッピーに投げ込んで同じもの作ってくださいと。
というわけでまず1本目ありがとうございました。
ありがとうございました。
