1. クリエイターズAI
  2. 効果音・対話キャラクター・画..
2026-10-21 04:55

効果音・対話キャラクター・画像AR、創作を広げるAI|2026年10月21日

生成した映像を、どう作品や体験として仕上げるか。
映像から音をマルチトラック生成するVARCO Sound、声でやり取りする音声AIのEleven Realtime、眼鏡のAR試着に使う生成AIを取り上げます。効果音制作・対話キャラクター・画像ARの三つの視点から、作品づくりに直結するAIの使い方を考えます。

今回のトピック
・VARCO Sound:映像に合う音を、個別トラックで編集
・Eleven Realtime:音声対話システムから、観客に応答するキャラクターを考える
・Perfect Corp.:眼鏡を外さず試着できる画像AI

出典・関連リンク

VARCO Sound公式
https://sound.varco.ai/en

NC AI配信プレスリリース(2026年10月20日)
https://www.prnewswire.com/news-releases/nc-ai-officially-releases-varco-sound-the-generative-ai-sound-production-service-302913745.html

ElevenLabs公式・Eleven Realtime発表(2026年10月20日)
https://elevenlabs.io/blog/realtime

Perfect Corp.公式・Glasses Removal解説(2026年9月30日)
https://www.perfectcorp.com/business/blog/general/ai-glasses-removal-virtual-try-on

Perfect Corp.配信プレスリリース転載(2026年10月20日、Business Wire配信)
https://wbnstv.marketminute.com/article/bizwire-2026-10-20-perfect-corp-launches-genai-powered-glasses-removal-letting-glasses-wearers-try-on-new-frames-without-taking-theirs-off

補足
・2026年10月21日朝に確認した情報に基づきます。
・VARCO SoundのMCP対応は公式サイトで「Coming Soon」とされており、提供済みとは扱っていません。
・VARCO Soundの10月20日発表は、サービスの初公開日とは断定していません。
・Glasses Removalは9月30日の公式ブログでも紹介されており、10月20日を初公開日とはしていません。
・Eleven Realtimeの発表日は公式ブログの10月20日表記に基づきます。音声対話システムであり、動画生成モデルや単純なナレーション生成機能ではありません。
・観客と話すキャラクターや声に反応する作品は、番組が考える応用例です。日本語の応答品質や実作品での性能を保証するものではありません。
・製品の機能説明は各社発表に基づきます。番組での性能実測は行っていません。
・制作への活用例は、発表された事実とは分けた番組の考察です。

企画・制作:gamaccho
ナレーション:AIナレーター ひまり
クリエイターズAI ─ 創作のヒントを、毎朝。
https://listen.style/p/creators-ai

感想

まだ感想はありません。最初の1件を書きましょう!

00:00
おはようございます。クリエイターズAI、AIナレーターのひまりです。 2026年10月21日、水曜日。今日は、映像を作ったその先のお話です。
映像に音をつける、キャラクターと会話する、画像をその場で変える、創作の幅を広げる、3つのAIの話題をお届けします。
まずは、映像に合わせた音を別々のトラックで作るAIです。 韓国のNCAIが、10月20日付の国際向け発表で、バルコサウンドを紹介しました。
文章、画像、動画を入力して、場面に合う音を生成するサービスです。 注目したいのは、音をひとまとめにせず、個別のトラックとして扱えること。
必要な音の音量を変えたり、一部を置き換えたりできます。 自然な言葉で編集を頼むサウンドエージェントも用意されています。
ここからは、制作へのヒントです。 例えば、雨の中を歩く短い映像。
雨、足音、遠くの車を別々に調整できれば、足音を強調して孤独を感じさせたり、街の音を増やして日常の一場面にしたり。
映像を変えなくても、受け取る印象を変えられそうです。
手元の10秒の映像で、音の演出だけを変えた2つのバージョンを作ってみる。
見比べると、自分が伝えたかった感情に、どの音が聞いているかが見えてきそうです。
大切なのは、音を増やすことより、何を聞かせたいかを選ぶことです。
なお、公式サイトのMCP連携は、まだ近日対応の表示です。 今すぐ使える機能とは分けて考えましょう。
2つ目は、声でやりとりするキャラクターにつながる音声AIのニュースです。
11LABOは、公式ブログの10月20日付の発表で、11リアルタイムの提供開始を伝えました。
相手の声を聞き、返答を考え、声で答える。
その一連の流れに加え、話し始めるタイミングや、相手が話に割り込んだ時の対応も、まとめて調整した音声対話システムです。
自然な会話を重視するミニと、複雑な処理を伴うやりとりに向くMAXの2種類があります。
11Agentsと開発者向けのリアルタイムAPIで利用できます。
ここからは、クリエイターにとっての可能性を考えてみます。
録音されたセリフを再生するだけではなく、観客の問いかけにその場で答えるキャラクター、
あるいは声をかけると反応が変わる作品、そんな体験を試作する選択肢になりそうです。
ただ、返事が早いことだけで魅力的なキャラクターになるわけではありません。
何を知っていて何には答えないのか、迷った時どんな言葉で返すのか、その設計が作品の世界観につながります。
まずは、短いやりとり一つに絞って、思わぬ質問や途中の割り込みでもキャラクターらしさを保てるか確かめたいところです。
03:02
実際の日本語での応答や使い心地は、作品の条件に合わせた検証が必要です。
最後は、メガネをかけたまま別のメガネを試着する画像AIです。
パーフェクト社は10月20日付の企業発表で、生成AIを使うグラシズリムーバルを紹介しました。
カメラに写った自分のメガネを画面上で取り除き、その上に新しいフレームを重ねる仕組みです。
ライブ映像だけでなく写真にも対応するとしています。
メガネを外すと試着した自分がよく見えない、その困りごとを画像処理で解決しようとする技術です。
ただし同じ機能は9月末の公式ブログにも登場しているので、昨日初めて公開された技術という紹介ではありません。
ここからは表現へのヒントです。
生成AIは何もないところから絵を作るだけでなく、今見えている映像の一部分を変える道具にもなっています。
インタラクティブ作品を考えるなら、見た目の変化だけでなく、その変化が鑑賞者のどんな不便や驚きにつながるかを考えたいところです。
一方、隠れた顔を生成することと本当の姿を確認することは同じではありません。
便利な表現と記録としての正確さは区別が必要です。
今日の3つの話題に共通するのは、生成した素材を体験として仕上げる視点でした。
音を選ぶ、対話の振る舞いを考える、使う人の立場から映像を変える。
今日、手元の作品に1つ加えるなら、あなたはどこを変えますか?
クリエイターズAI ひまりでした。
創作のヒントを毎朝。
それでは、良い一日を。
企画制作はがまっちょ。
ナレーションはAIナレーターのひまりがお送りしました。
04:55

コメント

スクロール