プレスリリース要約
RANDOM MOTION TECHNOLOGYは、AIミュージックビデオエージェント『freebeat.ai』において、楽曲の再生中にビジュアルをライブで演出できるリアルタイムAI動画生成機能の提供を開始しました。わずか5〜7秒の低レイテンシーで音楽の感情やリズムを解釈し、自動で映像を生成する新技術として注目を集めています。
米サンフランシスコを拠点とするRANDOM MOTION TECHNOLOGYは、同社が展開するAIミュージックビデオ自動生成ツール『freebeat.ai』の新機能として、リアルタイムでの映像生成機能を発表しました。従来のAI動画生成は、プロンプト入力からレンダリング完了までに数分から数時間を要するのが一般的でしたが、本機能ではこの待ち時間を完全に排除。わずか5〜7秒という極めて短い遅延（レイテンシー）で、再生中の楽曲に同期した高品質なミュージックビデオをリアルタイムに生成・ディレクションすることが可能になりました。
本プラットフォームは、2021年から自社開発を続けてきた独自の音楽-映像基盤モデルを採用しています。テキストプロンプトではなく、オーディオデータそのものを入力値として使用し、楽曲の展開やリズム、感情の起伏をAIが自律的に解釈して映像化します。さらに、動画生成AIの課題であった『カット間でのキャラクターの同一性維持』を解決しており、全編を通して同じキャラクターを安定して描画できます。SunoやUdioなどのAI作曲ツールで制作した楽曲にも対応し、個人クリエイターからデジタルレーベルまで幅広い層を対象としています。
Journalポイント
実はこれ、従来の動画生成AIのように指示文を打ち込んで数分待つ必要が一切ないんです。音楽を再生すると、わずか 7秒以下 で自動的に映像が生成され始め、その場で演出も調整できます。
え、そうなんですか？音楽を流すだけで勝手に映像が出来上がっていくなんて、まるで魔法みたいですね。一体どういう仕組みなんですか？
実は今、動画生成AIの分野では『レンダリングの待ち時間』がクリエイターの作業効率を妨げる大きな課題になっています。そこで彼らは、独自の 音楽-映像基盤モデル を開発して解決しました。
でも、それってもともと音の強弱に合わせて幾何学模様が動くような、従来のビジュアライザーと同じじゃないんですか？
そこが大きな違いです。従来のものは音への単純な『反射』ですが、このAIは楽曲のサビやAメロといった構成、さらには曲の 感情的な起伏 まで解釈して、ストーリーのある映像を自律的に作り出します。
なるほど！じゃあ、AIで作った音楽をアップロードするだけで、プロが作ったような本格的なミュージックビデオが即座に完成するってことですか？
その通りです。たとえば Suno などの音楽生成AIで作った曲をアップロードすれば、専門知識がなくてもワンクリックでフルMVが作れます。しかも、シーンが変わってもキャラクターの顔や衣装が崩れません。
キャラクターの見た目が維持されるのはすごいですね。ちなみに、他の動画生成AIのツールを提供している会社も、同じようなリアルタイム生成をやっているんですか？
動画生成AIというのは、コンピュータに大量の映像データを学習させ、新しい動画を作り出す技術のことで、現在は多くの企業が参入しています。しかし、音楽解析と連動して 5〜7秒の超低レイテンシー でリアルタイム生成できるのは、彼らが業界初とアピールしています。
なるほど、音楽と映像が完全に融合する未来がすぐそこまで来ているんですね。とても勉強になりました！
RANDOM MOTION TECHNOLOGY INC
- 代表
- Eva Laurant
- 所在地
- 3529 Old Conejo Road, Newbury Park, CA 91320
- URL
- freebeat.ai/ja