Runway、テキスト、画像、ビデオクリップから動画を生成できる『Gen-2』 を発表

2023年3月20日(現地時間) – Runway Researchは、キスト、画像、ビデオクリップで斬新な動画を生成できるマルチモーダルAIシステム『Gen-2』を発表しました。

Gen-2とは

『Gen-2』は、テキストや画像を使用して既存の動画から新しい動画を生成するマルチモーダルAIシステムです。画像やテキストプロンプトの構図やスタイルをソースビデオの構造に適用して、新しいビデオをリアルで整合性の取れた形で生成することができます。先月発表された『Gen-1』の改良バージョンとなります。

Runway、言葉や画像を使用して既存の動画から新しい動画を生成する新しいAIモデル Gen-1 を発表

2023年2月6日 - Runwayは、既存の動画から新しい動画を生成する新しいAIモデル Gen-1 を発表しました。 Gen-1とは Gen-1は、Ru...

cginterest.com

2023.02.07

『Gen-1』では、5つのモードで動画を生成することができましたが、『Gen-2』では新たに以下の3つのモードが追加されています。

• Mode 01: Text to Video – テキストプロンプトだけで、あらゆるスタイルのビデオを合成することができます。
• Mode 02: Text + Image to Video – 画像とテキストプロンプトを使って動画を生成する
• Mode 03: Image to Video – 画像だけで動画を生成する（バリエーションモード）

新しい『Gen-2』について以下の動画で確認できます。

『Gen-1』の時とは違い、アクセスのリクエストは行われていないようです。詳しい情報は以下のリンクからご覧ください。

Gen-2: The Next Step Forward for Generative AI