アドビは、「Adobe Firefly Videoモデル」を活用した生成AI動画機能の進化を先行公開した。同社が2024年初めに公開した今後提供予定の各動画機能は、映画編集者や動画プロフェッショナルのクリエイティブなビジョンを刺激し、タイムラインのギャップを埋め、既存の映像に新しい要素を追加するツールを提供するとのこと。Adobe Firefly Videoモデルは、Imageモデル、Vectorモデル、Designモデルを含むアドビの生成AIモデルのファミリーを拡張し、Adobe Fireflyをクリエイティブチーム向けの最も包括的なモデルとして提供される。
2024年後半には、Firefly.Adobe.comで、Adobe Fireflyを利用した新しい「テキストから動画生成」機能と「画像から動画生成」機能が利用可能となる。業界をリードする動画編集ツールであるAdobe Premiere Proに生成拡張機能が直接組み込まれる予定。
「テキストから動画生成」機能では、テキストプロンプトから動画を生成したり、アングル、モーション、ズームなど様々なカメラコントロールにアクセスして動画を微調整したり、画像を参照してタイムラインのギャップをシームレスに埋めるBロールを生成できる。また、「画像から動画生成」では静止画やイラストを実写クリップに変換可能。
なお、Adobe Firefly Videoモデルは、様々なユースケースを想定している。たとえば、カメラアングルやカメラモーションなどのきめ細かなコントロールを活用してアニメーションやエフェクトなどを制作したり、カメラモーションを使って重要な動画ショットにインサートを生成したり、プロが撮影した映像と動画を組み合わせて、ストーリーをより速く伝えるなどといった使い方が考えられる。
また、すべてのAdobe Firefly生成AIモデルと同様に、Adobe Firefly Videoモデルはアドビが使用を許可したコンテンツのみ学習する。