AI ツール: Midjourney と After Effects によるアニメーション (Jeff Foster 著)

Jun 19, 2023

Mijourney 5.2 Zoom レンダリングと Adob​​e After Effects を使用したアニメーション技術の内訳

おそらく、Runway Gen-2 や Kaiber などのさまざまなツールを使用して、静止画を取得して数秒間アニメーション化するか、テキストからビデオに直接変換する生成スタイルのアニメーションをすでに使用している、AI が生成したアニメーションの多くを見たことがあるでしょう。シロシビンによるトリップ。 それらはジャンルとしての本質において興味深いものであり、多くの場合芸術的ですが、これまでのテクノロジーのどれも、特にその実現がほんの少しでも現実的でスムーズなものについては、実用的な用途がほとんど見つかりませんでした。

私は VFX 作品のような極端なリアリズムを求めているわけではありませんが、ファンタジー作品がスムーズに感じられ、作品全体の邪魔にならない高品質のモーションと魅力的な要素を備えていることを望んでいます。

そのため、作成された AI コンテンツのほとんどは、箱から出してすぐに使えるわけではありません。 多くの場合、Photoshop でレンダリングされたイメージ内の要素に対してさらに作業を行う必要があります。オブジェクトをアニメーション化する場合は After Effects を使用します。 私はほぼ毎日 After Effects で多くの作業を行っており、その 95% は 2D コンテンツと、3D 環境やエフェクトをシミュレートするオブジェクトを扱う作業です。

ここで、Midjourney v5.2 のズーム アウト アウト ペイント機能が特定の作品に当てはまります。 Midjourney は単なるコンテンツジェネレーターですが、AfterEffects はアニメーターです。

Discord の Midjourney でこの新機能を使用する方法を知りたいですか? All About AI の YouTube チャンネルにある Midjourney Zoom-Out のこのビデオ チュートリアルでは、作成手順を説明しています。

私が作成しようとしているこの特定のタイプのアニメーションの場合、After Effects は、Midjourney からレンダリングされた複数のレイヤーを「ズーム」して、長いトラックのモーションを表示する必要があります。

そのため、Midjourney v5.2 でズームアウトおよびパンアウト レンダリング機能が可能になったことが発表されたとき、何かユニークなものを求める私の探求において、いくつかの楽しい実験が始まりました。

私は、Midjourney に提案したものではなかったので、最初にレンダリングしたときに驚いた奇妙なコンセプトから始めましたが、それでも楽しい結果が得られました。 7月の最初で4連休の始まり（月の初日でもある）だったので、私はよく7月の初日にソーシャルメディアで「ウサギウサギ」と言う楽しい儀式を行っています。ミッドジャーニーの画像を含む月。 今回は、後続の演出で花火やカラフルなものを追加できると考えて、「ホットドッグを食べる 2 匹のウサギ」をリクエストしました。 下の最初のフレームにある結果の画像は、私が得た結果の 1 つであり、構図の選択に満足しました (エイリアンかイカを食べているように見えますが)。 😉

数日後に Midjourney v5.2 が発表されたとき、私は Discord に戻って完成した画像を振り返り、新しいズームアウト機能を試すためのものを探しました。 次の 2 つのレンダリングは連続したもので、さらに驚きました。 まず、ズームアウト 1.5 倍により、最初にごちそうをするウサギのレンダリングの周りに素晴らしい塗りつぶしのシーンが得られました。 その後、さらに 2 回実行しましたが、プロンプトはまったく変更しませんでした。ウサギがさらに 2 匹増えました。 何度も (正確には 13 回) 2 回、2 回、2 回、2 回と繰り返し、ウサギが並ぶ長い通りの風景を作り出しました。 彼らは本当に増えていて、その特徴も服装も環境も様々でした。 食事から飲みがメインでしたが、服装や表情のバリエーションが豊富で楽しかったです！

これらすべてのレンダーを収集し、After Effects で順番に積み重ねた後、ズームするときに各レイヤーの最高品質の「中心焦点エリア」が常に使用されるようにズームを調整する必要があることがわかりました。 400% ～ 50% の間でフェードアウトし、ズームを引き継ぐために位置合わせされた下のレイヤーが表示されます。 各フレームのエッジの内側約 100 ピクセルにぼかしマスクを使用して、各レンダリングからのエッジ ピクセル データのアーティファクトと差異を除去しました。

うまくいくかどうかを確認するために、このプロセスを 14 の異なるレイヤーまで繰り返しました…