このビデオでは、次のような使い方を紹介する。 ランウェイの最新アップデートにより、美しいAI生成シーンを作成することができる。

ランウェイ は最近、参照、チャット・モード、スケッチ・レイアウトなどの新機能を追加し、AIビデオ・ジェネレーターを強化している。

これらのアップデートは、一貫性があり、リアルで、映画のようなショットを作成するために大きな役割を果たすことができます。その方法をお見せできるのを楽しみにしている。

飛び乗ろう。

ランウェイの最新機能であるリファレンスとチャットモードを探ってみよう。このビデオをご覧になっている時期によっては、まだベータ版かもしれないが、これらのクリップをすべて使って、一貫したスタイルと私たちのキャラクターを配置した一貫性のあるビデオを作成しよう。

では、仕事に取り掛かろう。

まず、画像を生成することから始めます。ここをクリックします。しばらくRunwayを使ってなかったら、ちょっと違って見えるかもしれませんが、チャットモードのボタンがあります。

また、参考画像をアップロードする場所があるので、画像のプロンプトをよりコントロールしやすくなります。

まずは画像をアップロードするところから始めます。アップロードします。そしてキャラクターをアップロードします。シーンもアップロードします。

つの画像生成につき、3つまで参照画像を使うことができ、キャラクターやシーンに最適です。しかし、もう少しクリエイティブになって、例えば特定の画像から照明を盗んだり、そのビジュアル・スタイルを盗んだりすることもできます。

さて、ご覧のように、ここに両方の画像がアップロードされています。今はまだ参照用にはなっていません。もし使いたいのであれば、ここにアップロードする必要があります。

あるいは、このキャラクターがあなたにとって本当に重要で、何度も参照する必要がある場合は、タグを付けて保存することもできる。例えば、彼女をジュリアと呼ぶとしよう。

こうすることで、彼女は保存されたタブに表示される。そのため、毎回この画像を読み込む必要はない。

ここでは画像1で、ここではジュリアだ。例えば、@Juliaと書けば、彼女の画像をアップロードしてくれる。

では、この通りのエスタブリッシング・ショットから始めて、通りの別の景色を表示するコマンドを出すと、@image1がヒットする。

こうすることで、この画像を参照することになる。そしてgenerateを押す。

そしてご覧の通り、見た目の美しさを保つのにかなり良い仕事をした。しかし、あのテーブルの配置はどこか不合理だ。もっとコンテクストを加える必要があるのかもしれない。

エスタブリッシングショットとして、通りのハイアングルを見せてくれ。

そして今、我々はどこかにたどり着いた。しかし、これらのテーブルの配置は信じられない。しかし、これはかなり使えそうだ。

ここでもうひとつ、ドロー・レイアウトの特徴を紹介できるかもしれない。

もし私が自分のビジョンを表現し、ストリートの中心的な景色を作る手助けをしたいのであれば、レイアウトをスケッチしているこのアイコンを使って手助けすることができる。

あとは、ドローツールを使って、通りの線と窓のある建物を描けばいい。

これはパリの通りである。高度なデッサン力は必要ありません。

レイアウトのスケッチを描くことで、うまくいけばそれに従ってくれるかもしれない。しかし、ラベルを使って、あなたが描いたものを理解する手助けをすることもできる。

ラベルをクリックして道路と書く。次に、建物のラベルをクリックします。同じように建物と書く。そしてもう1つ、ここに道路と書きます。

そしてスケッチをエクスポートして、このヘルプを使って次のラウンドを行う。

まあ、私たちのプロンプトには従わなかったが、おそらくどこに問題があるかは分かっている。参考として画像2を促したわけではない。

ハイアングルのセンタービュー@image2をストリートで見せてくれ。画像1はエスタブリッシング・ショット。

これで少しはよくなった。ここにはツリーもあります。実は2つあるんです。

なんとなくどれも気に入らないけど、セッティングはかなり合っている、というときは、もう一回発生させてみて、一番いいのを選ぶことにしている。そうでなければ、たぶんこれにする。

そして、次のショットでシーンを作り続ける。このスケッチレイアウトはもういらない。なぜなら、このショットにキャラクターを配置したいからだ。

したがって、@Juliaを見せてくれれば、ここにアップロードされていなくても、この画像を呼び出すことができる。

パリの街角のカフェにいるジュリアに、@image1を生成して見せる。

さて、これはもっとクリエイティブになった。そして、木がより目立つようになった。私はこれが気に入っている。だから、エスタブリッシング・ショットとして使うことにする。

広告コマーシャルの動画やエスタブリッシングショットとして活用しよう。生成する。

さて、画像タブに戻ろう。彼女はパリの街角でコーヒーを飲んでいる。

彼女の体のサイズが合っているのはこの1枚だけだと思いますが、これで何とかなります。前の画像と同じことができる。もう1ラウンド生成させて、ベストを選ぶこともできるが、これは簡単にうまくいくと思う。

そして、私はタイトな側面、またはポートレートではなく、側面の詳細ビューを見せて新しい世代を開きます。パリの通りのカフェでコーヒーを飲む。生成しよう。

まあ、2戦目の方がいいと思う。でも、ここで人を見逃しているかもしれない。そこで、シーンの中に導入してみようと思う。しかし、この参考画像には人が写っていないので、難しいかもしれない。

歩道を歩く人々。ヒット生成。

そして今、私たちが望んでいる通りであり、私たちが望んでいるキャラクターであり、彼女がコーヒーを飲んでいるのがおわかりいただけるでしょう。そして彼女はコーヒーを飲んでいる。

どのケースでも、実際には、多分その中にあるものだけを微調整しただけで、すべてのビジュアルが同じライティングとカラーグレーディングのままなので、一貫性はまったく問題ない。かなり使える機能だと思う。

そしてここには、コーヒーを飲んでいるジュリアがいて、その後ろを人が歩いている。

この世代でもう1ラウンドやるつもりだ。これは気に入っている。というわけで、参考までに動画としても使わせていただきます。

コーヒーを飲む女性。飲みながら目を閉じている。生成する。

この瞬間まで、何がしっくりこないのかわからなかったが、例えばコマーシャルをやっているのなら、彼女はカメラを見るべきではないだろう。

だからまた利用するつもりだ。カフェで横を向いているジュリアを見せてください。どのように生成できるか見てみよう。

この方法でシーンを微調整し続けることができる。しかし、そのようなものができて、実際に使いたくなったら、この生成された画像そのものをリファレンスとして使うことができる。

参考に画像をクリックします。ここにアップロードされています。ジュリアとパリの街並みは消す予定です。

白いカップからコーヒーを飲む唇を極端にクローズアップして見せて。生成する。

そして今、私はこれを削除することができるので、私は整理されたままである。

すでに2つのクリップを持っている。たぶん、ベストなものを見つけるまで何度か走らせることになるだろう。

ここにはすでにエスタブリッシングショットの画像がある。もちろん、正確なカメラの動きでそれを促すこともできますが、これはこの正確なビデオの目的ではありません。

だから私は、彼女にカップからコーヒーを飲ませようと思う。これが私が探していたものだ。

唇と通りのサイドアップが欲しいところだ。

そして、これが生成されている間、私は欲しいかなり偉大な世代をここに持っている。でも、彼女は白いセーターを着ているので、ここにあるような黒いセーターを着せてあげたい。

これで画像を1つ選ぶことができる。それをチャットで使うことができる。

チャットでアップロードされました。そして今、あなたはその画像に調整なりなんなりを加えることができます。そして、あなたは母国語を使っています。

セーターの色を黒に変えて確認してください。

これは多かれ少なかれ、画像を生成するためのChatGPTアプローチのようなものだ。そして今、それは仕事をした。

しかし、あなたが実際に望む形になるようにシーンを微調整し続けることはできる。

促してみよう。近すぎると思うので、少しズームアウトしてください。ズームアウトしましたが、ほんの少しです。というわけで、もう1ラウンドやります。

もっとズームアウトして。彼女の全身が写るように。

そして、いくつかの調整を行った。しかし、彼女は別の椅子に置かれている。でも、おそらく言いたいことは伝わっただろう。

でも、この一番最初の画像は、私たちが企画したコマーシャルに必要だから使うかもしれない。

もっとクリエイティブに、道路に車を置いてもいいかもしれない。フェラーリの赤い車を道路に置く。

これでは明らかに使い物にならない。しかし、私はただ、このような感情と反復に基づく画像生成にどのようにアプローチできるかを紹介したいだけなのだ。

最初から正確なプロンプトを思いつく必要はないが、そこにたどり着くことはできる。おそらく、ここで好きなようにシーンを微調整して、この画像を通りのシーンの画像参照として使い、ジュリアをプロンプトに戻して、私たちが望む正確なキャラクターにすることができるでしょう。

また、この画像を入力として追加すれば、より多くの画像を参照できるようになる。

さらに、赤い車の前に黄色いランボルギーニを追加。彼女の頭には野球帽を。

しかし、これをどのように自分のニーズに合わせて使うことができるかという点については、おそらくご理解いただけただろう。

一般的に言えば、ランウェイでスケッチしたレイアウトやチャットモードを使ってリファレンスを使い、最初のビジュアルを作成することは、とても素晴らしいツールだ。

でも、今はランウェイの中でそれができる。

さて、そしてここにはご覧のように2台の車があり、彼女はキャップをかぶっている。

おわかりのように、この繰り返しはすべて、私たちのセッションの中で起こったものである。だから、この画像を参照として簡単に使うことができる。

これをなくして、極端なクローズアップを見せてくれてもいい。黄色い車の横に立つジュリアを映してください @image2.

そして、こうして遊ぶことができる。思考が何となく頭の中に浮かんでくるようなシーンを作り、それで創造的になるのだ。

そして今、見ての通り、私が促した通りになった。

しかし、楽しいことはさておき、元の世代に戻れば、時間を投資して少し微調整し、ディテールを磨き、特定のシーンに最適な画像を見つければ、ランウェイ内で4Kにアップスケールして生成させることができる。

そして、それをまとめるとこうなる。