ユビキタスAIが映画やテレビ番組の制作に新たな変化をもたらす

今日では、AI とクラウド コンピューティングに関する議論は、ニッチなテクノロジーや投資の分野だけでなく、あらゆる場所で行われているようです。その中でも、最も普及力と影響力があるのがエンターテインメント業界です。エンターテインメント分野では、クリエイティブやビジネスの実践者は、AIやクラウドが自分たちのスキルにどのような影響を与えるのかを非常に懸念していますが、同時に、テクノロジーの普及後の無限の可能性に対する期待にも満ちています。

最近のサンダンス映画祭では、多くの監督、編集者、その他の実務家が、AI とクラウド サービスが映画やテレビ番組の制作に与える影響について意見を交換しました。さらに、Adobe の幹部は、これら 2 つの新しい力が、広く使用されている Premiere Pro などのクリエイティブ ツールを次のレベルに引き上げる方法についても説明しました。

今は、急速な発展、肯定的予測と否定的予測が盛んに交わされ、テレビ番組や映画の制作方法を大きく変えるチャンスがある、信じられないほどダイナミックな時代です。おそらく、誕生から 1 世紀にわたる安定した状態を経て、映画やテレビ番組のコンテンツは破壊的な制作革命をもたらすことになるだろう。

映画・テレビ業界における AI とクラウド コンピューティングの影響は、まだ現れ始めたばかりです。 Comcast を例に挙げてみましょう。彼らは、AI を使ってスポーツ ビデオを素早く生成したことで、エミー テクノロジー賞を受賞したばかりです。

有名人やそのエージェントも、AI テクノロジーが映画やテレビ業界のあらゆる分野で役割を果たしていることに気づいています。

例えば、タレント事務所CAAはMetaphysic社と戦略的提携を結び、スクリーン上の俳優が「若返る」のを助ける「ディエイジング」ツールを提供する予定だ。このツールの助けを借りて、トム・ハンクスとロビン・ライトの2人のスターが演じるキャラクターは10代の頃から始まり、成長するにつれて外見が変化し続けます。

この種のテクノロジーはエージェントにとって大きな意味を持ちます。彼らのスタークライアントは突然、時を超えたパフォーマンスの活力を得るのです。

新しい技術、新しい可能性

しかし、映画やテレビ番組のプロジェクトの日々の仕事は複雑かつ退屈であり、編集者や監督などの専門家の協力が必要です。サンダンスの関係者との会話の中で、彼らは主に Premiere Pro を、実現可能な用途と可能性をますます増やす高速コラボレーション プラットフォームとして捉えていることがわかりました。

「映画制作の未来を考えると、AIはあらゆる可能性を切り開く力となるだろう」と、アドビのプロビデオ部門プロダクトマーケティングディレクターのミーガン・キーン氏はAIについて語った。 「これは誰もが参加できる未来だと私たちは考えています。」

彼女の意見では、AI の核心的な意義は、既存の実践者に取って代わることではなく、人間の創造性を高めることである。 AI のような強力なツールは、実務者が持っていないテクノロジー、スキル、リソースを簡単に使用して、ビデオなどのさまざまなメディアでより魅力的なエクスペリエンスを作成するのに役立ちます。 AI により、経験豊富なプロのクリエイターにとっても、ロケ地への移動などの反復的な作業の苦痛が大幅に軽減され、編集者などのチーム メンバーは映画の全体的な計画とデザインに集中できるようになりました。

Adobe のグローバル イノベーション担当シニア ディレクターである Michael Cioni 氏は、Adobe Frame.io のカメラ クラウド ドッキング テクノロジーの達人です。彼の目には、AI には無限の想像の空間があるように見えます。

すべてのデジタル資産はクラウド資産です

彼の説明は複雑ではありません。「2031年までに、すべてのメディアとエンターテインメントの資産はクラウドで、クラウドコンピューティングによって生成されるでしょう。これは事実となり、私はこれを技術的な確実性と呼びたいと思います。デバイスによって生成されるすべての電子資産はクラウド資産です。」対照的に、ローカルハードドライブ、フィルム、ビデオテープ、メモリカードはすべて置き換えられます。

メディア変換のプロセスについては、誰もがよくご存知だと思います。テキスト ドキュメントは、クラウドと AI を最初に採用したものです。現在、このデータは共有や編集のために主にクラウド サービス (Google Docs、Apple Pages、Microsoft Word、Adobe Acrobat など) に保存されています。 Spotify、Apple Music、Amazon Music、Tidal などのサービスの登場により、何億人ものユーザーがクラウドで音楽を聴いたり、作成したり、共同作業したり、販売したりできるようになりました。今、そのトレンドは、最も複雑なメディアであるビデオにも影響を与えようとしています。

Cioni 氏は次のように説明しました。「映画のシーンの制作を例に考えてみましょう。撮影シーンを指定した後、さらに「雨が降り始める」など、自然言語で説明することができます。」この時、ショット内に雨が映り、降ります。また、「雪が降り始め」と言えば、AIが雪の効果を加えてくれます。これはエンジニアリングの知識がなくても実現できます。かつてはSF小説の中にしか存在しなかったこのようなプロットが、今や現実のものとなりました。この効果は、過去にも静的メディア（写真）では可能でしたが、最終的にはこれが動画に移行することが分かっています。そのため、私たちは考え方を変えて、そのような文脈で創造性を育む方法を考えなければなりません。」

これらすべてにより、さまざまな機能間の境界が曖昧になり、将来のビデオの作成方法が完全に変化するでしょう。

多くの若い映画製作者たちは、すでにこうした境界を越え、プロジェクトであらゆることを少しずつ実行し、デジタル プラットフォーム上で互いに協力することに慣れています。カメラ クラウド ドッキングを AI インテリジェンスに実装することで、プロデューサーはシーンを選択し、現在のシーンで十分か、追加のショットが必要かを判断するための参照として、ラフカットの形で「組み合わせ」をすばやく生成できます。

また、基本的な視覚効果、色補正、さらにはサウンド デザインを素早くラフカットしてから、専門家に渡して微調整を行うこともできます。したがって、多くの映画制作者にとって、Premiere はもはや従来の意味での非線形ビデオ編集ツールではありません。

人と画像との新たな関係を築く

サンダンス映画祭の審査員特別クリエイティブ・ビジョン賞を受賞したドキュメンタリー「アメイジング・マシーンズ」の共同監督、マキシミリアン・ヴァン・アトリック氏は、「人間とカメラの関係を探り、それが社会全体にどう影響するかを探るのが、私たちの最大の情熱です。私たちは、楽しみのために探検するのが好きな人類学者のようなものです」と語った。

このドキュメンタリーは、私たちの新しいツールによって作り出された世界を、より思慮深く理解することを求める穏やかな呼びかけです。この映画のもう一人の共同監督兼編集者であるアクセル・ダニエルソンは、古典的なジョークにあるように、「あなたは誰を信じたいですか？私ですか、それともあなたの当てにならない目ですか？」と語った。確かに、私たちが目にするものが真実ではないかもしれないこと、そしてビデオ映像でさえ信頼できないことを私たちはもっともっと認識する必要がある。

「私たちの映画は多くの答えを与えるのではなく、ただ疑問を投げかけるだけです」とダニエルソンは語った。 「私たちが知っている唯一の答えは、社会として、メディアで耳にする内容をもっと厳しく見直す必要があるということです。」

この映画は、1 世紀以上にわたるビデオ映像をまとめたもので、その中には意義深いものもあれば、皮肉やユーモアが込められたものもあります。そしてさらに重要なのは、優れたクリエイターとそうでないクリエイターの手によって、このコンテンツに与えられる意味と力が大きく異なる可能性があるということです。

ファンタスティック・マシーンのために、ヴァン・アートリックとダニエルソンは人間とカメラ、そしてカメラが捉える画像との複雑な関係に関するデータを収集するのに数年を費やした。

Van Aertryck 氏は、「私たちは編集の訓練を受けていませんし、人材も不足していたので自分たちでやりました。Adobe は私たちにとって完璧なツールでした。すべての映像をまとめて、お互いに簡単に共有できるからです」と認めています。

撮影チームは全部でたった 4 人で構成されており、一部はバルト海 (スウェーデン、ヨーテボリ) に、一部は西ヨーロッパのバレアレス諸島にいました。編集内容やクリップを交換するには、Premiere のクラウド ツールのみを使用できました。しかし、まるで全員が一緒に座っているかのように、プロセス全体が非常にスムーズでした。これがクラウド機能の意義です。必要とする限り、そして意欲さえあれば、世界中のあらゆるクリエイターがいつでもどこでも作品に参加できるのです。

今年のサンダンス映画祭で米国短編映画審査員賞を受賞した『レスト・ストップ』の編集者兼監督のクリスタル・カイザ氏は、「オンラインでの共有により、より多くの試みが可能になります。映画の制作に影響を与えることなく、いつでも故郷のオクラホマに帰ることができます」と語った。

昨年、Adobe は、ビデオ撮影中にコンテンツをストリーミングできる、いくつかの一般的なビデオカメラやその他の制作デバイスに新しいクラウド直接接続機能を導入しました。これにより、編集者、プロデューサー、スタジオの幹部、その他のポストプロダクション専門家は、撮影後数分以内に映像の作業を開始できます。

低予算の映画でもこれらの技術を使うことができます。サンダンス編集賞を受賞したダニエラ・T・キロズ氏は、クラウド直接接続が映画「マリアッチへの行進」の制作、特に初期の制作において非常に重要だったと語った。

ニューヨークのブルックリンに住むキロズさんは、アレハンドラ・バスケス監督とサム・オズボーン監督がテキサス州リオグランデバレーの高校でダンスコンテストの映像を撮影している間に、映画の編集を始めた。初期の撮影素材をすぐに入手できたため、素材を素早く処理し、次の撮影の焦点について監督とコミュニケーションをとることができました。

「編集者として、私たちはカメラの前で俳優たちを初めて見ることになるのです」とキロズ氏は語った。 「大好きなキャラクターや心に響く音楽に出会えます。」

『時々死を考える』を撮影していた時は、そのような状況はありませんでした。この映画は遠く離れたオレゴン州の海岸で撮影された。すぐに確認できるデジタルサンプルがなかったため、毎日撮影した写真をハードドライブに保存し、夜間にニューオーリンズのデジタル処理施設に送る必要がありました。編集者のライアン・ケンドリック氏は、新しいテクノロジーの出現は実務家にとってまさに朗報だと語った。

これまでにないコラボレーション

ケンドリックは現在、自宅からナッシュビルの監督や他の同僚とリモートでコラボレーションできるようになっている。

ケンドリックは「お互いに遠く離れているのに、自宅でパートナーと一緒に仕事ができるなんて最高だよ」と感激した。これにより、監督、写真家、編集者、その他の制作スタッフが互いにやり取りする方法も変わります。

「以前は、編集者はいつもセットから遠く離れていると感じていました。今では、つながりがずっと強くなり、すべてから切り離されていると感じることはありません。編集室は試行錯誤の場となり、思い通りにいかなくても、いろいろ試すことができます。私はいつも『どうなるか分からないから、やってみよう』と言います。」

『Sometimes I Think About Death』では、ケンドリック、ランバート、撮影監督のダスティン・レーンの3人は、実際の撮影が始まる前に毎週話し合いを重ね、事前に起こりうる問題を回避することを目指した。

「編集上の問題について話し合ったりもしました。脚本を受け取ったとき、最も難しいのは、想像力を駆使してプロットを次のパートに移すことです。具体的には、登場人物を「映画」ではなく、状況の中に留めておくことです。ですから、私たちはたくさん話し合い、映像の感情的な重みを保つ方法を見つけようとしました。」

ケンドリック氏は、Camera-to-Cloud テクノロジーは撮影サイクルを高速化するため、コマーシャルやミュージック ビデオなどのプロジェクトでも重要な役割を果たすことができると述べました。

「商業広告の多くの要素が急速に変化しています。」クラウド アーキテクチャのサポートにより、プロジェクト マテリアルを Premiere Pro、Frame.io、After Effects 間でスムーズに転送できます。

「これは、過去 5 年間で映画やテレビの専門家が排除した、制作遅延の最大の原因です。」

より良い技術ガイドラインを確立する

キーン氏は、Adobe のテクノロジーに対するアプローチは、ワークフロー、メディア、コラボレーション、生産性、セキュリティという 5 つの「指針」に基づいていると述べた。

「私たちはAIを真に「生産性」に統合します。これは創造性を置き換えることではなく、過去の複雑で面倒なプロセスを置き換えることです。」

ハリウッド全体が、急速に変化する AI の分野を注視しています。ハリウッド最大の労働組合であるSAG-AFTRAの理事会は、次回の契約交渉で、組合員の外見や声、その他の特徴に対するAI技術の使用を制限する、肖像権に関する条項を導入する予定であると報じられている。

現在の意見草案によれば、「バーチャル俳優の出演権を管理することを目的としたあらゆる形式の契約」は組合と事前に合意する必要があり、そうでなければ無効かつ執行不能とみなされる。」

この複雑な新たな問題に直面して、今春、新たな契約交渉が開始される予定だ。キャリアを伸ばすことを望む若手俳優や年配の俳優は、AI技術の特定の利点を受け入れる用意があるかもしれないが、強力な契約上の保護がなければ、プロデューサーはシミュレーションにAI技術を直接使用し、本物の俳優に高額な料金を支払うことを避ける可能性が高い。

Twitch のファン プロジェクトは、そのような未来を予感させるようです。 「watchmeforever」という名のユーザーが、AIが生成した「となりのサインフェルド」のスピンオフを延々とアップロードし続けている。映像はひどく歪んでおり、コンピューター合成された音声は気を散らし、ジョークの質は満足できるものではないが、AI技術が向上するにつれて、これらすべてが問題ではなくなるかもしれない。さらに重要なのは、ジェリー役を演じた俳優が自らの権利を守るために名乗り出たことで、この「終わ​​りのない」演劇は突然終了したことだ。

新たな創造の世界への扉を開く

より前向きな視点から見ると、Adobe の Keane 氏は、AI とクラウド コンピューティングによって、より幅広いクリエイティブ ツールがもたらされ、画像、サウンド、視覚効果などの要素が大規模なサーバー ファームに依存する必要がなくなり、誰もが優れたビデオ コンテンツを制作するためのコンピューティング能力とセキュリティ基盤を得られると考えています。

「クラウド リソースの助けを借りて、誰もが世界中から自分のストーリーを語ることができます。あらゆる段階で地域を超えてコラボレーションを実現でき、誰もがいつでも意見を交換し、アイデアを刺激することができます。」

映画製作者にとって、安全性も無視できない大きな問題です。キーン氏は中絶に関するドキュメンタリー映画「プランC」について言及した。制作者は、収集した元の資料が漏洩しないようにしながら、インタビュー対象者の顔や声を何度もぼかす必要があります。

さらに、生成 AI、ディープフェイク、および関連する問題の急増により、画像コンテンツの信頼性がこれまで以上に重要になっています。この目的のために、Adobe は、The New York Times や Canon などの多くのメディアおよびテクノロジー企業とともに、「Content Authenticity Initiative」に参加しました。

しかし、SF映画の古典『マトリックス』の主演俳優キアヌ・リーブスは、この問題について楽観的ではない。同氏はインタビューの中で、AIを使って悪意を持って動画を生成するディープフェイクは「非常に恐ろしい」と語った。リーブスが署名した契約書には、プロデューサーが彼のパフォーマンスをデジタル的に改ざんすることを禁止する条項が含まれていることが多い。この涙の起源は数十年前の映画に遡ります。当時、プロデューサーは特殊効果を使って彼の顔に無理やり涙を加えました。

「俳優たちが自主性を失うのはもどかしい」とリーブス氏は語った。 「演技が編集されていても、内容は本物であることは受け入れられます。しかし、ディープフェイクの段階になると、俳優にはまったく自律性がありません。これは非常に恐ろしいことであり、人間がこの種のテクノロジーにどう対処するかを見るのが楽しみです。」

ゲームを変える新しいテクノロジー

この画期的なテクノロジーは、現在 Premiere Pro のベータ版としてご利用いただけます。これはテキストベースの編集機能であり、編集AIの助けを借りてビデオから会話テキストを抽出して書き起こし、ビデオ編集を実現します。 AI は、最終バージョンのラフカット参照を含む重要なサウンド クリップも強調表示し、キーワード ベースの検索用語を生成して、特定のクリップやダイアログにすばやく移動します。これがプロジェクトの資料とデータを管理するための新しい、より強力な方法になることは間違いありません。

「このデータをすべて活用して、最終的なメディアを磨き上げることができます」とキーン氏は語った。

いくつかの小規模工場でも同様の技術を導入している。 Descript と Podcastle はどちらも、追加の編集なしでテキストベースのスクリプトから読み上げることができるデジタル音声を作成するためのツールを提供しています。 Descript は最近、ポッドキャストなどのさまざまなビジュアル コンテンツの作成に使用できるテキストベースのビデオ編集機能も追加しました。

編集者のケンドリック氏は、友人のためにミニドキュメンタリーを素早く編集するためにアドビのテキストベースの編集ツールを使用したと語った。彼の意見では、このテキストベースの編集機能はプロの編集者にとっても非常に重要なものです。以前は、プロデューサーや編集者は、限られた時間内に素材を素早くつなぎ合わせて番組に仕上げるために、映像を精査するのに数日を費やす必要がありました。

オーディオブック、スクリプト、ソーシャルメディア - AIはどこにでもある

AIはエンターテインメントの他の分野にも進出しつつあります。 Apple はオーディオブックのナレーションを生成できる AI ツールをリリースし、著者にプロジェクトの低コストなオーディオ版を作成する新たな選択肢を提供した。しかし、このニュースが報道されるやいなや、プロのオーディオブック声優とそのファンは強い反対を表明した。

はい、プロの声優さんたちは確かに強みを持っており、魅力的な演技と声で作品に彩りを添えることも多々あります。彼らの成果と比較すると、AI 生成のナレーションにはまだまだ長い道のりが残っています。

しかし、ベストセラーではない作品の場合、限られた収益では、このレベルのリスニング体験を楽しむ人々を支えるのに明らかに不十分です。このとき、AI ツールは低コストでありながら、ある程度のエクスペリエンスの品質を保証できる優れた選択肢となります。 Apple が注目しているのは、世界規模で約 15 億ドルの価値を持つこのニッチな本の視聴市場です。

スタートアップの Filmustage は、俳優、小道具、衣装、乗り物、音、場所などの脚本要素を AI で分割しようとしています。

短編動画分野では、TikTok、Meta Reels、AlphabetのYouTube Shortsはいずれも機械学習とAIツールを活用して、ユーザーが興味を持ちそうな「おすすめ」動画を表示し、よりシームレスで魅力的な方法で広告と視聴体験を統合することを目指している。

金融格付け会社ライトシェッド・パートナーズのアナリスト、リッチ・グリーンバーグ氏は、フェイスブックがAI主導のコンテンツ推奨に切り替えた際に非常に高いコストを支払ったが、「この事実は、AIによるコンテンツ推奨がザッカーバーグ氏がフェイスブックを設立して以来2番目に大きな正しい決断であったことを最終的に証明した」と述べた。