ウォール・ストリート・ジャーナル: あなたが見たビデオは中国の AI

4月27日、ウォール・ストリート・ジャーナル紙によると、アマゾンが制作した聖書の歴史ドラマ「ダビデ王」では、本物の俳優が堕天使や定命の女性を演じ、薄暗いスチールグレーの空や険しい山の尾根など、周囲の風景はAIが生成した傑作だったという。

図1：「ダビデの王朝」の背景をAIで生成

番組の最初のシーズンには 850 の視覚効果ショットがあり、そのうち 73 は中国の動画サイト Kuaishou が開発したツールを含む生成 AI を使用して作成されました。番組プロデューサーのワンダー・プロジェクトは、これにより高価なロケ撮影の費用が節約できると述べた。

ハリウッドの超大作からソーシャルメディアのショートビデオに至るまで、ビデオクリエーターは、かつては大規模なビデオ撮影スタッフが必要だったコンテンツの制作に AI を活用するようになっています。

Kuaishou Video の大型モデル Keling AI の運用責任者 Zeng Yushen 氏は、「制作コストが低下するにつれて、クリエイターが新しいアイデアを試したりテストしたりする敷居も低くなります」と述べています。『キング・オブ・ダビデ』の制作には、同社が開発したAIモデルが使用された。

中国のビデオ大手モデルが先導する

ほとんどのアメリカ人はテレビを見たり、携帯電話でビデオをスクロールしたりするときにそのことに気づいていないかもしれませんが、中国はこの分野で重要な役割を果たしています。レビュープラットフォームArtificial Analysisによってランク付けされたビデオ生成モデルの上位10社のうち7社を中国企業が占めており、Googleやイーロン・マスク氏のxAIなどのライバルと競合している。

今月、「HappyHorse」と呼ばれるビデオ生成モデルが、ブラインド品質評価で米国のライバルを破り、話題になりました。その後、中国の電子商取引大手アリババは、このモデルが自社のものであることを明らかにした。

図 2: 上位 10 位のビデオモデルのうち 7 位を中国が占めています

今年初め、バイトダンスは最新のAIビデオジェネレーター「シーダンス2.0」を発表し、これも大きな注目を集めた。テキストプロンプトをリアルな短いムービーシーンに変換できます。 ByteDanceのTikTokは、中国に数億人のユーザーを抱えるKuaishouと競合している。

調査会社Gavekalの技術アナリスト、ティリー・チャン氏は、これらのプラットフォームには「モデルのトレーニングに使用できる大量のラベル付き短いビデオデータが当然含まれている。これが、ほとんどの企業にとって複製が難しいデータ障壁を生み出している」と述べた。

ビデオモデルの課題

OpenAIは最近、Soraビデオ生成サービスを終了し、Disneyとの提携を終了することを決定した。 Googleなど他の米国企業もこの分野への積極的な投資を続けている。

Sora の閉鎖は、AI ビデオが直面する技術的および法的課題を浮き彫りにしました。ビデオの生成には、テキストの回答を生成するチャットボットアプリケーションよりも数百倍のコンピューティングパワーが必要になる場合があります。 OpenAIは、利益率の高い製品に集中するために、コンピューティングパワーを過度に消費する周辺プロジェクトへの投資を避けたいと考えている。

図 3: OpenAI が Sora をシャットダウンする

中国の動画プラットフォーム「iQiyi」が最近論争に巻き込まれている。同社のCEO、コン・ユ氏は、有名人の肖像画ライセンスライブラリを含むAIプロジェクトを紹介した際、「本物の俳優との写真撮影は間もなく過去のものになるかもしれない」と述べた。この声明が発表されるとすぐに、多くの有名な俳優がすぐに声をあげ、自分たちはこのプロジェクトとは何の関係もないと述べた。

それでも、AI ビデオは、特に中国だけでなく、2 つの超大国が相互に影響し合っている米国でも、人々の日常のオンライン生活にますます統合されてきています。今年初め、一連の不条理で短い AI による武術映画のパロディーが中国のソーシャルメディアで数十億回の再生回数を獲得し、多くのファンが同様の動画を作成するきっかけとなった。オリジナルのビデオは、中国の食品会社が鴨の煮込み製品を宣伝するためにバイトダンスの AI ツールを使用して制作したものです。

中国の一部のビデオモデリング新興企業は、物理世界をシミュレートするように設計された「ワールドモデル」に投資している。優れた世界モデルを備えた人型ロボットは、より人間に近い行動を示すことができるという研究者もいる。

世界モデルであれ、AI ビデオ生成であれ、現実世界における物体の動きに関する基本的な数学的および物理的法則を習得する必要があります。アリババが投資した愛石科技や盛州科技などの多くの企業が、これら2つの技術方向に同時に前進している。

ショートプレイAI

急成長を遂げている短編ドラマ業界は、AI ビデオ生成テクノロジーをいち早く導入しています。ロマンスや家族の確執を中心に展開するこれらのシリーズは、それぞれわずか数分で放送され、視聴者を携帯電話の画面に釘付けにするように設計されています。この種の小さな画面のコンテンツを視聴する場合、ペースがタイトで、プロットが頻繁に逆転するため、視聴者は視覚的な欠陥に鈍感になることがよくあります。

この種のコンテンツは中国で爆発的に増加しており、消費者の注目を集めるためにミニシリーズが電子商取引サイトや食品配達アプリに統合されています。最近、このモデルはアメリカでも徐々に登場しています。中国人創設者によって構築された ReelShort や DramaBox などのプラットフォームは、アメリカの視聴者から数千万ドルの収益を生み出しています。

中国東部の都市杭州にあるスタジオで、シャオ・ジークン氏は60人のAI短編ドラマ制作チームを率いている。彼らのワークフローは映画を作るというよりも宝くじをするような感じだと彼は言いました。

使用可能なシーンを作成するために、Shao Zhikun のチームは AI モデルにプロンプトの単語を繰り返し入力する必要があり、これには多くの時間と計算能力が消費されます。場合によっては、作成された成功したクリップが、さらなる磨きの基礎として機能するのに十分な品質であることもあると彼は言います。またチームは、最初に安価な静止画像を生成し、次にこれらの画像をガイドとして使用してモデルがビデオを生成することでコストを節約する方法も考え出しました。

Shao Zhikun 氏のチームは、Bytedance のツールを使用して、Bytedance の Honguo Short Drama や ReelShort などのプラットフォーム向けに毎月 100 本の短編ドラマを制作しています。 Shao Zhikun 氏は、製作費は数百米ドルから 10,000 米ドル以上に及ぶが、これは従来の予算のほんの一部にすぎないと述べた。

29歳のチームリーダーは「ここでの論理は違う。芸術的な傑作を作ろうとしているわけではない。ドラマの1～2本がヒットすれば費用は回収できる」と語った。

ビデオゲームと同様に、ミニシリーズは無料のエピソードや予告編で視聴者を誘い込み、その後のコンテンツのロックを解除するために料金を支払うか広告を視聴するよう要求します。番組内にコマーシャルの休憩が含まれる場合もあります。

Kuaishou Keling AIの事業責任者Zeng Yushen氏は、エンターテインメント業界からの需要は中国国外でも拡大していると述べた。「キング・オブ・ダビデ」シリーズのプロデューサーであるミラクル・ピクチャーズは、第2シーズンでは生成AIツールを使って制作されたショットの数が第1シーズンの4倍以上になったと明らかにした。

Zeng Yushen 氏は、Keling の収益の 70% は中国国外からのものであり、米国が同社の主要市場であると述べた。 Kuaishou は、主に Keling の増大するコンピューティング能力のニーズに対応するために、今年約 38 億米ドルの設備投資を計画していると述べた。

Zeng Yushen氏は、「今後1、2年以内に、AIビデオは人々が本物と偽物を見分けるのが非常に困難なレベルに達すると予想している」と述べた。「このテクノロジーは映画とエンターテイメント業界の主力となるでしょう。」