実写と見分けがつかない!?OpenAIのSoraが動画生成AIの常識を覆す

ベンチ (mohero Presents new song)

こんにちわ!もへろーです!

皆さん!Open AI が発表した動画生成AI..Soraの映像はもうご覧になられましたか??

まだ見てないよー!って方いらっしゃいましたら、まずは是非一度以下からご覧になってみてください。

Soraによりテキストから生成された東京の街を歩く女性の動画です。

いかがですか?多少の違和感はあれど、これまでの動画生成AIとは明らかに一線を画したクオリティと称して過言はないでしょう。

「無限の可能性を呼び起こすこと」をコンセプトに、日本語の「空」が由来になっているとのことです。

本記事では話題沸騰中の「Sora」の何が凄いのか?その魅力を徹底紹介して参ります。

■SoraはOpen AI社が今後公開を予定している動画生成AIです!

■最長1分までの動画を破綻なく生成できるポテンシャルを秘めているとして、注目を集めています!

■Soraの特色として詳細なシーンの映像や、複雑なカメラモーション、複数の人物の生成に対応し、クオリティが既存の動画生成AIよりも格段に向上しています!

目次

Sora 概要

Sora とは?

昨年、ChatGPTで話題をさらったOpen AI社より、2024年2月15日(現地時間)に発表された動画生成AIです。

動画生成AI自体は既に珍しい物ではなく、例えばRunwayやPika Labs等のツールは既に一定数のユーザがいますし、最近だとGoogle社からも今後 Lumiere を公開すると発表がありました。

では何故Soraはこれほどまでに話題をさらっているのか?要点は以下の3つです!

最長1分までの動画を破綻なく生成可能なポテンシャルの高さ。

■詳細なシーンの映像や、複雑なカメラモーション、複数の人物の生成に対応している。

■プロンプトに対する理解が深く、忠実に再現されている。

Soraは現在まだテスト段階で、正確なリリース日は発表されておりません。

■Soraの映像は以下のOpen AI社の公式HPからチェックができます!

あわせて読みたい

実際にどのような動画が生成されるのか?

Open AI社の公式HPに沢山アップロードされていますが、いくつか私の方でピックアップさせて頂いた映像を以下に掲載させて頂きます。

プロンプト:彼はパリのカフェに座って宇宙の歴史について深く考えている。彼がほとんど動かずに座っていると、彼の目は画面の外の人々が歩いているのに焦点を合わせる、 茶色のベレー帽をかぶり、眼鏡をかけて、とても教授らしい風貌をしている。人生の謎に対する答えを見つけたかのように、最後に彼は微妙に口を閉じた笑みを浮かべる。

非常に長いプロンプトの指示に対して的確に特徴を捉えた映像を生成しているのがお分かりいただけるかと思います!

「まばたき」の精度も凄まじいですね。従来の動画生成AIツールでは、どうしたら自然にまばたきをさせられるかあれやこれやと様々な試行錯誤が繰り広げられていましたが、そんなものはもはや過去の話であると言わんばかりの自然なまばたき…。

プロンプト:カメラは、山の急斜面にある松の木に囲まれた急な未舗装道路を疾走する、黒いルーフラックのついた白いヴィンテージSUVの後ろを追う。未舗装の道路は緩やかにカーブし、他の車や車両は見当たらない。道の両側にはレッドウッドの木々が生い茂り、緑が点在している。後方から見る車はカーブに沿って軽々と走り、まるで起伏の多い地形を険しくドライブしているかのようだ。未舗装の道路は険しい丘と山に囲まれており、上空には澄み切った青空が広がり、うっすらと雲がかかっている。

この映像はもはや違和感が全く仕事していないですね!実写だと言われれば信じてしまうレベルの自然さでAI技術の進歩の速さを感じさせます。

プロンプト:アニメーションのシーンは、溶けた赤いろうそくのそばにひざまずく、背の低いふわふわしたモンスターのアップです。画風は3Dでリアル、照明とテクスチャーに重点を置いている。絵の雰囲気は驚きと好奇心のひとつで、モンスターは大きな目と口を開けて炎を見つめている。そのポーズと表情は、まるで初めて周囲の世界を探検しているかのような無邪気さと遊び心を感じさせる。暖色系の色使いとドラマチックな照明が、画像の居心地のよい雰囲気をさらに高めている。

ピクサーの映画に出てきそうな質感…!実写以外の映像もこのようにプロンプトで的確に指示すれば生成が可能です。

いずれの映像も比較的長いプロンプトを元にした生成結果ですが、指示に対する忠実度の高さがうかがえます。

言語の理解力は流石、ChatGPTで大規模言語モデルを牽引するOpen AI社の強みを活かしていると感じました!

OpenAIがTikTokにも参戦!

TikToKにOpen AI がアカウントを開設しました!

以下のアカウントにて、公式HPにはSoraの動画も公開されているので、是非チェック頂けると幸いです。

Sora を深掘り!ポイントをまとめていきます!

改めて冒頭のこちらの動画をベースに、Soraを深掘りして要チェックポイントをまとめて紹介していきたいと思います!

1分間の動画生成と言う圧倒的な尺の長さ

「1分」の動画が出来るって何が凄いの?って動画生成AIをまだ使った事がない方には思われてしまいそうですね。

実は昨今、何かと世間を賑わすAIにおいても動画生成の分野はまだまだ発展途上で、既存のツールだと生成できる動画はRunway Gen-2の16秒位が最大値になります。

その16秒の内、動画が破綻(人が崩れる、映像がグチャグチャになる)なく生成できるのは長くても4~5秒が限界でしょう。

そうした現状に対して、Soraでは最長で1分までの動画生成が可能と言うのは物凄い技術革新であると言えます。

しかも既にご覧頂いた通り、Soraの動画は小さな違和感はあれど、映像として大きな破綻がございません。

動画生成AIはSoraにより一気にそのクオリティを向上させる!と期待が高まるのもうなづけます!

プロンプトに対する忠実度が凄い!

Text to Video(テキストからビデオ)はその名の通り、文字で映像の詳細を指定していきます。

通常、この映像の詳細を指定する文字を「プロンプト」と呼びますが、Soraではこのプロンプトに対する忠実度が圧倒的に高いです。

プロンプト:暖かく光るネオンとアニメーションの街の看板で埋め尽くされた東京の通りを、スタイリッシュな女性が歩いている。黒のレザージャケットに赤いロングドレス、黒のブーツを履き、黒い財布を持っている。サングラスをかけ、赤い口紅を塗っている。彼女は自信に満ち、さりげなく歩いている。通りは湿っていて反射し、色とりどりのライトの鏡のような効果を生み出している。多くの歩行者が歩いている。

黄色が情景、赤がメインの人物、緑と青が細かい指定となりますが、いずれのポイントもキチンと漏れなく抑えた映像になっていると思います。

また、複数の歩行者の自然さも段違いです。

そもそも、既存の動画生成AIは複数の人物を登場させるような動画をまともに作る事自体がまだまだ難しいと感じていましたが、Soraにおいては各々歩くペースも方向もバラバラな歩行者が当たり前の様に生成されています。

複数人の人物が映る動画としては、以下の動画も凄いと思いました。

左側は流れに沿って歩いている人々、右側には様子を見守る人々が各々、一部はスマフォの様な物を手に持っているような様子もうかがえます。

また動画に限らず、生成AIでは細かい指定は無視される傾向もあるのですが「通りは湿っていて反射し、色とりどりのライトの鏡のような効果を生み出している。」と言った細かい指定もSoraは逃さずに映像内に反映されている様子がうかがえます。

動画の後半部分に至っては、なんと女性がかけているサングラスに反射した先の風景まで捉えられている様子が確認できました!

勿論、完璧ではない

圧倒的なクオリティを誇るSoraと言えど、勿論完璧でございません。

例えば看板の文字はグチャグチャだったりしますが、特に日本語への対応は当面は難しいかもしれません。

恐らくですが、英語であればもっときちんと生成されるのではないかなと思います。

他の生成AIを見てみても私が知る限り、日本語の出力に対応しているのは画像生成AIのMidjourney(Niji Ver.6)の一部のVersionのみです。日本語って漢字も平仮名もカタカナもあるし、複雑ですもんね…。

あわせて読みたい
Niji Journey v6徹底解説!画像生成AIの進化が止まらない! こんにちわ!もへろーです! 2024年1月30日に待望のNiji Journey V6 のアルファ版がリリースされました!! 首を長くして待たれていた方も多いのではないかと思います...

後はまだ細かい矛盾はどうしても発生してしまうようです。

例えば冒頭部分の女性の服の胸元には特段、模様の様な物は確認できませんが、

動画の後半部分には謎の黒い模様が追加されています。

一番最後の場面でも前半部分で手に持っていたバッグが消失し、ポケットに手を入れている様です。

あと、レジャージャケットの襟の部分が異常に肥大化してますね。

こうした細かいツッコみポイントはあれど、全体として見れば動画生成AIのクオリティは格段に向上していると思います!

Sora をいち早く体験する方法

まだリリース前のSoraですが、実はOpenAIの公式HPからいち早く体験する事ができます!

あわせて読みたい

テクニカルレポートのページより、少し下の方へスクロールをしていくと以下にような表示が出てきます。

上記にて、左側のプロンプトにいくつかのプリセットの候補が出てきます!

プリセット内の候補での変更のみですが、試しにSoraを体験できるので是非使ってみてください!

まとめ

最後までご覧になって頂きありがとうございます!

本日のポイント

■SoraはOpen AI社が今後公開を予定している動画生成AIです!

■最長1分までの動画を破綻なく生成できるポテンシャルを秘めているとして、注目を集めています!

■Soraの特色として詳細なシーンの映像や、複雑なカメラモーション、複数の人物の生成に対応し、クオリティが既存の動画生成AIよりも格段に向上しています!

後から見直したい方は是非、ブックマークに登録を頂けると幸いです。

オススメ記事

本ブログでは様々なAIに関する記事を公開させて頂いております。

良かったら他の記事もご覧になって頂けると幸いです。

あわせて読みたい
2024年最新版!無料で始められるおすすめ動画生成AI 8選! 「2024年!これから流行る動画生成AIを知りたい!」 「今おすすめの動画生成AIを知りたい!」 2023年はChatGPTや画像生成AIが脚光を浴びていましたが、2024年は動画生成...

What is モヘロー

主にAIやNFTに関する活用を紹介するブログを書いています。

Xで発信もしているので、良かったらフォロー頂けると嬉しいです。アカウントはこちらから!

よかったらシェアしてね!
  • URLをコピーしました!
  • URLをコピーしました!

コメント

コメントする

目次