動画生成AIの新たな時代!Google Lumiereを徹底解説!

こんにちわ!モヘローです!

今、最注目の動画生成AI 「Google Lumiere 」を皆様ご存じでしょうか?

2024年1月24日にGoogle社の研究チームが発表し、その圧倒的なクオリティに生成AI界隈で多くの注目と関心を集めています!

Demoムービーや、実装されるであろう機能、既存の動画生成AIとの違いを、本記事でまとめて参ります!

■Google Lumiere はまだ未公開ですが、今後最注目の動画生成AIです!

■既存AIツール以上のなめらかで自然な動画生成に期待が集まっています!

■多機能でスタイル変更や特定領域のアニメーション化、ビデオを修正する機能等 が実装見込みです!

■今後リリースされれば間違いなく動画生成AI界隈を牽引するポジションになると思います!

本記事はご覧になりたい事項に対し、目次から飛ぶことができます。

目次

Google Lumiere 概要

Google Lumiere とは?

Google社が今後、展開を見込んでいる動画生成AIです!

読み方はLumiere (ルミエール)で、意味はフランス語で「光」を指す言葉です。

Lumiereは既存の動画生成AIと比較して、以下の様なポイントで注目が集まっております!

■フレーム同士が自然につながる、違和感の少ない動画を生成が出来る!

■テキストや画像からの動画生成の他、スタイルの変更や特定領域のアニメーション化、ビデオを修正する機能等が盛り込まれる!

既存の動画生成AIでは特有の「違和感」や「不整合」等が発生しがちですが、Google Lumiere では独自のアーキテクチャによりこうした問題を解消し、「自然な動画」が生成できると紹介されております。

更にテキストや画像からの生成以外にも様々な機能が盛り込まれており、今後の動画生成AIを牽引するポジションになるのではないかと期待されています。

■公式サイトはこちらから!

Lumiere - Google Research
Lumiere - Google Research Space-Time Text-to-Video diffusion model by Google Research.

Google AIのXアカウントはこちらから!

実際にどのような動画が生成されるのか?

YoutubeにてLumiereの紹介動画が公開されておりますので、まずはこちらをご覧頂けると幸いです!

自然で違和感のない動画が生成されるイメージが湧くのではないでしょうか!

Google Lumiereで実装される機能

具体的にLumiereではどのような機能が実装される予定なのかを本項で紹介していきます。

Text to Video と Image to Video 機能が実装される

昨今の動画生成AIではもはやお馴染みとなりつつありますが、Lumiereでも「テキストから映像」と「画像から映像」の機能が実装される予定です。

以下は公式HPからの抜粋となります。

参照画像に沿った動画生成

1枚の参照画像を元に、様々なスタイルの動画生成に対応するようです!

公式HPではステッカー/3Dメルティングゴールド/水彩画等が掲載をされています。

■ステッカースタイル

■発行スタイル

参照画像のスタイルを踏襲して動画生成をするような機能は、私の知る限りでは他の動画生成AIでは実装されていないと思うので、非常に興味深いですね!

ビデオのスタイル化

こちらは恐らくテキストで指示をして動画を様々なスタイルに変換出来るような機能なのかと想像しております。

木や折り紙、LEGOは面白いと思うのですが、流石に花で出来ているは少しホラーだと思いました! (ガクブル)

こちらもやはり他の動画生成AIでは実装されていないような機能ではありますが、類似する機能だとHaiper AIのRepaint機能 (動画をLEGO変換できる) や、Domo AI(動画をアニメやピクセル等に変換できる)が近そうだと感じました。

あわせて読みたい
動画生成 Haiper AI徹底解説!料金、商用利用、使い方まとめ 2024年になってから動画生成AI界隈が活況過ぎて、新しいツールが乱立しまくってます...! もはやどこから追いかけて良いのかわからなくなりつつあるのですが、1月25日に...
あわせて読みたい
TikTok映え間違いなし!DomoAIでアニメ風動画を作ろう! 「AIで一風変わった動画を生成してバズらせてみたい!」 「最新のAIを駆使した動画で皆をアッと言わせてみたい...!」 そんなあなたにうってつけの最新動画変換AIツール...

シネマグラフ

こちらは指定した範囲だけ画像をアニメーション化する機能です!

公式HPをご覧になると指定の範囲(蝶や炎、水面等)だけが動画化されている様子がお分かりになるかと思います。

動画生成AIは意図しない部分が勝手に動き出してしまうと言った現象が発生しがちなので、指定の範囲だけアニメーション化するような機能で、よりユーザーの意図に沿った動画を作れるようになります!

他の動画生成AIではRunway Gen-2のMotion Brush機能に近いかなと思います。

あわせて読みたい
RunwayGen-2: 無料で試せる動画生成AI!使い方と料金プラン解説 「無料で始められる高機能な動画生成AIを使ってみたい!」 「RunwayGen-2を使ってみたいけど、登録や使い方が良くわからない!」 なんてお考えのそこのあなた! ようこ...

ビデオの修復

こちらはビデオ内でマスクされた(隠された/あるいは欠損した)部分を自動で修復して補ってくれるような機能を想像しております。

以下、画像の左側の赤枠の範囲が黒塗りになってしまっていますが、右側の画像では自然な形に補完されているのがお分かりいただけるかと思います。

この機能を応用すれば、例えば以下の様に人物が着ている服を別の服に修正したり、動物に王冠やサングラスをかけさせることも可能になるようです。

こちらは私の知る限り、既存の動画生成AIではまだ見たことがない機能ですね! 画像生成AI分野では特定領域の再生成自体はMidjourneyでも実装されている機能(Vary Region)なので、メジャーになってきた感があります。

動画生成AIでも使えるとなると、色々と創作の幅が広がりそうですね!

まとめ

最後までご覧になって頂きありがとうございます!

本日のポイント

■Google Lumiere はまだ未公開ですが、今後最注目の動画生成AIです!

■既存の動画生成AI以上のなめらかで自然な動画生成に期待が集まっています!

■非常に多機能で創作の幅が広がりそうです!

■今後リリースされれば間違いなく動画生成AI界隈を牽引するポジションのツールになると思います!

後から見直したい方は是非、ブックマークに登録を頂けると幸いです。

オススメ記事

本ブログでは様々なAIツールに関する記事を公開させて頂いております。

良かったら他の記事もご覧になって頂けると幸いです。

あわせて読みたい
2024年最新版!無料で始められるおすすめ動画生成AI 8選! 「2024年!これから流行る動画生成AIを知りたい!」 「今おすすめの動画生成AIを知りたい!」 2023年はChatGPTや画像生成AIが脚光を浴びていましたが、2024年は動画生成...

What is モヘロー

主にAIやNFTに関する活用を紹介するブログを書いています。

Xで発信もしているので、良かったらフォロー頂けると嬉しいです。アカウントはこちらから!

よかったらシェアしてね!
  • URLをコピーしました!
  • URLをコピーしました!

コメント

コメントする

目次