こんにちわ！モヘローです！
今、最注目の動画生成AI 「Google Lumiere 」を皆様ご存じでしょうか？
2024年1月24日にGoogle社の研究チームが発表し、その圧倒的なクオリティに生成AI界隈で多くの注目と関心を集めています！
■Google Lumiere はまだ未公開ですが、今後最注目の動画生成AIです！
■既存AIツール以上のなめらかで自然な動画生成に期待が集まっています！
■多機能でスタイル変更や特定領域のアニメーション化、ビデオを修正する機能等 が実装見込みです！
■今後リリースされれば間違いなく動画生成AI界隈を牽引するポジションになると思います！
本記事はご覧になりたい事項に対し、目次から飛ぶことができます。
Google Lumiere 概要
Google Lumiere とは？
Google社が今後、展開を見込んでいる動画生成AIです！
読み方はLumiere (ルミエール)で、意味はフランス語で「光」を指す言葉です。
Lumiereは既存の動画生成AIと比較して、以下の様なポイントで注目が集まっております！
■フレーム同士が自然につながる、違和感の少ない動画を生成が出来る！
■テキストや画像からの動画生成の他、スタイルの変更や特定領域のアニメーション化、ビデオを修正する機能等が盛り込まれる！
既存の動画生成AIでは特有の「違和感」や「不整合」等が発生しがちですが、Google Lumiere では独自のアーキテクチャによりこうした問題を解消し、「自然な動画」が生成できると紹介されております。
更にテキストや画像からの生成以外にも様々な機能が盛り込まれており、今後の動画生成AIを牽引するポジションになるのではないかと期待されています。
■公式サイトはこちらから！
■Google AIのXアカウントはこちらから！
実際にどのような動画が生成されるのか？
YoutubeにてLumiereの紹介動画が公開されておりますので、まずはこちらをご覧頂けると幸いです！
Google Lumiereで実装される機能
具体的にLumiereではどのような機能が実装される予定なのかを本項で紹介していきます。
Text to Video と Image to Video 機能が実装される
昨今の動画生成AIではもはやお馴染みとなりつつありますが、Lumiereでも「テキストから映像」と「画像から映像」の機能が実装される予定です。
以下は公式HPからの抜粋となります。
参照画像に沿った動画生成
公式HPではステッカー/3Dメルティングゴールド/水彩画等が掲載をされています。
■ステッカースタイル
■発行スタイル
参照画像のスタイルを踏襲して動画生成をするような機能は、私の知る限りでは他の動画生成AIでは実装されていないと思うので、非常に興味深いですね！
ビデオのスタイル化
こちらは恐らくテキストで指示をして動画を様々なスタイルに変換出来るような機能なのかと想像しております。
木や折り紙、LEGOは面白いと思うのですが、流石に花で出来ているは少しホラーだと思いました！ (ガクブル)
こちらもやはり他の動画生成AIでは実装されていないような機能ではありますが、類似する機能だとHaiper AIのRepaint機能 (動画をLEGO変換できる) や、Domo AI(動画をアニメやピクセル等に変換できる)が近そうだと感じました。
シネマグラフ
こちらは指定した範囲だけ画像をアニメーション化する機能です！
公式HPをご覧になると指定の範囲(蝶や炎、水面等)だけが動画化されている様子がお分かりになるかと思います。
他の動画生成AIではRunway Gen-2のMotion Brush機能に近いかなと思います。
ビデオの修復
こちらはビデオ内でマスクされた(隠された/あるいは欠損した)部分を自動で修復して補ってくれるような機能を想像しております。
以下、画像の左側の赤枠の範囲が黒塗りになってしまっていますが、右側の画像では自然な形に補完されているのがお分かりいただけるかと思います。
こちらは私の知る限り、既存の動画生成AIではまだ見たことがない機能ですね！ 画像生成AI分野では特定領域の再生成自体はMidjourneyでも実装されている機能(Vary Region)なので、メジャーになってきた感があります。
動画生成AIでも使えるとなると、色々と創作の幅が広がりそうですね！
まとめ
最後までご覧になって頂きありがとうございます！
本日のポイント
■Google Lumiere はまだ未公開ですが、今後最注目の動画生成AIです！
■既存の動画生成AI以上のなめらかで自然な動画生成に期待が集まっています！
■非常に多機能で創作の幅が広がりそうです！
■今後リリースされれば間違いなく動画生成AI界隈を牽引するポジションのツールになると思います！
後から見直したい方は是非、ブックマークに登録を頂けると幸いです。
オススメ記事
本ブログでは様々なAIツールに関する記事を公開させて頂いております。
良かったら他の記事もご覧になって頂けると幸いです。
What is モヘロー
主にAIやNFTに関する活用を紹介するブログを書いています。
Xで発信もしているので、良かったらフォロー頂けると嬉しいです。アカウントはこちらから！
コメント