サイトアイコン ひとり構造改革

MagicAnimateとは?ByteDance×3DアニメーションでSNS戦略を効率化

SNSで自分のブランドやコンテンツをアピールするには、動画やアニメーションが欠かせません。しかし、アニメーションを作成するのは、時間やコストがかかる上に、専門的なスキルが必要です。

そこで注目されているのが、ByteDanceが開発したAIアニメーションツール「Magic Animate」です。Magic Animateは、静止画や動画からキャラクターの動きや表情を自動的に生成し、オリジナルのアニメーションを作成することができます。

この記事では、Magic Animateの特徴や活用方法について、詳しく解説します。

MagicAnimateとは?

MagicAnimateは、ByteDance(バイトダンス社)によって開発されたAI(人工知能)を活用したアニメーション制作ツールです。MagicAnimateを用いることで、静止画や動画からキャラクターの動きや表情をAIが自動で読み取り、それをもとにオリジナルのアニメーションを作成することが可能です。

MagicAnimateは将来的にByteDanceのアプリ(TikTokやCapCut)に統合される予定です。2023年12月時点で技術発表があったのみで、アプリ実装はされていません。

MagicAnimateで何ができる?

簡単にいうと、顔を変えて動画作成ができます。顔だけを変えたエフェクトはTikTokで利用可能ですが、ダンスや動きなどをアニメーション化、もしくは異なる人物にスワップすることはまだできません。MagicAnimateはそれらを可能にします。そして、必要なデバイスはスマホ一台です。

どこの会社が開発?

ByteDanceは、2012年に中国で設立されたテクノロジー企業です。動画共有サービスのTikTokを運営しており、現在は梁汝波氏がCEOを務めています。同社は世界中に約150,000人の社員を持ち、多くの国や地域にオフィスを構えています。

AI技術を活用し、ユーザーの好みに合わせたコンテンツ提供や多言語・多文化対応のグローバルプラットフォームで知られています。一方で、中国政府との関係やデータ取り扱い、プライバシー保護などの問題も抱えています。

参照:ByteDance

MagicAnimateは無料?

ByteDanceの関連するアプリに統合されるということで無料で利用できます。ただし、アプリの課金がある場合は、仕様に従う必要があります。基本的に従来のエフェクトなどと同じく、無料で利用できると思われています。2023年12月現在はMagicAnimate_colab.ipynbで試行することが可能です。他にもSpaceで解放しているところもあります。

参照:MagicAnimate

MagicAnimateの使い方

2023年12月時点でTikTokアプリには統合されていません。しかし、MagicAnimate_colab.ipynbとSpaceで利用可能です。コラボは無課金だと生成遅いですが、試すだけなら問題ないでしょう。10分以上待ちます。

MagicAnimate_colab.ipynbで試す

camenduru氏公開です。

リンク:MagicAnimate_colab.ipynb

MagicAnimate_colab.ipynbで試す

zcxu-eric氏公開です。

リンク:Space

MagicAnimateの技術

MagicAnimateの機能を具体的に解説します。Magic Animateは人物画像だけでなく、漫画もアニメーション化でき、さらに複数人物の動きも扱えます。

Animating Human Image

MagicAnimateは、時間的一貫性を持って動きのシーケンスに従って参照画像をアニメーション化します。つまり、人物の画像を動的に動かし、連続的な動きを表現することが可能です。

Qualitative Comparisons

MagicAnimateと他の基準(ベースライン)との比較を行い、ビデオ結果を提供しています。これは、MagicAnimateのアニメーション品質がどのように異なるかを示しています。

Cross-ID Animation

異なるビデオからの動きのシーケンスを使用して、参照画像をアニメーション化する際のMagicAnimateと他の最新技術(SOTA)ベースラインとの比較。異なるアイデンティティ(身元)と動きのシーケンスでビデオ結果を示しています。

Unseen Domain Animation

まだ見たことのないドメインの画像(例えば油絵や映画のキャラクター)をアニメーション化して、走ったりヨガをしたりする動きを表現します。

Combining MagicAnimate with T2I Diffusion Model

DALLE3によって生成された参照画像を、様々なアクションでアニメーション化します。各参照画像のテキストプロンプトも示されています。

Multi-person Animation

複数人を含む画像を、与えられた動きに従ってアニメーション化する機能があります。

MagicAnimateの活用事例

Magic Animateは、静止画や動画からアニメーションを作成できる革新的なツールです。Magic Animateを使って、ビジネスやSNSで自分のコンテンツをより魅力的にすることができます。

広告やプロモーションの作成

Magic Animateは、TikTokやCapCutなどのアプリに統合されているので、作成したアニメーションを簡単にSNSにシェアすることができます。これにより、広告やプロモーションの効果を高めることができます。

静止画や動画からキャラクターを作り出し、そのキャラクターに商品やサービスの説明をさせることで、視聴者の注意を引くことができます。

教育や学習の支援

教育や学習に関するコンテンツをアニメーションで作成することができます。例えば、歴史や科学などの分野に関する静止画や動画からキャラクターを作り出し、そのキャラクターに教育や学習の内容を説明させることで、視聴者の理解を深めることができます。

Magic Animateは、キャラクターの動きや表情を自動的に生成するので、教育や学習のコンテンツを楽しく見せることができます。

エンターテイメントや趣味の発揮

エンターテイメントや趣味に関するコンテンツをアニメーションで作成することができます。例えば、自分の好きな漫画やアニメの静止画や動画からキャラクターを作り出し、そのキャラクターに自分のオリジナルのストーリーやセリフを付けることで、自分だけのアニメーションを作成することができます。

漫画家やクリエイターを支援する日本独自のプログラム「TikTok Magic Animate Creator Program」にも注目です。Magic Animateを使ってアニメーションを作成する漫画家やクリエイターに、プロモーション支援やフィードバックの機会を提供しています。

まとめ

Magic Animateを使えば、ビジネスやSNSで自分のコンテンツをより魅力的にすることができます。Magic Animateで、自分の創造性を発揮してみませんか?

Magic Animateで、魔法のようなアニメーションを作ろう!

モバイルバージョンを終了