SNSで自分のブランドやコンテンツをアピールするには、動画やアニメーションが欠かせません。しかし、アニメーションを作成するのは、時間やコストがかかる上に、専門的なスキルが必要です。
そこで注目されているのが、ByteDanceが開発したAIアニメーションツール「Magic Animate」です。Magic Animateは、静止画や動画からキャラクターの動きや表情を自動的に生成し、オリジナルのアニメーションを作成することができます。
この記事では、Magic Animateの特徴や活用方法について、詳しく解説します。
MagicAnimateとは？
MagicAnimateは、ByteDance（バイトダンス社）によって開発されたAI（人工知能）を活用したアニメーション制作ツールです。MagicAnimateを用いることで、静止画や動画からキャラクターの動きや表情をAIが自動で読み取り、それをもとにオリジナルのアニメーションを作成することが可能です。
MagicAnimateは将来的にByteDanceのアプリ（TikTokやCapCut）に統合される予定です。2023年12月時点で技術発表があったのみで、アプリ実装はされていません。
MagicAnimateで何ができる？
簡単にいうと、顔を変えて動画作成ができます。顔だけを変えたエフェクトはTikTokで利用可能ですが、ダンスや動きなどをアニメーション化、もしくは異なる人物にスワップすることはまだできません。MagicAnimateはそれらを可能にします。そして、必要なデバイスはスマホ一台です。
どこの会社が開発？
ByteDanceは、2012年に中国で設立されたテクノロジー企業です。動画共有サービスのTikTokを運営しており、現在は梁汝波氏がCEOを務めています。同社は世界中に約150,000人の社員を持ち、多くの国や地域にオフィスを構えています。
AI技術を活用し、ユーザーの好みに合わせたコンテンツ提供や多言語・多文化対応のグローバルプラットフォームで知られています。一方で、中国政府との関係やデータ取り扱い、プライバシー保護などの問題も抱えています。
参照：ByteDance
MagicAnimateは無料？
ByteDanceの関連するアプリに統合されるということで無料で利用できます。ただし、アプリの課金がある場合は、仕様に従う必要があります。基本的に従来のエフェクトなどと同じく、無料で利用できると思われています。2023年12月現在はMagicAnimate_colab.ipynbで試行することが可能です。他にもSpaceで解放しているところもあります。
参照：MagicAnimate
MagicAnimateの使い方
2023年12月時点でTikTokアプリには統合されていません。しかし、MagicAnimate_colab.ipynbとSpaceで利用可能です。コラボは無課金だと生成遅いですが、試すだけなら問題ないでしょう。10分以上待ちます。
MagicAnimate_colab.ipynbで試す
camenduru氏公開です。
MagicAnimate_colab.ipynbで試す
zcxu-eric氏公開です。
リンク：Space
MagicAnimateの技術
MagicAnimateの機能を具体的に解説します。Magic Animateは人物画像だけでなく、漫画もアニメーション化でき、さらに複数人物の動きも扱えます。
Animating Human Image
MagicAnimateは、時間的一貫性を持って動きのシーケンスに従って参照画像をアニメーション化します。つまり、人物の画像を動的に動かし、連続的な動きを表現することが可能です。
Qualitative Comparisons
MagicAnimateと他の基準（ベースライン）との比較を行い、ビデオ結果を提供しています。これは、MagicAnimateのアニメーション品質がどのように異なるかを示しています。
Cross-ID Animation
異なるビデオからの動きのシーケンスを使用して、参照画像をアニメーション化する際のMagicAnimateと他の最新技術（SOTA）ベースラインとの比較。異なるアイデンティティ（身元）と動きのシーケンスでビデオ結果を示しています。
Unseen Domain Animation
まだ見たことのないドメインの画像（例えば油絵や映画のキャラクター）をアニメーション化して、走ったりヨガをしたりする動きを表現します。
Combining MagicAnimate with T2I Diffusion Model
DALLE3によって生成された参照画像を、様々なアクションでアニメーション化します。各参照画像のテキストプロンプトも示されています。
Multi-person Animation
複数人を含む画像を、与えられた動きに従ってアニメーション化する機能があります。
MagicAnimateの活用事例
Magic Animateは、静止画や動画からアニメーションを作成できる革新的なツールです。Magic Animateを使って、ビジネスやSNSで自分のコンテンツをより魅力的にすることができます。
広告やプロモーションの作成
Magic Animateは、TikTokやCapCutなどのアプリに統合されているので、作成したアニメーションを簡単にSNSにシェアすることができます。これにより、広告やプロモーションの効果を高めることができます。
静止画や動画からキャラクターを作り出し、そのキャラクターに商品やサービスの説明をさせることで、視聴者の注意を引くことができます。
教育や学習の支援
教育や学習に関するコンテンツをアニメーションで作成することができます。例えば、歴史や科学などの分野に関する静止画や動画からキャラクターを作り出し、そのキャラクターに教育や学習の内容を説明させることで、視聴者の理解を深めることができます。
Magic Animateは、キャラクターの動きや表情を自動的に生成するので、教育や学習のコンテンツを楽しく見せることができます。
エンターテイメントや趣味の発揮
エンターテイメントや趣味に関するコンテンツをアニメーションで作成することができます。例えば、自分の好きな漫画やアニメの静止画や動画からキャラクターを作り出し、そのキャラクターに自分のオリジナルのストーリーやセリフを付けることで、自分だけのアニメーションを作成することができます。
漫画家やクリエイターを支援する日本独自のプログラム「TikTok Magic Animate Creator Program」にも注目です。Magic Animateを使ってアニメーションを作成する漫画家やクリエイターに、プロモーション支援やフィードバックの機会を提供しています。
まとめ
Magic Animateを使えば、ビジネスやSNSで自分のコンテンツをより魅力的にすることができます。Magic Animateで、自分の創造性を発揮してみませんか？
Magic Animateで、魔法のようなアニメーションを作ろう！