基本操作

話している動画の声・表情・頭の動きを、アバターに写す(セルフィーから作る)

「セルフィーから作る」は、人が話している動画を元にして、アバターに演技を付ける機能です。せりふを文字で入力する代わりに、動画に入っている声・表情と口の動き・頭の動きを読み取って、タイムラインに置きます。このページでは、8秒の挨拶の動画を取り込み、公開アバターのリュウトが同じ挨拶をする作例を、同じ作品の実際の画面でご案内します。

写真から新しいアバターの見た目を作る機能とは別のものです。ここで使うアバターは、アバター追加の一覧にある既存のアバターです。動画に写っている人の見た目は、完成動画には出ません。

12ステップ実画面付き

完成例を動画で見る

この手順で作った動画です。操作説明の録画ではなく、書き出した完成例を再生できます。

はじめの挨拶 — リュウトとセルフィーから作る

人が話している8秒の動画を取り込み、声・表情・頭の動きをリュウトに写した作例です。声は「大地カケル」に置き換えています。元の動画の映像は入っていません。体の動きはなし、背景はプリセットの「明るいリビングルーム」です。

8.4秒 · 動画を別のタブで開く ↗

BEFORE YOU START / 準備

準備するもの

人が正面を向いて話している動画を1本用意します。取り込みの画面には「顔がはっきり写り、静かな場所で正面を向いて話した動画がきれいに写ります」「最長 10 分」と書かれています。対応形式は mp4 / webm / mov です。この作例では、縦長・8秒の mp4 を使いました。編集画面では、先に「アバター追加」で演じさせたいアバター(この作例ではリュウト)を置いておきます。背景の画像は見栄えのために置いたもので、セルフィーの取り込みには関係ありません。取り込みにはクレジットがかかります(画面の表示は「1 分あたり 30 クレジット(1 分未満は切り上げ)」)。

画面例は撮影用プロジェクトの実画面です。ご契約プランや更新状況によって表示が異なる場合があります。操作はPCブラウザを例に説明しています。このマニュアルはスマートフォンからも読めます。

STEP01

アバターを置いて、「セルフィー」を開く

トラック編集画面の下半分の時間軸に、演じさせたいアバターのアバタークリップ(人物の映像の帯)がある状態から始めます。この時点では、せりふはまだ入っていません。

  1. アバタークリップ(この作例ではリュウト)があることを確認します。
  2. プレビューのすぐ下に並ぶボタンの列(ツールバー)にある「セルフィー」をクリックします。
  1. 確認 アバタークリップ(この作例ではリュウト)があることを確認します。
  2. 操作 プレビューのすぐ下に並ぶボタンの列(ツールバー)にある「セルフィー」をクリックします。
アバターを置いて、「セルフィー」を開く — リュウトが挨拶する作例の実際の画面。

確認ポイント 「セルフィーから作る」の画面が開きます。上に「入力 → 取り込み → 選ぶ → 置く」の4つの段階が並びます。

STEP02

段階1「入力」:動画ファイルを選ぶ

最初の段階では、元にする動画を指定します。この作例では、用意しておいた動画ファイルを選びます。

  1. 「動画ファイル」が選ばれていることを確認します。
  2. 「ファイルを選ぶ…」をクリックして、パソコンの動画を選びます。枠の中へドラッグ&ドロップしても選べると書かれています。
  3. 料金と、きれいに写る動画の条件を読みます。
  1. 確認 「動画ファイル」が選ばれていることを確認します。
  2. 操作 「ファイルを選ぶ…」をクリックして、パソコンの動画を選びます。枠の中へドラッグ&ドロップしても選べると書かれています。
  3. 確認 料金と、きれいに写る動画の条件を読みます。
段階1「入力」:動画ファイルを選ぶ — リュウトが挨拶する作例の実際の画面。

確認ポイント 隣の「カメラで録画」「音声だけ」「履歴から」は、その場で録画する、音声だけを使う、前に取り込んだものを使うための入口です。この記事では実演していません。「履歴から」は、取り込んだことがない作品では押せません。

STEP03

選んだ動画を確かめて、「取り込む」

動画を選ぶと、画面の上半分に確認用のプレーヤーが出て、その下にファイル名が表示されます。この図は、プレーヤーより下の部分です。

  1. 選んだファイルの名前と大きさを確認します。別の動画にするときは、プレーヤーの右上のごみ箱で外します。
  2. 「取り込む」をクリックします。
  1. 確認 選んだファイルの名前と大きさを確認します。別の動画にするときは、プレーヤーの右上のごみ箱で外します。
  2. 操作 「取り込む」をクリックします。
選んだ動画を確かめて、「取り込む」 — リュウトが挨拶する作例の実際の画面。

確認ポイント 画面の説明のとおり、取り込む前に、顔が大きく写っているかを確認用のプレーヤーで見ておきます。

STEP04

段階2「取り込み」:解析が終わるまで待つ

取り込みが始まると、動画を整えたあと、顔の動きの解析に進みます。

  1. いまの処理と進み具合が表示されます。
  2. 動画の長さと、かかるクレジットが表示されます。この作例は「長さ 8 秒・30 クレジット」です。
  3. この画面を閉じても処理は続き、失敗したときは料金がかからない、と書かれています。
  1. 確認 いまの処理と進み具合が表示されます。
  2. 確認 動画の長さと、かかるクレジットが表示されます。この作例は「長さ 8 秒・30 クレジット」です。
  3. 確認 この画面を閉じても処理は続き、失敗したときは料金がかからない、と書かれています。
段階2「取り込み」:解析が終わるまで待つ — リュウトが挨拶する作例の実際の画面。

確認ポイント 8秒のこの作例では、30秒ほどで次の段階へ進みました。待ち時間は動画の長さや混み具合で変わります。

STEP05

段階3「選ぶ」:置き換える声を選ぶ

取り込みが終わると、声・頭の動き・表情と口を、どのようにアバターへ写すかを選ぶ画面になります。まず声です。元の声のまま使うこともできますが、この作例では別の声に置き換えます。「声を変える」の行の「声を選ぶ…」を押すと、この声の一覧が開きます。

  1. 声の名前で絞り込めます。この作例では「大地」と入力しました。
  2. 使いたい声の行をクリックして選びます。この作例は「大地カケル」です。
  3. 「しゃべりかた」は、開いたときの設定のままにしました。
  4. 「この声にする」をクリックします。
  1. 入力 声の名前で絞り込めます。この作例では「大地」と入力しました。
  2. 操作 使いたい声の行をクリックして選びます。この作例は「大地カケル」です。
  3. 確認 「しゃべりかた」は、開いたときの設定のままにしました。
  4. 操作 「この声にする」をクリックします。
段階3「選ぶ」:置き換える声を選ぶ — リュウトが挨拶する作例の実際の画面。

確認ポイント 一覧の右端にある「試聴」を使うと、声を聞いてから選べます(この記事では実演していません)。

STEP06

選んだ声で確定する

声を選ぶと、「選ぶ」の画面に戻ります。選んだだけでは、まだ声は置き換わっていません。

  1. 「声を選ぶ…」の右に選んだ声の名前(大地カケル)が出ていることを確かめて、青い「この声で確定」をクリックします。ボタンには、かかるクレジットと長さが書かれます。
  2. 試聴は無料で、確定すると声の長さに応じてクレジットを消費する、と書かれています。
  1. 操作 「声を選ぶ…」の右に選んだ声の名前(大地カケル)が出ていることを確かめて、青い「この声で確定」をクリックします。ボタンには、かかるクレジットと長さが書かれます。
  2. 確認 試聴は無料で、確定すると声の長さに応じてクレジットを消費する、と書かれています。
選んだ声で確定する — リュウトが挨拶する作例の実際の画面。

確認ポイント この作例のアカウントでは、ボタンに「使い放題のため消費なし・8 秒」と表示されました。表示はご契約のプランによって変わります。確定の前に「声を聴く」「5 秒だけ試す(無料)」で確かめることもできます(この記事では実演していません)。

STEP07

声が置き換わったことを確かめる

数秒で声の置き換えが終わり、「変えた声」の行が増えます。

  1. 「変えた声」と書かれた行のプレーヤーで、置き換えた声を聞けます(この記事では再生していません)。
  2. 「大地カケル に変えました(トラックにはこの声を置きます)」と表示されます。
  3. 元の声に戻したいときは「元の声に戻す」を使います。
  1. 確認 「変えた声」と書かれた行のプレーヤーで、置き換えた声を聞けます(この記事では再生していません)。
  2. 確認 「大地カケル に変えました(トラックにはこの声を置きます)」と表示されます。
  3. 確認 元の声に戻したいときは「元の声に戻す」を使います。
声が置き換わったことを確かめる — リュウトが挨拶する作例の実際の画面。

確認ポイント 図では、確定ボタンがあった場所に「声を変えています…」という薄い文字が残っていますが、置き換えは終わっています。

STEP08

頭の動きと、表情と口の写し方を確かめる

同じ画面を下へ見ていくと、頭の動きと、表情と口の設定があります。この作例では、どれも開いたときの設定のままにしました。

  1. 「頭の動き」にチェックが入っていると、動画の頭の動きを写します。
  2. 「動きの整え方」は「標準」です。下に、読み取った動きの範囲が表示されます。
  3. 「表情と口」にチェックが入っていると、表情と口の動きを写します。
  4. 「動画の口の形を写す」が選ばれています。動画の口の開き方や形を、そのまま写す設定です。
  1. 確認 「頭の動き」にチェックが入っていると、動画の頭の動きを写します。
  2. 確認 「動きの整え方」は「標準」です。下に、読み取った動きの範囲が表示されます。
  3. 確認 「表情と口」にチェックが入っていると、表情と口の動きを写します。
  4. 確認 「動画の口の形を写す」が選ばれています。動画の口の開き方や形を、そのまま写す設定です。
頭の動きと、表情と口の写し方を確かめる — リュウトが挨拶する作例の実際の画面。

確認ポイント さらに下に「表情スムージング」「動きの強さ」(100%=読み取ったまま)があります。設定を確かめたら、画面をいちばん下まで送り、「次へ」をクリックして次の段階へ進みます(「次へ」は、この図には写っていません)。「口の開き具合を試す」は実演していません。

STEP09

段階4「置く」:内容を確かめて、トラックに置く

最後の段階では、これからタイムラインに置く内容の一覧が出ます。

  1. 置く先のトラック、声、頭の動き、表情と口、動きの強さ、長さを確認します。
  2. 「トラックに置く」をクリックします。
  1. 確認 置く先のトラック、声、頭の動き、表情と口、動きの強さ、長さを確認します。
  2. 操作 「トラックに置く」をクリックします。
段階4「置く」:内容を確かめて、トラックに置く — リュウトが挨拶する作例の実際の画面。

確認ポイント 画面の下に、置いたあとはアバタークリップが「要生成」になり、「未生成を生成」で映像に反映されると書かれています。なお、この実演ではアバタークリップの長さは5秒のままで、自動では伸びませんでした。そこで、いちど再生して再生位置が声の終わり(8.40秒)で止まった状態にし、アバタークリップを右クリックして「終了時間を再生ヘッドまで延長する」を選び、8.40秒まで伸ばしました。背景の画像も同じ操作で伸ばしています(この操作の図はありません)。次の図は、伸ばしたあとの画面です。

STEP10

タイムラインにできたクリップを見る

置き終わると、アバターのトラックの下に、声・頭の動き・表情の3つのクリップができます。図は、作品を保存して開き直したあとの画面です。

  1. 「ava_1の音声」に、置き換えた声の発話クリップがあります。動画から読み取った言葉が、文字として表示されます。
  2. 「ava_1の頭の動き」に、「セルフィー」と書かれたクリップがあります(強さ 1.0)。
  3. 「ava_1の表情」にも、「セルフィー」のクリップがあります(強さ 100%)。
  4. アバタークリップはまだ生成前です。「未生成を生成」をクリックして、映像を作ります。
  1. 確認 「ava_1の音声」に、置き換えた声の発話クリップがあります。動画から読み取った言葉が、文字として表示されます。
  2. 確認 「ava_1の頭の動き」に、「セルフィー」と書かれたクリップがあります(強さ 1.0)。
  3. 確認 「ava_1の表情」にも、「セルフィー」のクリップがあります(強さ 100%)。
  4. 操作 アバタークリップはまだ生成前です。「未生成を生成」をクリックして、映像を作ります。
タイムラインにできたクリップを見る — リュウトが挨拶する作例の実際の画面。

確認ポイント この作例で文字になった言葉は「こんにちはです。 今日はここね、新しいことにチャレンジしますね。 よろしくお願いします。」でした。声は動画の音声を元にしているので、この文字を直しても声は変わりません(発話クリップの設定に「音声は変わりません(字幕とクリップの表示だけ)」と表示されます)。

STEP11

生成して、再生で確かめる

生成が終わると、アバタークリップに「✓ プレビュー生成済」と表示されます。再生して、アバターが動画と同じように話すかを確かめましょう。図は再生している途中の画面です。

  1. アバタークリップが「✓ プレビュー生成済」になったことを確認します。
  2. プレビューのすぐ下の列の左端にある再生ボタンをクリックして再生します。図は再生中なので、一時停止のマークになっています。
  1. 確認 アバタークリップが「✓ プレビュー生成済」になったことを確認します。
  2. 操作 プレビューのすぐ下の列の左端にある再生ボタンをクリックして再生します。図は再生中なので、一時停止のマークになっています。
生成して、再生で確かめる — リュウトが挨拶する作例の実際の画面。

確認ポイント 頭の傾きや、目・口の動きが、元の動画の話し方に合わせて付きます。音を出せる環境で、置き換えた声と口の動きが合っているかも聞いてみましょう。

STEP12

書き出して、完成動画を確かめる

最後に、上部の「出力」→「動画書き出し」でMP4にします。書き出しが終わると、完成した動画のプレーヤーが開きます。図は最後まで再生したあとの画面です。

  1. 時間の表示が「0:08 / 0:08」になり、最後まで再生できたことが分かります。
  2. 確認が終わったら「閉じる」をクリックします。
  1. 確認 時間の表示が「0:08 / 0:08」になり、最後まで再生できたことが分かります。
  2. 操作 確認が終わったら「閉じる」をクリックします。
書き出して、完成動画を確かめる — リュウトが挨拶する作例の実際の画面。

確認ポイント 書き出しの設定やダウンロードの手順は、「完成した動画をMP4で書き出す」でご案内しています。完成動画には、アバターと背景、置き換えた声だけが入り、元の動画の映像は入りません。

BEFORE YOU FINISH

最後に、ここを確認。

取り込んだ動画の声・頭の動き・表情がタイムラインに置かれ、生成したアバターが同じ挨拶をしたら、この練習は終了です。うまく写らないときは、顔がはっきり正面から写った、静かな場所の動画で試してみてください。

拡大後は画面を左右・上下に動かせます