セリフに合わせ口の動きや表情を自動生成――セガ「Magical VEngine」
セガは、3D CGアニメーションなどでセリフに合わせた口や表情を自動作成するフェイシャルアニメーション用プラグイン「Magical VEngine」のプライベートカンファレンスを開催し、Magical VEngineの詳細な仕様を解説した。
セガが開発した「Magical VEngine」は、3D CGにおけるフェイシャルアニメーションの作成を大幅に省力化するためのプラグインだ。
一般的に、3D CGでキャラクターがしゃべっているアニメーションを作成する場合、そのキャラクターの顔の3Dモデルを用意し、セリフのタイミングに合わせて口の動きや表情を手作業で付けていく必要がある。そのため、3D CGムービー作成にはかなりの労力や時間がかかってしまう。
それに対しMagical VEngineを利用すれば、しゃべらせたいキャラクターの口や表情のパターンを数種類用意しておくだけで、セリフに合わせて自動的に口の動きや顔の表情が作成される。これにより、3D CGムービーの作成が大幅に省力化されるとともに、制作時間も大幅に短縮できるとしている。
Magical VEngineを利用したフェイシャルアニメーション作成の流れは次の通り。まず、しゃべらせたいキャラクターの顔の標準となる3Dモデル(表情なし)を用意するとともに、母音(あ、い、う、え、お)発音時のモデルをデータベースとして用意する。次に、そのキャラクターにしゃべらせたいセリフを録音した音声ファイルを指定。そして、アニメーション作成ボタンを押すだけで、その音声ファイルが自動的に解析され、音声に合わせて口の動きや表情のアニメーションが自動的に作成される。つまり、最低6つの表情モデルを用意するだけで、自動的にフェイシャルアニメーションが作成されるのである。
より自然なアニメーションを作成するには、母音だけでなく子音発声時のモデルを用意するなど、より多くのモデルを用意した方がいいようだが、それでも最低たった6つの表情モデルを用意し、音声を指定するだけで自動的にフェイシャルアニメーションが作成されるというのは、かなり驚きだ。
また、自動生成されるのは口の動きだけでなく、目や眉の動き、まばたきなども含まれる。さらに、音声から「怒り」、「悲しみ」、「喜び」、「驚き」といった感情を読み取り、その感情に応じた表情までも自動的に作成することも可能となっている。
しかも、この一連の作業は非常に短時間に完了する。今回開催されたプライベートカンファレンスでは、実際に人間の顔の3Dモデルを用意し、8文字程度のセリフの入った音声ファイルを利用したフェイシャルアニメーション作成のデモが行われたが、アニメーション作成ボタンをクリックしてアニメーションが作成されるまでにわずか1秒ほどしかかかっていなかった。もちろん、口の動きはセリフにピッタリ合っており、違和感もかなり少なかった。
実際には、一部セリフと口の形が合っていない部分もあった。音声の解析自体は精度が70〜80%ほどだそうで、場合によっては修正が必要な場合もある。しかしそういった場合でも、合っていない部分に正しい発音モデルを指定していくだけと、非常に簡単に修正できるようにもなっている。
さらに、利用できる言語が特定されていないという点も大きな特徴だ。カンファレンスでは、日本語、英語、スペイン語を利用したフェイシャルアニメーション作成のデモが行われたが、基本的に利用する言語に制限はない。しかも、各言語ごとに言語を学習させる必要がなく、データベースとなる表情モデルも、多くを他言語間で流用可能となっている。例えば、同じ表情モデルで、日本語・英語双方の音声でフェイシャルアニメーションを作成できるのである。
このように、Magical VEngineを利用することで、従来まではCGクリエイターが発音に合わせて手作業でフェイシャルアニメーションを作成する必要があったのが、かなりの部分が自動で作成されるようになり、省力化と時間短縮が可能になるというわけだ。
そして、このMagical VEngineは、実際のゲーム開発の場でもすでに利用されている。セガでは、「ファンタシースターユニバース イルミナスの野望」や「ファンタシースターポータブル」、「戦場のヴァルキュリア」、「龍が如く」シリーズなどで採用しているそうだが、それ以前までのムービー作成と比較して、作業時間が大幅に短縮できたそうだ。
Magical VEngineは、我々ゲームプレイヤーにとって直接関係のあるツールというわけではない。とはいえ、短時間でクオリティの高いフェイシャルアニメーションが作成できるようになるということは、ソフト開発にかかる時間も短縮されるわけで、ひいては早く手元にゲームが届くようになると考えると、開発者だけでなくプレイヤーにとっても利益をもたらすツールであると考えていいだろう。
プレイステーション 3やXbox 360の登場以降、ゲーム開発に時間やコストがかかるようになっているが、こういったツールの登場によって開発の省力化や時間短縮、コスト削減が実現され、クオリティの高いゲームが続々登場するようになることを期待したい。
このMagical VEngineは、「Autodesk Maya」、「Autodesk 3dsMax」、「SOFTIMAGE|XSI」に対応するプラグインとして提供される。価格は20万7000円(2008年3月末までは15万5400円)で、ボーンデジタルから発売されている。
Copyright © ITmedia, Inc. All Rights Reserved.
-
「電車の中で見ちゃダメ」「笑ったww」 実家からLINE「子ヤギがすばしっこくて捕まらない」→送られてきた衝撃姿が320万表示!
-
誰も教えてくれなかった“裁縫の裏ワザ”が目からウロコ 200万再生のライフハックに「画期的」と称賛【海外】
-
小1娘、ペンギンの卵を楽しみに育ててみたら…… 期待を裏切る生き物の爆誕に「声出して笑ってしまったw」「反応がめちゃくちゃ可愛い」
-
プロ野球チップスでまた“不良品”流出 伊藤大海「176m」表記に続き…… カルビー謝罪「深くお詫び」
-
娘の給食の献立表を見たら…… 正体不明の“謎の料理名”が「これはわからんw」と話題に その意外な正体に納得!
-
1年半ケージに引きこもっていたシャーシャー猫が、ある夜布団に入ってきて…… 感涙の行動に「まるで別猫」「こんな日が来るなんて」
-
子どもに高級キーボードのパーツを捨てられた → 公式の“先読みしすぎた対応”が話題「そういうこともあろうかと」
-
メルカリで300円の紙モノセットを買ってみたら…… 出品者のあたたかな心遣いに「利益は考えていないんでしょうね」「見ててわくわくします」
-
ダイソー「マルチ万能ほうき」が家事ラクの救世主 名前負け知らずの便利さに「これやばっ!!」「220円に驚き」の声
-
巨大深海魚のぶっとい毒針に刺され5時間後、体がとんでもないことに…… 衝撃の経過報告に「死なないで」
- 小1娘、ペンギンの卵を楽しみに育ててみたら…… 期待を裏切る生き物の爆誕に「声出して笑ってしまったw」「反応がめちゃくちゃ可愛い」
- 富山県警のX投稿に登場の女性白バイ隊員に過去一注目集まる「可愛い過ぎて、取締り情報が入ってこない」
- 2カ月赤ちゃん、おばあちゃんに少々強引な寝かしつけをされると…… コントのようなオチに「爆笑!」「可愛すぎて無事昇天」
- 異世界転生したローソン出現 ラスボスに挑む前のショップみたいで「合成かと思った」「日本にあるんだ」
- 【今日の計算】「8+9÷3−5」を計算せよ
- 21歳の無名アイドル、ビジュアル拡散で「あの頃の橋本環奈すぎる」とSNS騒然 「実物の方が可愛い」「見つかっちゃったなー」の声も
- 1歳赤ちゃん、寝る時間に現れないと思ったら…… 思わぬお仲間連れとご紹介が「めっちゃくちゃ可愛い」と220万再生
- 業務スーパーで買ったアサリに豆乳を与えて育てたら…… 数日後の摩訶不思議な変化に「面白い」「ちゃんと豆乳を食べてた?」
- 祖母から継いだ築80年の古家で「謎の箱」を発見→開けてみると…… 驚きの中身に「うわー!スゴッ」「かなり高価だと思いますよ!」
- 「妹が入学式に着るワンピース作ってみた!」 こだわり満載のクラシカルな一着に「すごすぎて意味わからない」「涙が出ました」
- フワちゃん、弟の結婚式で卑劣な行為に「席次見て名前覚えたからな」 めでたい場でのひんしゅく行為に「プライベート守ろうよ!」の声
- 親が「絶対たぬき」「賭けてもいい」と言い張る動物を、保護して育ててみた結果…… 驚愕の正体が230万表示「こんなん噴くわ!」
- 水道検針員から直筆の手紙、驚き確認すると…… メーターボックスで起きた珍事が300万再生「これはびっくり」「生命の逞しさ」
- フワちゃん、収録中に見えてはいけない“部位”が映る まさかの露出に「拡大しちゃったじゃん」「またか」の声
- スーパーで売れ残っていた半額のカニを水槽に入れてみたら…… 220万再生された涙の結末に「切なくなった」「凄く感動」
- 桐朋高等学校、78期卒業生の答辞に賛辞やまず 「只者ではない」「感動のあまり泣いて10回読み直した」
- 「これは悲劇」 ヤマザキ“春のパンまつり”シールを集めていたはずなのに…… 途中で気づいたまさかの現実
- 「ふざけんな」 宿泊施設に「キャンセル料金を払わなくする方法」が物議 宿泊施設「大目に見てきたが厳格化する」
- がん闘病中の見栄晴、20回以上の放射線治療を受け変化が…… 「痛がゆくなって来ました」
- 食べ終わったパイナップルの葉を土に植えたら…… 3年半後、目を疑う結果に「もう、ただただ感動です」「ちょっと泣きそう」