アバターはどこまで演技できる？メタバースドラマで表情を作り始めた

どうも、久我レイジです。

昨日、メタバースドラマ第二作『記録にない君』に登場するユイの「泣く寸前の顔」を作ろうとしていました。

泣いている顔ではありません。

ある言葉を聞いて、一瞬だけ目が揺れる。眉が少し下がる。何かを言いたそうだけれど、言葉にはならない。

そのあと、目元に手を当てる。僕が欲しかったのは、そんな表情です。ところが実際にBlenderで触ってみると、これが思っていた以上に難しい。

少し調整しては「なんか違うな・・・・」となる。そこで改めて思ったんですよね。メタバースの役者って、どこまで演技できるんだろう。

泣き顔ではなく「泣く寸前」を作りたい

現在、メタバースドラマ第二作『記録にない君』を制作しています。撮影に使う編集室や劇場なども作り、撮影現場そのものはかなり形になってきました。

そこで次に気になり始めたのが、キャラクターの表情でした。

今回の作品は恋愛ミステリーです。
大きく笑う。怒る。泣く。驚く。

そういう分かりやすい感情だけで物語を作るわけではありません。むしろ僕が今回欲しいのは、その途中にある感情です。

何かに気づいた瞬間。
本当は何か言いたいのに、言えない。
悲しいけれど、泣くのをこらえている。

実写ドラマなら、俳優さんが目線や眉、口元、呼吸などで自然に表現している部分だと思います。

でも、アバターの場合は少し事情が違う。使える表情がなければ、その演技そのものができません。ここが今まで僕があまり深く考えてこなかった部分でした。

「もう少し悲しそうに」

監督として言葉にするだけなら簡単です。

でもアバターには、その「もう少し」を誰かが作らなければならない。

実写では役者に演技をお願いできます。でもメタバースでは、その演技をするための「顔」そのものを、撮影前に作っておかなければならないことがあります。

今回、実際に顔を触り始めて、その難しさを初めて実感しています。

表情は、少し変えただけで全然違う

今回やっているのは、まず物語のシーンをイラストとして一度見える形にする方法です。

例えばユイが、劇中である言葉を聞いた瞬間。僕の頭の中にある表情を、まずイラストとして作る。

そのイラストを参考にしながら、Blenderでアバターの顔を調整してみる。

うまく作れた表情を、最終的にシェイプキーとして使えないか。今はそんなことを試しています。ただ、実際にやってみると、本当に微妙なんですよね。

表情を少し触っただけなのに、自分が思っていたものと違って見える。　

悲しそうにしたかったはずなのに「うーん、なんか違う」となる。

また少し変える。でも、やっぱり違う。昨日はそんなことを繰り返していました。人の表情って、思っていた以上に繊細です。目だけではないし、眉だけでもない。口元だけでもない。

いくつもの小さな変化が重なって、初めて一つの感情に見える。

普段、映像を見ているだけなら気づかないようなことを、自分で触ることで少しずつ感じるようになりました。そして途中で、これは表情を作っているというより、演技を作っているんじゃないかと思ったんです。

AIを家庭教師にして、自分で触っている

僕はBlenderの専門家ではありません。分からない操作もたくさんあります。なので今は、GPT LIVEなどを使いながら、分からないところをAIに聞いて進めています。

画面を見せながら操作方法を聞いて、自分で動かす。

分からなくなったら、また聞く。僕の感覚では、AIが家庭教師になってくれているような感じです。Blenderの機能を最初から全部勉強する必要もありません。

僕は3Dモデラーになりたいわけではないからです。

『記録にない君』を作るために必要になったことを、その都度教えてもらう。今の僕には、この学び方が合っています。もちろん、もっと自動化する方法もあると思います。

僕自身、AIに任せられる部分は任せます。

でも今回の表情については、少し自分でも触ってみたいと思いました。

なぜなら、自分が何を変えたら、画面の中の感情がどう変わるのかを知りたいからです。

完成したものだけを受け取っていたら、「なぜこの顔に見えるのか」は分からないままです。

実際に触ってみると、少しずつですが「ここを変えると印象が変わるんだ」というものが自分の中に残っていく。AIを使わないのではなく、AIを使いながら自分でも理解していく。

今はそんな感覚です。

アバターの限界だと思っていたものは、本当に限界なのか

ここまでやっていて、僕の中で一つ仮説が出てきました。

僕たちは「アバターだから細かな演技は難しい」と思いがちです。僕自身も、どこかでそう思っていたところがあります。

でも、本当にそうなのか。

もしかすると、アバターだから演技できないのではなく、演技するための表情を僕たちが十分に用意していなかっただけなのかもしれない。

まだ仮説です。

実際に作ってみて、「やっぱり映像では伝わらなかった」となる可能性もあります。そこはやってみないと分かりません。

ただ、少なくとも今回、自分で表情を触り始めたことで、今まで「アバターの限界」と考えていた部分の中には、制作側でまだ試していないだけのこともあるんじゃないかと思うようになりました。

人間の俳優さんに「ここでは泣かないでください。泣きそうになるところで止めてください」と演出するように、これからはアバターにも、そういう演技ができる表情を準備していく必要があるのかもしれません。

表情。視線。身体の動き。
カメラ。照明。編集。

それぞれを少しずつ積み重ねることで、メタバースドラマの「演技」そのものも、まだ変えられる余地がある気がしています。

僕が作りたいのは、すごいアバターではない

ただ、ここで目的は間違えたくありません。

僕が作りたいのは、高性能なアバターではありません。

作りたいのはドラマです。ユイの顔を見た視聴者が「今、何かあったな」と感じてくれる。はっきり泣いていなくても、何かをこらえていることが伝わる。

そのために表情が必要なら作る。カメラで伝えられるなら、カメラを使う。AIが必要ならAIも使う。全部、物語を伝えるための道具です。

メタバースの役者は、どこまで演技できるのか。まだ僕にも答えはありません。ただ、今は以前より少しだけ考え方が変わりました。

アバターの限界を決める前に、まだ作り手側でできることがあるんじゃないか。

まずはそこを試してみたい。

今作っている表情が、そのまま作品で使えるのか。本当に演技として伝わるのか。それは『記録にない君』を実際に作りながら確かめていきます。

そして作品が完成したとき。

ユイのほんの一瞬の表情から、言葉にしていない感情まで伝えることができたなら。

メタバースドラマでできることは、まだもう少し広げられるんじゃないかと思っています。

こちらもおすすめ！