エド・ウルブリッチ：ベンジャミン・バトンの顔はこうしてできた

デジタルエフェクト界のカリスマ、デジタル・ドメインのエド・ウルブリッチが視覚効果部門でオスカー賞を獲得した映画「ベンジャミン・バトン 数奇な人生」について、いかにブラッド・ピットの若い顔から年をとった顔までがCGで作り上げられたかを話します。

今日私は 4年間のすばらしい映画製作プロジェクトに共に関わった

アーティスト 技術者 映画製作者のチームの代表としてここに来ています

この過程でコンピュータ ビジュアリゼーションは大きく進歩しました

これから映画のクリップをお見せします

きちんと映像が流れるといいのですが

仕事が成功していたら 私たちの存在は気づかれないはずです

映像：どうしてかしら―

前より髪が増えてるわ

ベンジャミン バトン：年を取るごとに―

若返っていく僕をみんなはどう思う？

持病を持って生まれたんだ―

声：どんな病気で？

ベンジャミン：老人の体で生まれた

男：お気の毒に

ベンジャミン：年を取るのは悪いことじゃない

少女：病気なの？

ベンジャミン：ママとティズィーは―

数年の命と言っていたけど―

たぶん違う

少女：あなたは他の誰とも違うわ

ベンジャミン：多くの変化が訪れた

目に見えるものと 目に見えないもの

色んな場所に毛が生え始めたり―

他にも変化はあった

気分がよかった

エド：「ベンジャミン バトン 数奇な人生」からの映像でした

映画を見られた方も ストーリーを耳にした方も―

知らないことがあるとすれば

映画の最初 ほぼ１時間にわたって

ブラッド ピットが演じる主人公のベンジャミン バトンの―

首から上は完全にCGだということです

特殊メイクは使っていませんし―

他の俳優の体にブラッドのイメージを合成したものでもありません

完全なるCGの顔を作りあげました

まずはこのプロジェクトの歴史を少しお話したいと思います

F スコット フィッツジェラルドの短編小説をもとにした―

老人として生まれ 成長するにしたがって若返っていく男の話です

この映画はハリウッド中をぐるぐると

50年以上もさまよっていました

私たちが最初にこのプロジェクトに参加したのは90年代初頭で

ロン ハワードが監督でした

何度も会議を開き映画化を真剣に考えました

しかし当時は諦めなければなりませんでした

不可能だとみなされたのです

年を取るにつれて若返る男を描くのは当時の技術では無理でした

人間の体は―特に頭部ですが―

私たちの業界では神の領域とされていました

10年ほど経ってからプロジェクトが再始動しました

今回の監督はデイビット フィンチャーです

彼は面白い人です

技術に対して恐怖心というものがないのです

またプロジェクトに強い執着がありました

「ノー」は存在しなかったのです

デイビットはビジュアルエフェクト業界の人間と同じように―

十分な時間と資源ー

そしてもちろんお金がある限り 全ては可能だと信じていました

彼は面白い取り組み方をして―

私たちにある挑戦をさせることにしました

映画の主人公を ゆりかごから墓場まで―

一人の俳優で撮影すると言い出したのです

主人公は彼になりました

私たちはデイビットと共にあれでもないこれでもないと考え抜き

当然 映画の途中で俳優を入れ替える案は除外されました

何人かの俳優を使うのはひとつの手でした

シーン別に違う俳優がベンジャミンを演じるのです

特殊メイクを施すアイデアも除外しました

メイクでは不十分だということが分かったのです

特にクローズアップでは無理です

それにメイクは付加的なプロセスで 顔を作り上げるのとは違います

デイビットは年を重ねたしわを表現するのに

ブラッドの顔の奥深くまで切り込んでいきたかったのです

ベンジャミンは多くの共感を呼ぶ人物でなければなりません

そこで年を経るにつれて変わる―

ベンジャミンの体のサイズに合わせ―

背の低い役者を段階的に割り当てることにしました

それから実際にベンジャミンと年相応の―

ブラッドの頭部をCGで作り上げ

本物の俳優の首の上に乗せるのです

良い計画だと思いました

もちろんこれは私たちの業界における聖域であり―

世界に名の知れた俳優を使うことで 難しさは増しました

誰もがスーパーで見かける雑誌などを通して

毎日のように彼の顔を見ているのですから

少しのずれもミスも許されないのです

映画会社はワーナー ブラザーズとパラマウントが関わりました

両スタジオはこの映画にもちろん期待してくれたのですが

この映画はかなりリスクの高い計画でした

多くの資金と名誉が問われていました

私たちは 自分たちの方法論はとても堅実でうまくいくだろうー

と信じていましたがー

彼らは口約束以外に－

できるという保証を欲しがりました

ですから2004年にベンジャミンのスクリーンテストをすることになりました

5週間ほどにわたって行われたのですが－

たくさんのズルや近道をしました

テストを切り抜けるために断片をつなぎ合わせたにすぎませんでした

少しお見せします こちらが最初のベンジャミンのテスト映像です

CGの頭がお見えですね

かなりの精度です 他の俳優の首の上にのせました

テストは成功し スタジオを安心させることができました

何年間も前進と後退を続け－

困難な決断を下しながら

ついにスタジオからゴーサインが出ました

実際に電話で祝賀をいただいたときのことを覚えています

映画に許可が下りたと聞いて

思わず吐きました

（笑い）

計画は困難なものであったので

チームミーティングを行うことにしました

全員参加です

最初のうちは会議というよりセラピーに近いものでした

この映画は実際に現実のものとなる とお互いを励まし説得しました

映画全体の内1時間はCGのベンジャミンが主演です

しかもSFX映画ではないので 本物の人間らしくなければなりませんでした

そのプロセスは ある意味では 依存症克服プログラムのようでー

最初の一歩は当然「問題の存在を認めること」

大きな問題でした

どうやって取り組めばいいのかも分からなかったのですから

けれどひとつだけ分かっていることがありました

VFX業界で働く者としてー

私たち それからデイビットは時間も資源も豊富だと分かっていました

資金が足りることだけを願いました

プロジェクトを実現させるための熱意も十分にありました

このような問題に直面したらー

まず問題を細かく砕いてから考えます

大きな問題をいくつかの小さな問題に分けるのです

それから一つ一つに取り組みます

私たちはこれを３つに分けました

まずブラッドに今の年齢よりも

45歳くらい年を取らせなければなりませんでした

またブラッドの特徴を取り入れることも必要でした

顔の小さな痙攣や機微のすべてが彼を彼たらしめているのでー

全ての過程でそれらを取り入れ

スクリーンのベンジャミンに反影させる必要がありました

それからベンジャミンは

あらゆる状況に対応できるキャラクターでなければなりませんでした

真っ昼間だけでなく

夜 キャンドルの光の下を歩いたり

クローズアップにも耐えられ

もちろん台詞も話せて

走ったり汗をかいたり

お風呂に入ったり泣いたり

吐くことすらできなくてはなりませんでした

もちろん全て同時にではありませんが

これら全てをこなせる必要がありました

そしてそれらで映画のはじめ1時間を作らなければならなかったので

およそ325パターンの撮影をしました

私たちにはベンジャミンにー

人間ができる全てのことをさせる必要があったのですが

2004年当時の最先端技術と

私たちの要する技術との間には

深い淵があることに気づきました

そこでモーションキャプチャーに注目しました

モーションキャプチャーはご存知ですね

当時の最先端技術では

マーカーベース モーションキャプチャーと言われていました

こちらが例です

簡単に説明すると レオタードを着て

動きを捕らえるマーカーを装着します

カメラの代わりに

赤外線センサーが周囲に置かれ

それらのセンサーがマーカーの動きを３次元かつ

リアルタイムでトラックします

それからアニメーターはマーカーの動きのデータを

CGの俳優に写していきます

右側のコンピュータ上のキャラクターが

ダンサーと同じ複雑な動きをしていますね

さらに私たちは 顔にマーカーをつけて－

モーションキャプチャーを顔に適応している

当時の映画をいくつか見て

プロセスを研究しました

見てわかる通り とても雑な出来栄えです

完成にはほど遠いものでした

そこでわかったのは

私たちには－

マーカーとマーカーの間にある情報が必要だということです

皮膚の細かい情報が欠けていました

皮膚が筋肉や骨の上を動く様子や

えくぼ 大きなしわから小さなしわまで全ての情報が必要でした

私たちの最初の発見は 当時の最先端技術も手法も

完全に捨て去らなくてはならない ということでした

モーションキャプチャーも諦め

頼れるものは何一つなくなりー

未開の地に踏み込むこととなりました

残されたアイデアは

私たちが「テクノロジー シチュー」と呼ぶものです

他のフィールドを研究して

技術の原石を見つけるというのが

このアイデアです

医学画像やテレビゲームなどの

優れた他業界の技術をー

見つけだし 再適応させるのです

コンピュータのプログラムの中に

コード情報を書き込んでいって

それぞれ異なる技術の断片を組み合わせて

ひとつの技術として動かすのです

初めてすぐに 70年代にポール エクマンという学者によってなされた

すばらしい研究に遭遇しました

彼は実際に人間の表情を－

分類できると考え

FACS－顔動作記述システム－を作り出しました

このシステムによると人間の顔は

基本的に70の型からできていて

それらの顔のポーズや形を組み合わせて

人間の顔ができる

無限の表情を作り出すことができるというわけです

しかも年齢や人種 文化やジェンダーを問わないシステムでした

これが私たちの研究のベースになりました

それから私たちはコンターと呼ばれる

驚くべき技術に出会いました

被験者が発光性のメイクを－

顔に施されているのがお見えですね

ここでは マーカーから得る情報とは逆に

表面の情報を捕らえています

被験者はカメラが並んだコンピュータの前に立つと

カメラがフレームごとに

被験者がとっているのと全く同じ顔の表情を復元していきます

効果的にリアルタイムで被験者の3Dデータがとれるのです

比べて見てみると

左側がデータ数が増えたもの

右側がマーカーデータのものです

見ての通り かなり見通しが良くなりました

しかしこの技術は当時まだ生みだされて間もなく

確実性はありませんでした

けれど私たちはポリゴンの観点から

複雑かつ信憑性のあるデータ測定をしました

左側では10万ものポリゴンが見えました

そしてそれを100万まで増やすことに成功し

その数は無限に近づいていきました

歓喜が沸いたのはこのときでした

これが突破口となったからです

「これで何とかなる 実際に成功するだろう」

と初めて考えた瞬間でした

その歓喜は被験者をブラッド ピットに置き換え

この装置を彼の顔につけることにつながりました

このコンターを使って

彼に発光性のメイクを施し

不可視光線の下に立ってもらって

実際に彼がエクマンのFACSシステムになぞって

表情を作るのをリアルタイムで読み取りました

実際に－

ブラッド ピットの顔が表現できる

全ての表情の3Dデータベースができあがりました

（笑い）

そこからは実際にもっと細かい要素にまでー

切り込んでいって

文字通り何千という型ができあがりました

彼の顔が表現できる表情

全てのデータベースが出来上がりました

彼が44歳であるという事以外は完璧でした

次は現在の彼の年齢に40年を加算する作業です

私たちはリック ベーカーに連絡しました

彼は私たちの業界では特殊メイクや特殊効果の－

巨匠といわれています

またカズヒロ ツジにも依頼をしました

彼はフォトリアリスティック彫刻の最高峰です

彼らにベンジャミンの上半身の模型作りを－

依頼しました

それでは今年の会議テーマ「素晴らしい除幕」にちなんで

ベールをとると－

こちらが80歳のベンジャミンです

模型は3つ作りました

80歳 70歳それから60歳のベンジャミンです

これらが私たちが前進する基盤となりました

ブラッドの型どりから作り上げた実物大なので

解剖学的にも正しいデータです

目やあご 歯にいたるまで－

全てが1対1で本物のブラッドと対応しています

私たちはこれら３つの模型を高解像度で

コンピュータに取り込みました

莫大なポリゴン数です

そうしてコンピュータ上に３段階の年齢の－

ベンジャミンが生まれました

今度はそのデータ上の彼に動きを加えるため

リターゲティングと呼ばれるプロセスに移りました

こちらがブラッドがエクマンのFACSの表情をしているところです

それから得られるデータがこちらです

モデル上のデータですね

そしてリターゲティングとはこのデータを

他のモデルに転置することです

ベンジャミンの上半身の模型は

ブラッドの実物大なので

44歳のブラッドのデータを87歳のブラッドに

転置することができるのです

ブラッド ピットの顔の動き全ての３Dデータが

87歳それから70代 60代の彼に転置されました

次は撮影の段階に入ります

これまでの過程と同時並行で

ニューオリンズを始めとする世界中のロケ地で撮影は進められました

ベンジャミンの体を演じる役者は

青いフード帽をかぶって撮影に入ります

こちらがその役者の方です

青いフード帽には2つの役割があります

彼らの頭部を消す処理が簡単にできることと

動きを捉えるマーカーをつけることで

カメラの動きやレンズの焦点を

再現できることです

ベンジャミンのモデルはブラッドの演技を反影して動かすので

ロケ地で他の出演者やベンジャミンの体の役者を撮影したー

フィルムの編集に入りました

そして約6ヶ月後

ロサンゼルスの同録スタジオにブラッドを呼びました

彼はスクリーンを見て

ベンジャミンを演じます

彼は映画のシーンを

繰り返し何度も見ました

即興の演技をお願いすると

ブラッドは私たちが予想だにしなかった

興味深いベンジャミンを演じてくれました

撮影はいくつかのアングルからとらえるため

４台のHDカメラで行いました

ブラッドが演じたベンジャミンの中から 今度はデイビットがー

場面や他の出演者と最もよく合うものを

選んでいきました

そこからは画像解析という過程に入ります

こちらでは選ばれたテイクがお見えですね

データが87歳のベンジャミンに転置されています

ここでおもしろいのは

ベンジャミンの顔の

それぞれのパーツが動くタイミングをはかる画像解析です

例えばベンジャミンの左の眉毛を選ぶと

コンピュータプログラムが

フレーム14では眉毛はここからここまで動きー

フレーム32で止まるという事を教えてくれます

このようにしていくつもの顔の動きを選んで

データを引き出していくのです

それからテクノロジーシチューでお話しした技術を使います

鍵となる技術は 効果的に－

ブラッドの動作そのものを

FACSシステムに基づく データベース上のー

年を取ったベンジャミンに移すこと

これを使って私たちはフレームごとに

ブラッドの演技と全く同じ動きをする3Dの頭部を

再現することができました

こちらが完成したフィルムの映像です

そしてこちらが体を演じる俳優の演技

これが－ジェリー ガルシアではありませんが－未完成の「デットヘッド」

そして今度は実際の演技のタイミングから

再現したものです

そしてもう一度完成した映像です

ここまで来るのには時間がかかりました

（拍手）

次の数枚のスライドだけでも ひとつのTEDトークになるほど

お話できるのですが ここからは概要だけお話します

今度は照明効果を完成させなければなりませんでした

この工程で重要なのはベンジャミンが現れる全ての場面に適した－

照明を作り上げることでした

ベンジャミンの頭部は様々な場面に出てくるので

ロケ地で他の俳優が演技をしている照明と

完璧に合うものにしなければなりません

それから目に特化したシステムも作り出しました

「目は口ほどにものを言う」という

あの古いことわざは

嘘ではありません

ここでのゴールは 多くの人にベンジャミンの目だけを見てもらって

温かさや優しさ

それから彼の意図するところが

目を通して伝わることです

ですから目の動きを担当した技術者は

ほぼ丸２年間目の研究に明け暮れました

それから口に特化したシステムも必要でした

ブラッドの歯の型をベースにして

時と共に歯にも変化を加えました

それから言葉をしっかり発音するための舌も必要でした

発話時の舌の動き全てを記録したシステムも作りました

舌の動きだけに約9ヶ月専念してくれた人がいて

彼は人気者でした

もうひとつ重要なのが皮膚の動き

ベンジャミンは老人ホームや

特別養護施設など 他の老人たちと演技をするシーンがあるので

彼らと全く同じように見えるため

皮膚の動きは正確でなければなりません

ですから皮膚の動きには多くの労力を費やしました

自然に見えるものもあれば

不自然なものもあるでしょう

今お見せしているのはこの過程の初期段階のものです

私たちはデジタル人形を作って

ブラッドにその顔を操ってもらいました

行動を解析したり演技を高めたりするアニメーターは

必要ありませんでした

ただ ひとつこれらの過程で対処できないことがありました

「CGによるボトックス注射」というものです

これらのプロセス通してフィンチャーがいつも言っていたのは

「デジタル処理で俳優の演技の見せ場が色あせてしまう」ということです

私たちのプロセスと技術ができなかったのは

意図を理解するということです

俳優の意図することの理解です

笑顔は笑顔でしかないわけで

その笑顔が意味するのは皮肉なのか嬉しさなのか落胆なのか

判断できないのです

ですからここは人間がある意味機械の道しるべをする必要がありました

けれど最終的にこのプロセスと技術は

「エモーション キャプチャー」と呼ばれるまで発達しました

モーションキャプチャーと対になるものです

もうひとつ映像を見てください

ブラッド ピット：ママとティズィーは－

数年の命と言っていたけど

たぶん違う

18分の「デジタル人間をつくる方法」でした

（拍手）

短い説明でしたが

実際には155人が2年以上もこの過程に携わりました

60ものヘアスタイルとコンピュータ上でのヘアカットのお話はできませんでしたが

これがベンジャミンです ありがとうございました