映画のシーンを撮影するには、数十回、場合によってはそれ以上のテイクが必要になる場合があります。 Gone Girlでは、監督のDavid Fincherはシーンあたり平均50テイクと言われていました。 ソーシャルネットワークの俳優であるルーニーマーラとジェシーアイゼンバーグは、オープニングシーンを99回演じました（再びフィンチャー監督。明らかに彼はこのことで有名です）。 スタンリーキューブリックの「シャイニング」は、ジャックで野球のバットを振る階段をウェンディがバックアップするという悪名高いシーンの127テイクを含んでおり、歴史上映画のシーンごとに最もテイクと見なされています。
サリー大学と連携したDisney Researchの新しいソフトウェアは、必要なテイクの数を減らし、時間とお金を節約するのに役立ちます。 FaceDirectorは複数のテイクからの画像をブレンドし、俳優の顔の正確な感情を編集できるようにします。
「映画の制作は非常に高価になる可能性があるため、このプロジェクトの目標はプロセスをより効率的にしようとすることでした」と、ソフトウェアの開発を手がけたチューリッヒのディズニーリサーチのコンピューター科学者、デレクブラッドリーは述べています。
ディズニーリサーチは、ロサンゼルス、ピッツバーグ、ボストン、チューリッヒに拠点を置き、ディズニーにとって役立つ可能性のある種類のイノベーションに焦点を当てた国際的な研究グループです。 最近のプロジェクトには、壁登りロボット、子供たちがアプリで動く3Dキャラクターになる画像に色を付けることができる「拡張現実の塗り絵」、それに対応する振動や雨滴のような感覚を提供する子供用のベストが含まれます絵本のシーン。 FaceDirectorの背後にあるチームは約1年間このプロジェクトに取り組み、その後12月にチリのサンティアゴで開催されたコンピュータービジョンに関する国際会議で研究を発表しました。
異なるテイクを同期する方法を見つけることがプロジェクトの主な目標であり、最大の課題でした。 俳優は、テイクからテイクまで、さまざまな角度で頭を傾けたり、さまざまなトーンで話したり、さまざまなタイミングで一時停止したりする場合があります。 これを解決するために、チームは顔の表情と音声キューを分析するプログラムを作成しました。 顔の表情は、目や口の角などの顔のランドマークをマッピングすることで追跡されます。 次に、プログラムは、パズルのピースのように、どのフレームを互いに合わせることができるかを決定します。 各パズルのピースには複数の仲間がいるので、監督または編集者は、希望の表情を作成するための最適な組み合わせを決定できます。
実験用の資料を作成するために、チームはチューリッヒ芸術大学の学生グループを招き入れました。 生徒は、さまざまな表情（幸せ、怒り、興奮など）を行うたびに、作り上げられた対話を数回行いました。 その後、チームはソフトウェアを使用して、より微妙な感情を伝える表情の組み合わせをいくつでも作成することができました。悲しい、少し怒って、興奮しているが、怖いなどです。 彼らはいくつかのテイク、たとえば、恐怖とニュートラルをブレンドして、上昇と下降の感情を作り出すことができました。
FaceDirectorチームは、ソフトウェアがいつどのように市販される可能性があるのかを知りません。 この製品は、静止した背景の前に座って撮影されたシーンで使用すると、引き続き最適に機能します。 俳優を動かしたり、屋外の景色を動かしたり（木が揺れたり、車を追い越したりすること）、同期にはさらに多くの課題があります。
