https://frosthead.com

リアルタイムで感情をキャプチャするアプリ

Intelについて考えるとき、おそらくGumbyやインスタントメッセージではなく、プロセッサとラップトップを思い浮かべます。 Intelの最初の直接消費者向け製品である新しいアプリは、その前提をその頭に向けます。

先週同社がデビューしたPocket Avatarsは、ユーザーの表情を漫画のアバターに移植し、メッセージを友人や家族に中継する、一流のメッセージングサービスです。

このアプリは、iOSまたはAndroidスマートフォンの前面カメラを活用して、顔のリアルタイム画像をキャプチャします。 そこから、顔追跡アルゴリズムが表情を監視し、選択したアバターにリアルタイムでそれらを重ね合わせます。 話すと、アプリはあなたの声を記録し、それを漫画と同期します。 最大15秒の長さで実行できるメッセージ、友人や家族へのzip Facebookと同じように またはWhatsAppメッセージが表示されます。 同社によると、このシステムは安全です。データをファイルに保存しません。

インテルはいくつかのブランドと提携して、40種類以上のアバターのカタログを作成しました。ユーザーは無料でダウンロードしたり、0.99ドルで購入したりできます。 キャラクターには、ガンビー、レゴのミニフィギュア、グランピーベアが含まれます。

家電とセキュリティ業界の両方でフェイストラッキングが注目を集めている現在、たとえばMicrosoftのKinect for Windowsは、ゲーム開発者がユーザーの顔のキューや類似の顔マッピングツールでプレイするアプリを構築できるようにしますFBIの生体認証システムなどを使用して人を識別することができます。ポケットアバターは、素人にとってその可能性の最もアクセスしやすいデモかもしれません。

開発者は当初、メッセージングアプリの作成に着手しませんでした、とIntel Labsのディレクターでプロジェクトの背後にあるチームを率いたRich Hannah氏は言います。 「「一流のメッセージングサービスを作ろう」として始まったことはありません」と彼は回想します。 「チームは、アバター、ウェブカメラ、あらゆるものを介したビデオチャットを試していました。」

Hannahのチームは、さまざまなコンピュータープラットフォームで顔の追跡に手を出していましたが、最終的にはモバイルデバイスに引き寄せられました。 そのとき、Intelの製品開発およびビジネスチームが興味を持ちました。 そして、もっともな理由は次のとおりです。オーバーザトップメッセージングは​​ホットマーケットです。 2013年には、ユーザーは10.3兆を超えるそのようなメッセージを送信しましたが、その数は2014年に2倍になると予想されています。2013年の世界のテキストメッセージ数は約6.5兆でした。

そこから、Pocket Avatarsが急成長を遂げました。 「テクノロジーは長い間研究室に残ることができます」と彼は言います。

現在、ハンナのチームが開発したアルゴリズムは、微妙な顔の動き(たとえば眉を上げる)を登録でき、4方向すべてで頭の動きを追跡し、カメラからの距離に基づいてキャラクターをズームインします。 まるで魔法の漫画の鏡を見ているかのように、アバターはすべてのティックをリアルタイムで追跡します。

アバターは現在、多数の表現を模倣できます(Intelは特定の数字をリリースしていません)。開発者がアプリの更新をプッシュすると、さらに多くの表現が追加されます。

「モデルファイルには多くのマイクロ式が既に組み込まれています。」とハンナは説明します。「そして、それらをロック解除し、式を迅速に進化させることができます。」

IntelはPocket Avatarsの秘密のソースを公開していませんが、ほとんどの顔追跡ソフトウェア(ウェブカメラアプリでも映画のハイエンドモーションキャプチャでも)は同様に機能します。 このソフトウェアは、人の顔の重要なポイント(たとえば、口の角や眉毛のポイント)を参照して、その瞬間に人がどのような表現をしているのかを判断します。 システムはその感情をキャラクターにマッピングします。

とりあえず、ハンナは、他の使用方法を探すのではなく、チームがアバターのアプリ内エクスペリエンスの改善に注力していると述べています(今後のアップデートは、理想的ではない照明条件でのアプリのパフォーマンス向上に役立ちます)追跡技術。 たとえば、将来的には、ウェブカメラがあなたの表情を読み取って、Facebookのステータスに自分の気分を正確に表現できるようになるかもしれません。

しかし、仮想コミュニケーションにますます依存するようになると、リアルタイムで感情を共有する能力がますます重要になります。

「顔追跡機能には多くの潜在的な用途があります」と彼は認めますが、「しかし、現在この技術を(将来)どのように適用するかは明らかにしていません。」

リアルタイムで感情をキャプチャするアプリ