https://frosthead.com

このビデオコンテストエントリは、視覚化され歪んだ音の気まぐれな表示です

James AllibanのBipolarは、被写体の存在と動きからサウンドスケープを生成する視聴覚ミラーを提供します。 結果のオーディオデータ(参加者からのデータを含む)を使用して、カオスと秩序の状態の間で変動する歪んだポートレートに身体を変換します。 このビデオはまた、インスタレーションに対する被験者の無限の魅力を捉える非常に効果的な仕事をして、即座の満足と無限の可能性の感覚を提供します。

このビデオのアイデアはどのようにして思いついたのですか?

この作品は実験として始まりました。 私はデザインフェスティバルで話していて、イベントの最後に再生する短い「ありがとう」のビデオをまとめるように(他のスピーカーと一緒に)頼まれました。 スマートフォンに話しかけるだけでなく、もう少し面白いことをしたかったのです。 もともと、スピーチに反応して顔を歪ませてグリッチする顔追跡アプリケーションを作成する予定でした。 時間が経つにつれて、私はこれをKinectカメラを使用した全身体験に変更しました。

私はこの劇的な効果に出くわしたので、さらに調査し、双極子(秩序状態とカオス状態の間の絶え間ない変動のために命名された)を短いビデオの形で公開することにしました。 人々は作品の展示に興味を持ち始めたので、私はそれを修正してインスタレーションにしました。 このプロジェクトは、Silent StudiosのLiam Patonがインタラクティブなサウンドの側面を追加したことにより、共同作業になりました。 それ以来、いくつかのイベントや展示会で展示されています。

オタクが大好きなので、ここで何を見ているのでしょうか?

基本的な効果はあまり関係していません。 C ++芸術ベースのプログラミングツールキットであるopenFrameworksを使用します。 1秒間に約30回、Xbox Kinectカメラからの深度データとビデオフィードが組み合わされて、訪問者の3Dモデルが作成されます。 マイクから送られてくる音声データを使用して、3Dモデルの2つおきのポイントを押し出します。 ポイントは、標準的なカメラからのデータでは実際には不可能な空間的な美学を提供するために、直面している方向に押し出されます。

これを超えると、かなり複雑になります。 舞台裏ではさらに多くのことが行われています。 グラフィックスカードのパワーを利用して3Dモデルを平滑化し、アプリケーションを高速化し、一般的に作品の外観を改善する一連のデータを計算します。 アプリ内に15〜20ページのボタンとスライダーを備えたユーザーインターフェイスがあり、満足するまで作品を微調整できます。 音に関しては、参加者の動きが計算され、LiamによってMax / MSPに組み込まれた別のソフトウェアに送信されます。 次に、アクティビティの量と、場所や近接度などの他のいくつかの要因に基づいて、ねじれたサウンドスケープを作成します。 この音声は、環境内の他の音とともにマイクで拾われ、被験者の体で視覚化されます。

この特定の作品について、あなたにとって最も満足した点は何ですか?

学習プロセスと発見とセレンディピティの行為はとても楽しいものでしたが、このプロジェクトの最大の部分は最終結果でした。 初めて人々がインスタレーションを発見し、交流するのを見るのは素晴らしい経験であり、私が公開するすべての作品で楽しんでいます。 匿名で部屋の後ろに立って、人々が私が創り上げるために一生懸命働いた予想外の体験を楽しんでいるのを見るのは、常にとてもやりがいがあります。

最後に読んだ、見た、聞いた素晴らしいものは何ですか?

私は最近バービカンズ・カーブ・ギャラリーでバージニア大学の新しい作品「Momentum」を見に行きました。 それは、暗い空間で均一に揺れる一連の12個の機械的な光振り子で構成されています。 効果は非常に瞑想的で、少なくとも私にとっては、これらのゆっくり動くスポットライトの不自然な振る舞いのために少し不気味です。

次は何ですか?

Bipolarの展示についていくつかのキュレーターと話している間、双方向性を通じて身体を表現する新しい方法を探求し続けています。 現在、いくつかのプロジェクトに取り組んでいますが、そのうちのいくつかは間もなく廃止される予定ですので、ご注意ください。

このビデオコンテストエントリは、視覚化され歪んだ音の気まぐれな表示です