視覚障害を持つ参加者のコミュニケーション可能性を、身体を光や音の楽器として活用できるテクノロジーのプロテーゼで拡張する試みです。

このプロジェクトでは、手のジェスチャー認識機能付きのブレスレット、加速度・ジャイロセンサー、手に持つ球体型デバイス（ジャイロおよび磁場センサー搭載）、そしてKinectが用いられました。

Vanessa Barrera Giralda氏と私（Victor Giers）は、quadrophonicオーディオシステムとMax/MSPを組み合わせ、視覚障害者にも楽しんでいただけるインタラクティブな音響空間を創出しました。一方、Andrew Quinn氏とDavide Santini氏は、TouchDesignerを用いて参加者の動きが拡張されたビジュアルとしてキャンバスに映し出される仕組みを構築。音と映像が互いに影響し合う中、Dr. Daniel BisigはプロジェクトディレクターJill Scott氏に対し、エレクトロニックシューズを提供しました。これらのシューズは、各パフォーマンス時に大きな足音を奏で、環境に対する「エコロジカル・フットプリント」を象徴的に表現します。

プロジェクトの一環として、BaselのHaus der elektronischen Künsteの地下において、5名の参加者とともに、振付家Dominique Cardito氏およびTommi Zeuggin氏の指導のもと、1週間にわたるリハーサルを経てダンスパフォーマンスが完成しました。

【パフォーマンス全体の動画】

プロジェクトの背景と概要
Alumni. Prof. Jill Scott氏は、感覚を駆使するアーティストかつ科学者として活躍しており、その妻であるAlumni. Prof. Marille Hahne氏からの依頼により、視覚障害者にも配慮したプロジェクト向けにMax/MSPでオーディオコントローラーのプログラミングが行われました。

このコントローラーは、各参加者がMYOブレスレットを装着し、腕や手の動きでサンプリング、シンセシス、エフェクトの操作を可能にするものです。

（MAX/MSP Audio-Controller：6個のMYOブレスレット、4つの音声トラック、各トラックに2種類のエフェクト搭載　※コードはご要望に応じて提供いたします。）

プロジェクト概要（ESKIN5 Basel）

ESKIN 5 Basel は、スイス・オーストラリアのメディアアーティスト Jill Scott の指導のもと、気候変動をテーマにした包括的なメディアアートプロジェクトです。

ワークショップフェーズでは、音響オブジェクト、携帯型テクノロジー、インタラクティブなグラフィックス、そしてリアルタイムのコンピュータ相互作用を取り入れ、革新的なメディアアートステージ上で5つのシーンを共同で制作しました。5名の出演者、2名の振付家、6名のメディアアーティスト、2名の科学的アドバイザーとの協働により、出演者と観客との間に感情的な対話を生み出す壮大な視聴覚パフォーマンスが実現されました。

ESKIN 5 Basel の5つのシーンの内容

• 田舎生活

• 都市生活

• 河川

• 森林

• 持続可能な気候意識に基づく生活

個々の情報や映像資料は、チューリッヒの Crowther Lab やバーゼル大学 気候学部 Atmospheric Sciences Meteorology Institute により提供されました。これらの情報や個人的な体験が、ESKIN グループによって創造的に織り交ぜられ、40分間のインタラクティブな視聴覚パフォーマンスへと仕上げられました。

ESKIN は、観客に対して、自然の保全に積極的に取り組み、人間の環境への影響を低減するための行動を促すことを目指しています。パフォーマンス終了後には、関係者全員との対話の場も設けられます。

【監督】

Jill Scott

【振付】

Dominique Cardito および Tommi Zeuggin

【視覚障害をお持ちの参加者】

Roberto Collidoro, Pina Dolce, Daniel Fernandes, Leila Grillo, Nicole Sourt Sánchez

【メディアアートチーム（支援）】

Hahne/Scott AIL Production, チューリッヒ

【舞台美術、音響、ビジュアル、プログラミング、映像】

Marille Hahne（コーディネーション、舞台美術、ドキュメンテーション） / Andrew Quinn（インタラクティブ・グラフィックス） / Vanessa Barrera Giraldo（サウンド・インタラクション・デザイン） / Victor Giers（インタラクティブ・サウンドカスタマイゼーション） / Olav Lervik（エレクトロニック・ミュージック） / Scene 5 by Daniel Fernandes / Daniel Bisig（ウェアラブルシューズ）

【プロモーション】

Lucie Bader Promotion

能力の「人工知能」の過剰解釈へのパロディとしての踊る人形。

ブラックボックスに組み込まれた2つのサーボモーターが、予測不可能な時間間隔でマリオネットを動かします。
ブラックボックスには、「マトリックス」からの引用、ターミネーターやイーロン・マスクの頭部、HAL 9000など、テーマ「AI」に関するハイプを表現するステッカーが貼られています。

20019年のHBKザールの卒業展の一部で、「人工知能、仮想ヒューマノイド、およびそれに関連する誤解」というテーマです。
一部の観客は人形の動きを真似し、彼らに起こる学習効果を楽しんでいましたが、他の人は不気味に感じていました。

 「サイレント・スピーチ・インターフェイス、マインドアップロード、高性能プロテーゼ、不死遺伝子――精神と身体、コミュニケーション、そして労働環境を最適化する可能性は、今やかつてないほど急進的です。ある者は超人の到来を夢見、またある者は人類の終焉を恐れます。私たちは本当に進化の新たな段階に直面しているのでしょうか？人間とテクノロジーの関係には、どれほどの可能性と不条理が内在しているのでしょうか？完璧への夢と不死への憧れ――これらをテーマにした演劇プロジェクトです。」

協力およびプロダクションチーム

• 協力先
Victor Giers、xm:lab./HBKsaar
共同プロデューサー：Compagnie TGNM/Forbach

• ライティングデザイン
Krischan Kriesten

• サウンド
Marco Tiziano Alleata, Tobias Paulus

• 演出アシスタント
Sue Franz

• 装飾アシスタント
Isabella Dahm

• 演劇コンサルテーション
Nicola Käppeler

• 技術プロダクションマネジメント
Christian Held

• プレス・広報
Stephanie Thielebörger

• ソーシャルメディアサポート
Monika Swatkowska

• チケットサポート
Aysel Kahraman

• ホスピタリティ
Teresa Esser, Mirka Borchardt

• ファイナンス
Josephine Kretschmer

• グラフィック
Ilka Fugmann

プレミア情報プレミアは2017年12月2日にザールブリュッケンの Garelly-Haus にて開催され、41st Festival Perspectives にご招待いただきました。

パフォーマンス「Learning」では、実在知能と人工知能の行動の可能性を比較しています。俳優と、ペッパーズ・ゴースト効果によって空間的に表現された3Dキャラクターが、同等の空間で並行して活動します。

両者は初め、立つことができず、パフォーマンスの間にその習得に挑戦します。何度も倒れながら、失敗から学んでいく様子は、見る者に新たな発見をもたらします。

デジタルキャラクターには、遺伝的アルゴリズムというプログラムされた知能が搭載されており、実在の俳優は有機的な脳を持っています。アバターは人間よりも速く立つ方法を学習しますが、その不器用な動きはどこか滑稽で、デジタル技術と人間の真の姿とのギャップを露呈します。一方で、人間は身体的な痛みと、必死に立とうとする姿勢を通して、観る者に深い感情的共感を呼び起こします。

Andreas Bayer

作業プロセスのビデオ
― 人工知能がどのように立つことを学んだか ―