自作デバイスが拓く新しい身体表現：パフォーマンスのためのインタラクティブコントローラー入門
「デジタル技術で変わるライブパフォーマンスの新しい表現方法」を探求する中で、パフォーマー自身が技術を用いて表現を拡張する手法の一つに、「オリジナルコントローラーの製作」があります。市販のコントローラーや既存のシステムを利用するだけでなく、身体の特定の動きや物理的な接触など、自身の表現に特化した入力デバイスを自ら設計・製作することで、これまでにないインタラクションや表現の可能性が開かれます。
オリジナルコントローラーとは何か
パフォーマンスにおけるオリジナルコントローラーとは、音楽、映像、照明などのデジタルメディアを操作するために、標準的なキーボードやマウス、MIDIコントローラーなどとは異なる形状や入力方法を持つ、独自に製作されたデバイスを指します。これは、特定のパフォーマンスのコンセプトや身体の動きに合わせて、センサーの種類、配置、筐体のデザインなどを自由にカスタマイズできる点が最大の特徴です。
例えば、床に設置した感圧センサーを踏むことで音が鳴る仕組み、衣装に縫い付けた曲げセンサーで腕の角度に応じて映像が変化する仕組み、特定のオブジェを傾けることで照明の色が変わる仕組みなど、多種多様なインタラクションが考えられます。
パフォーマーが自作する意義
パフォーマーが自身でコントローラー製作に取り組むことには、いくつかの重要な意義があります。
まず、自身の身体や表現の特性に最適化されたデバイスを創り出すことができます。既成のツールでは捉えきれない微細な動きや、身体の特定の部位への接触など、パフォーマンスの核となる要素をダイレクトに入力信号に変換することが可能になります。
次に、技術と表現の間にある壁を低くすることに繋がります。製作プロセスを通じて、技術の基本的な考え方や可能性を肌で感じることで、より主体的にデジタル表現に取り組むことができるようになります。これは、技術者との共同作業を行う際にも、アイデアの共有やコミュニケーションを円滑にする助けとなります。
さらに、比較的安価な部品とオープンソースのハードウェア、ソフトウェアを組み合わせることで、高価な専用機器を用いることなくインタラクティブなパフォーマンスを実現できる場合があります。コストが課題となりやすい個人や小規模なプロジェクトにとって、これは大きなメリットとなり得ます。
製作に必要な基本的な要素
オリジナルコントローラーの製作には、主に以下の要素が必要です。
- センサー: 身体の動き、物理的な接触、環境の変化などを検知し、電気信号に変換する部品です。ボタン、スイッチ、感圧センサー、曲げセンサー、距離センサー、光センサー、加速度センサー、ジャイロセンサーなど、非常に多くの種類があります。パフォーマーの動きや表現したいインタラクションに合わせて適切なセンサーを選びます。
- マイコン（マイクロコントローラー）: センサーからの電気信号を読み取り、事前にプログラムされた通りに処理を行う小さなコンピューターです。Arduino UnoやArduino Nano、Raspberry Pi Pico、micro:bitなどが広く使われており、比較的安価で初心者向けの資料も豊富に存在します。
- 配線と接続部品: センサーとマイコン、マイコンとPCなどを物理的に接続するための部品です。ブレッドボード（はんだ付けなしで部品を一時的に接続できる基板）、ジャンパー線、抵抗、コンデンサーなどがあります。
- 筐体・実装: 製作した回路やセンサーを保護し、身体や舞台に固定するための物理的な構造です。箱状のものや、布に縫い付ける、オブジェに組み込むなど、パフォーマンスに合わせて様々な方法が考えられます。
- ソフトウェア（プログラミング環境）: マイコンに動きを指示するためのプログラム（スケッチなどと呼ばれます）を記述する環境です。Arduino IDEなどが一般的です。
- 連携ソフトウェア: マイコンから送られてくる信号を、音楽制作ソフトウェア（DAW）、映像生成ソフトウェア（Processing, TouchDesigner, Max/MSP）、照明制御ソフトウェアなど、パフォーマンスに使用する他のデジタルメディアに連携させるためのソフトウェアやライブラリです。MIDI信号やOSC（Open Sound Control）という形式でデータを送受信することが多いです。
初めてのコントローラー製作：基本的なステップ
技術初心者の方がオリジナルコントローラー製作を始めるための基本的なステップをご紹介します。
- アイデア出し: どんな動きや物理的な入力で、何（音、映像、光など）をどのように操作したいかを具体的に考えます。シンプルで分かりやすいアイデアから始めるのがおすすめです。例えば、「特定の足の動きで音を出す」「手に持った物体を傾けると色が変わる」などです。
- 必要なセンサーとマイコンの選定: アイデアを実現するために必要と思われるセンサーの種類と、それに対応できる初心者向けのマイコン（例：Arduino Uno）を選びます。インターネット上のチュートリアル記事や工作キットなどを参考にすると良いでしょう。
- 基本的な回路の組み立て: ブレッドボードとジャンパー線を使って、センサーとマイコンを配線します。まずは簡単なスイッチやボタン、LEDを繋いで、正しく動作するか確認するところから始めます。インターネット上には多くの基本的なセンサーの接続方法に関する解説があります。
- マイコンのプログラミング: 選んだマイコンのIDE（開発環境）を使って、センサーの状態を読み取り、その値に応じてどのような処理を行うかをプログラムします。例えば、「ボタンが押されたら、シリアル通信で特定の文字を送る」といったシンプルな記述から始めます。
- PCとの連携設定: マイコンから送られてくるデータを、パフォーマンスで利用するソフトウェアが理解できる形式（MIDIやOSC）に変換・中継する設定を行います。Hairless MIDI + Pure Data/Max/MSP Liteや、Processingのシリアル通信ライブラリとPtoPライブラリなど、いくつかの方法があります。まずはマイコンから送られた値をPC上で確認できる状態を目指します。
- パフォーマンスソフトウェアへの連携: PC上のソフトウェア側で、マイコンから受信したデータを用いて音や映像などを操作する設定を行います。例えば、受信したデータが特定の閾値を超えたら音源を再生する、受信した数値を映像エフェクトのパラメータに割り当てるなどです。
- テストと調整: 実際に身体を動かしながら、コントローラーが意図通りに機能するか、表現に合っているかを確認し、プログラムや設定を調整します。
製作事例の種類
オリジナルコントローラーの形は多岐にわたります。
- ウェアラブルデバイス: 衣装や小道具にセンサーやマイコンを組み込み、身体の動きや接触に反応するもの。
- 床・壁などの構造体: 舞台上の床や壁自体にセンサーを仕込み、触れたり荷重をかけたりすることでインタラクションを起こすもの。
- ハンドヘルドデバイス: 手に持って操作する、独特な形状や複数の入力方法を持つデバイス。
- オブジェクト一体型: ダンスに用いる特定のオブジェ（例：ボール、杖、リボン）に技術を組み込み、オブジェクトの動きがメディアを操作するもの。
シンプルなボタンやスイッチから始めて、慣れてきたら感圧センサーや加速度センサーなど、より複雑な情報を扱えるセンサーに挑戦していくと良いでしょう。
コストと難易度
ごく基本的なセンサーとマイコン（例：Arduino Unoや互換品）であれば、部品代は数千円程度から始めることが可能です。ブレッドボードやジャンパー線なども含め、初期投資を抑えてプロトタイプ製作に取り組むことができます。
プログラミングや電子工作の経験がない場合、最初は戸惑うこともあるかもしれません。しかし、インターネット上には豊富なチュートリアルやフォーラムが存在し、多くの情報にアクセスできます。まずは「Hello, World」（特定の入力でLEDを光らせるなど）のように、小さな成功体験を積み重ねることが重要です。
技術者との連携に向けて
自身で基本的なコントローラー製作を経験することは、将来的に専門的な技術者と連携する上で非常に役立ちます。技術の限界や可能性、開発にかかる時間や労力に対する理解が深まるため、より具体的で実現可能なアイデアを技術者に伝えることができるようになります。また、技術者側も、パフォーマーが技術への理解を示し、主体的に関わろうとする姿勢があれば、協力関係を築きやすくなります。
まとめ：新しい表現への第一歩
オリジナルコントローラー製作は、デジタル技術を身体表現に取り入れるためのパワフルな方法の一つです。既存の枠にとらわれず、自身の身体やパフォーマンスのコンセプトに合わせたインタラクションデバイスを自ら創り出すことで、表現の可能性を大きく広げることができます。
確かに、電子工作やプログラミングには学習コストが伴いますが、現在では初心者向けのツールや情報が豊富に存在し、比較的少ない初期投資で始めることが可能です。まずは小さな一歩として、シンプルなセンサーとマイコンを使った簡単なデバイス製作から挑戦してみてはいかがでしょうか。この経験が、デジタル技術と連携した新しい身体表現の探求における、貴重な出発点となるはずです。