SOUL MOTION は、ユニフォームに組み込まれたロケーションタグを用いたインタラクティブマップです。センサーはリアルタイムのデータを捉えるとともに、過去3日間の天候やコミュニケーションの総量、来場者数、個々の軌跡といった記録を映し出します。 来場者が「土」や「ソファ」のゾーンに近づくと、仮想の微生物がその位置に群がり、環境条件によって繁殖したり衰えたりする様子を映します。センサーに軽く触れるとそれらは散り去り、絶えず変化する動的な地図が現れます。 微生物やテクノロジー、人間関係の繊細なリズムといった不可視のプロセスを映し出すことで、SOUL MOTION は私たちを取り巻く隠れた環境を見直し、人と人、人と自然とのつながりを改めて考えるきっかけを生み出します。 SOUL MOTION is an interactive map and art installation that visualises the live movements, distances travelled, and communications between six staff members wearing sensor-embedded garments. The sensors capture both real-time data as well as archive records from the past three days, including weather conditions, levels of communication, visitor numbers, and individual activity trails. As participants approach the soil or sofa zones, virtual microbes begin to cluster around their positions, echoing how microorganisms thrive or diminish depending on environmental conditions. A simple tap on the sensors makes the microbes disperse, transforming the experience into a dynamic microbial map that constantly shifts between presence and absence. By rendering these invisible processes such as microbes, technology, and the subtle rhythms of human interaction, SOUL MOTION invites visitors to reconsider the hidden environments around them and to reflect on how we connect not only with one another, but also with nature itself and encourages communications.

SOUL BUBBLE は、個人の精神と身体の状態を映し出す没入型のアートインスタレーションです。十一面のスクリーンに囲まれた空間で、来場者はAIとセンサーを備えた一人用のソファに腰掛けます。ソファは姿勢や重心の変化、心拍、呼吸、手の動きを読み取り、その信号をリアルタイムに可視化します。 リラックス、集中、緊張、不安、興奮、瞑想、混乱といった心身の状態は解析され、微生物のようなパターンとなって空間全体に広がっていきます。体験の最後には、自らの行動データがスクリーンに映し出され、保存され、AIシステムの進化へとつながります。 参加者が増えるごとに、個人と集団のデータが積み重なり、差異や分布、新たな傾向が浮かび上がります。この継続的なプロセスは、インスタレーションを絶えず進化させ、人間の状態を記録し続ける果てしないアーカイブを形成していきます。興味深いことに、多くの来場者は自らの結果に強い関心を寄せ、そこに「高いリラックス」のパターンを期待して臨んでいました。 SOUL BUBBLE は、泡のように身体を包み込みながらも、未来のセンシング装置のプロトタイプとしての姿を見せ、テクノロジーが身体に寄り添い、魂に応答し、心と存在の奥に潜む層を浮かび上がらせます。 SOUL BUBBLE is an immersive art installation that visualises an individual’s mental and physical state. Inside a private room surrounded by eleven screens, a visitor sits on a single-seat chair embedded with AI and sensors. The chair records posture, shifts in the centre of gravity, heart rate, breathing, and hand movements, translating these signals into real-time visualisations of the visitor’s inner condition. Emotional states such as relaxation, focus, tension, anxiety, excitement, meditation, or confusion are analysed and expressed as dynamic microbial patterns that unfold across the surrounding screens. At the end of the session, visitors can view their complete data, which is stored and used to refine the AI system. As more participants take part, both individual and collective data accumulate, revealing differences, distributions, and emerging tendencies. This ongoing process allows the installation to evolve continuously, creating an ever-expanding record of human states. Interestingly, many visitors approached the experience with the expectation of seeing a high relaxation pattern in their results. SOUL BUBBLE is a bubble-like prototype of future sensing, where technology surrounds the body, responds to the soul, and reveals the hidden layers of mind and being.

全てTouchDesignerのリアルタイムレンダリングによるビジュアルで構成された2024年のVJリール。

本作は、2024年7月から8月にかけて1週間開催された「表参道 interactivité 展」におけるパフォーマンスとして制作されたオーディオビジュアル・ライブである。テーマである «interactivité»（二つ以上の存在のあいだに生じる対話）をもとに、音と形態が互いに応答しながら変化していく様子をリアルタイムに表現した。 映像は波や立方体の集合といったモチーフを基盤に展開し、中盤のパートでは建築物が登場する。ここでは、monoton による建築構想「方角を棲み分ける家」のモデルを使用しており、TouchDesigner 上でパラメトリックに設計できるよう構築した。 間取りや構造に関する各種パラメーターを変化させ、カメラの視点や断面の切り取りを操作しながら、音と建築形態の関係を提示している。 音楽は Ableton Live を用いたライブ演奏によって生成され、その出力から送信される OSC 信号や MIDI コントローラーの入力がビジュアルの制御に反映される。映像は TouchDesigner によるリアルタイムレンダリングで構成され、音とビジュアルが呼応しながら展開していく様子を観客に提示した。

サウンドプロデューサー・SKYTOPIAとの継続的な音楽・映像コラボレーション企画の集大成として、EPリリースパーティを開催。セットリスト後半よりVJを担当した。 代官山シアターギルドに常設の4K LEDスクリーンを大胆に活用し、空間全体を包み込むような演出を構築。今回のパフォーマンスでは初の試みとして、TouchDesignerによるAudio Reactiveシステムを導入した。リアルタイムで音響信号に反応するヴィジュアルとエフェクトの生成により、音と映像がダイナミックに溶け合う表現を試みている。 一方で、COMP構造の煩雑さや操作の柔軟性など、構築面での課題も少なくなかった。今後はレイアウトの整備や操作性の向上を含めたシステムの再設計を視野に、引き続きアップデートを重ねていく。

auveは、画像を解析して音に変換することで、映像から音楽までを1人で奏でる30分のオーディオビジュアル作品です。10年以上にわたるリアルタイム映像制作の経験を活かし、映像をリアルタイムで解析し、目まぐるしく変化するビジュアルの動きを、多様なピクセル解析技術によって音に変換します。これにより、映像の中に潜むリズムやテンポを浮き彫りにし、画面に映る絵と音が完全に連動した統合的なオーディオビジュアル表現を実現しています。

Expo 2025 大阪・関西万博 シグネチャーパビリオン河森正治プロデュース「いのちめぐる冒険」の 現実と仮想空間が融合する専用シアター「499秒わたしの合体」にて、30名の参加者がカメラ付きVRゴーグルを装着し、VRとMRの技術を通して、過去の記憶から時空を越え、宇宙スケールの食物連鎖を全員で同時体験する、世界でここでしか体験できないイマーシブ展示。数々のSF作品を生み出してきた河森正治が描く「宇宙スケールの食物連鎖」を通じて、パビリオンのテーマである「いのちは合体・変形だ！」というコンセプトを体感できます。 この超時空シアター「499秒 わたしの合体」の演出とアニメーションを担当し、SoVeC株式会社と寺坂波操株式会社によって開発された立体音響技術を用いて、ソニーピーシーエル株式会社（以下、ソニーPCL）の制作する立体音響を融合させ、これまでにない全く新しい映像体験を提供しました。

ライブの演出で使用した映像のリールです。 ライブにおける照明効果としての映像演出を考えました。 実写、CG(Blender)、シミュレーション、オーディオリアクティブ(Touch Designer,Resolume)、生成AI(Midjourney,Runway ML)など、ジャンルを問わず様々なツールでの映像作りを模索しました。 三味線が高速で掛け合う演奏では、コントローラーでの手動のオペレーションでは追いつかないため、Touch Designerでのリアルタイムのビジュアライズが効果的でした。

英国のNTS Radio主催のParallel Vision #10でロンドンのInstitute of Contemporary Artsでの∈Y∋ (BOREDOMS)のオーディオビジュアルライブ。2時間のイベントは3つのセットで構成され、タンザニア発祥の高速ダンス音楽「シンゲリ」を中心に展開され、その高テンポなビートに合わせてビジュアルが同期し、音楽の持つ激しいエネルギーをビジュアルで表現。AIの要素を融合させることで没入感あふれるカオスとスピードを増幅。

ミラノファッションウィーク2023のDiesel SS24のランウェイ後の２時間のアフターパーティーのオーディオビジュアルライブ。野外映画祭をモチーフにしたステージで、約30mの巨大なLEDスクリーンで、ランウェイ後、5千人の客の前で２時間のオーディオビジュアルライブを敢行。赤と黒と白の光に包まれます。

はたらく歓びを追求しながら、チームの創造性を加速させる実践型研究所「RICOH 3L」。 そこにある、チームの創造性を引き出す未来空間「RICOH PRISM」。 そのコンテンツの一つである「Anima」はデジタルに変換された自分のデジタルツインに出会う、16分間の映像と音による新感覚の知覚体験アート作品。 RICOHの複合機から着想し、最先端3Dセンシングと360°音響と映像を使い、５つのステージを体験しながら、体験者のANIMA＝魂を記録し、データに置き換え、主観と客観の視点でメタ認知し、知覚を再確認・再構築します。 3Dセンシングでユーザーの視点を場所を的確に把握することで、VRゴーグルなしの圧倒的な没入感のあるリアルな3D空間を実現しました。また様々な体験者のスキャンデータを記録し、俯瞰することができ、メタ認知を高めます。 全てがデジタル化された未来で、ANIMA＝魂や知覚は存在するのかを問います。

ストロークフォントを用い、それらをp5で操作し、ペンプロッターで描写する様を撮影した。リリックビデオというオーダーだったので、既存の歌詞を画面に乱舞させる手法でない表現の模索を行った。 描き順など文字の持つウェットな要素を排除して紙に描く美しさを追求してている。

オープニングとエンディング映像のディレクション。 ライブ全編のライティングを行いました。

国内最大級の視聴者数を誇るeSportsエンターテインメントショーであるCrazy Raccoon Cupのリブランディングを担当。 その中でも人気のある大会「Crazy Raccoon Cup Apex Legends」が節目となる第10回を迎えるに当たって、ロゴデザイン、画面デザイン、映像演出、BGMを刷新した。 チームの絆で頂点を共に目指していくという大会のコンセプトに沿って、アルファベットの「C」と「R」、チームを表す三角形を組み合わせて、ロケットのように見えるロゴをデザインした。 配信画面の各種パーツや、トランジションの構成要素としても利用できる造形にしている。 配信画面は全体を通して「見やすく、美しく、カッコいい」を意識。 背景など随所に使用されている3DCGは「国内最大級を誇るトップの輝き」と、様々なジャンルの人が参加しているという観点から「七色の虹」をイメージしている。 待機BGMでは劇場映画の予告編のように期待感や緊張感を演出し、解説とチャンピオンのBGMには多彩な音楽性を合わせることで、大会の高尚さや全世界へ発信していく力を込めた。  チャンピオン演出の効果音には敢えて音が割れそうな状態にすることで、大きな出来事を達成したときの爽快さを表現している。

作品について 「sonus-oleum ; ソノソリアム」は、船を模した施設（T-LOTUS M）の3フロア（B1F、1F、屋上）それぞれで異なる形態の作品を体験することができるライブ・インスタレーション作品。"音楽が船を動かすエネルギーとなる"と想定し、船の中で生まれた音楽の姿を以下4つの形式で表現した。 ライブパフォーマンス 1 ー音楽の誕生ー 本作品はB1Fでのライブパフォーマンスから始まる。音楽は江﨑文武氏が本ライブ・インスタレーションのために作曲したオリジナル楽曲。演奏は、江﨑文武氏（ピアノ）、常田俊太郎氏（バイオリン）、村岡苑子氏（チェロ）と自動演奏ピアノによる。会場は演奏者の両サイドに3m × 4mのスクリーンを8面設置し、来場者が音楽と映像に包み込まれるように構成した。スクリーンには、楽器と連動して動くリアルタイムモーショングラフィックスを投影。リアルタイムモーショングラフィックスを構成する要素は、ピアノから出力される鍵盤（88鍵）とペダルを押した時の強さや長さと、指輪デバイスを使って取得されるバイオリンとチェロ奏者の手の動き。奏者の動きと連動するリアルタイムモーショングラフィックは、音楽のエネルギーが生まれ上層に浮遊していく様子を描いている。 インタラクティブ展示 ー映像による変奏ー B1Fのライブパフォーマンスで生まれた音楽のエネルギーは、泡となり1Fのインタラクティブ作品の中に現れる。1F会場内には、2.4m × 2.4mの透過スクリーンを窓に合わせて7面設置し、インタラクティブ映像を投影。来場者がそれぞれのスクリーンに映し出されている泡に触れることで、泡が分裂し、オリジナル楽曲の一音一音が別の音色に変化する。偶然性によって生まれる変奏曲が無限に生成され続ける。 プロジェクションマッピング ー音楽が風をおこすー 1Fで生成された変奏曲は、さらに屋上へ上がり、船を動かすための風をおこす。音楽の力により巻きおこった風が帆にあたる様子を、30,000ルーメンの大型プロジェクター4台によって来場者の頭上に映し出した。 ライブパフォーマンス 2 ー還ってきた音とのセッションー B1Fで実施された2回目のライブパフォーマンスは、1Fで来場者が泡に触れることで生成される変奏曲を自動演奏ピアノがリアルタイムに演奏し、それに合わせて江﨑氏（ピアノ）、常田氏（バイオリン）、村岡氏（チェロ）が即興で演奏した。来場者によって生成される変奏曲と、即興の生演奏、リアルタイムモーショングラフィックスの協奏は新しい音楽の形態を感じさせるものとなった。 本ライブ・インスタレーションでは、この4つのプロセスを経て「unlearn（学びほぐし）」され、新しい音へと生まれ変わり循環していく風景を生み出した。作品名の「sonus-oleum ; ソノソリアム」とは、音 = sonus（ソノス）と、石油 = petroleum（ペトロリアム）との造語。