本作品は、大阪・関西万博において、EXPO ホール「シャインハット」およびポップアップステージ東外にてアンビエント演出としてプロジェクションマッピング展示・上映された映像作品です。 大阪・関西万博で「こみゃく」として親しまれた「EXPO 2025 Design System」のＩＤをモチーフに、その製作チームの代表者である引地耕太氏をアドバイザーに迎え、避雷がこれまで研究してきた人工生命的生態系システムのノウハウを活かし、リアルタイム映像シミュレーションシステムおよび映像を作成しました。 映像の制作に際し、メタボールを元にプロトタイピングされたというデザインシステムの経緯をリファレンスに、「こみゃく」たちがデザインのアイデンティティをそのままに、まるで生きているかのように振る舞うリアルタイムシミュレータを開発。GPGPUによって大量のこみゃくの相互作用をリアルタイムに計算可能にすることで、インタラクションや一期一会的な動画の生成可能性等、幅広く展開可能なシステムを構築しました。 また、ポップアップステージ東外では、建築の支柱により投影される映像が遮られる構造特性を逆手に取り、その鉄骨のひとつひとつにこみゃくが詰め込まれたような映像を制作。投影面の特性を活かした映像制作に取り組みました。 なお、「こみゃく」という名称はデザインシステムの構成要素であるIDを指す愛称として自然発生的に広まりました。本作品は、そうした二次創作的文化的広がりを踏まえ、意図的に「こみゃく」という呼称を用いています。

Powerhouse: International A New Arts Festival https://festival.powerhousearts.org/festival-performances/eye-av-show-aya-av-show

SOUL MOTION は、ユニフォームに組み込まれたロケーションタグを用いたインタラクティブマップです。センサーはリアルタイムのデータを捉えるとともに、過去3日間の天候やコミュニケーションの総量、来場者数、個々の軌跡といった記録を映し出します。 来場者が「土」や「ソファ」のゾーンに近づくと、仮想の微生物がその位置に群がり、環境条件によって繁殖したり衰えたりする様子を映します。センサーに軽く触れるとそれらは散り去り、絶えず変化する動的な地図が現れます。 微生物やテクノロジー、人間関係の繊細なリズムといった不可視のプロセスを映し出すことで、SOUL MOTION は私たちを取り巻く隠れた環境を見直し、人と人、人と自然とのつながりを改めて考えるきっかけを生み出します。 SOUL MOTION is an interactive map and art installation that visualises the live movements, distances travelled, and communications between six staff members wearing sensor-embedded garments. The sensors capture both real-time data as well as archive records from the past three days, including weather conditions, levels of communication, visitor numbers, and individual activity trails. As participants approach the soil or sofa zones, virtual microbes begin to cluster around their positions, echoing how microorganisms thrive or diminish depending on environmental conditions. A simple tap on the sensors makes the microbes disperse, transforming the experience into a dynamic microbial map that constantly shifts between presence and absence. By rendering these invisible processes such as microbes, technology, and the subtle rhythms of human interaction, SOUL MOTION invites visitors to reconsider the hidden environments around them and to reflect on how we connect not only with one another, but also with nature itself and encourages communications.

SOUL BUBBLE は、個人の精神と身体の状態を映し出す没入型のアートインスタレーションです。十一面のスクリーンに囲まれた空間で、来場者はAIとセンサーを備えた一人用のソファに腰掛けます。ソファは姿勢や重心の変化、心拍、呼吸、手の動きを読み取り、その信号をリアルタイムに可視化します。 リラックス、集中、緊張、不安、興奮、瞑想、混乱といった心身の状態は解析され、微生物のようなパターンとなって空間全体に広がっていきます。体験の最後には、自らの行動データがスクリーンに映し出され、保存され、AIシステムの進化へとつながります。 参加者が増えるごとに、個人と集団のデータが積み重なり、差異や分布、新たな傾向が浮かび上がります。この継続的なプロセスは、インスタレーションを絶えず進化させ、人間の状態を記録し続ける果てしないアーカイブを形成していきます。興味深いことに、多くの来場者は自らの結果に強い関心を寄せ、そこに「高いリラックス」のパターンを期待して臨んでいました。 SOUL BUBBLE は、泡のように身体を包み込みながらも、未来のセンシング装置のプロトタイプとしての姿を見せ、テクノロジーが身体に寄り添い、魂に応答し、心と存在の奥に潜む層を浮かび上がらせます。 SOUL BUBBLE is an immersive art installation that visualises an individual’s mental and physical state. Inside a private room surrounded by eleven screens, a visitor sits on a single-seat chair embedded with AI and sensors. The chair records posture, shifts in the centre of gravity, heart rate, breathing, and hand movements, translating these signals into real-time visualisations of the visitor’s inner condition. Emotional states such as relaxation, focus, tension, anxiety, excitement, meditation, or confusion are analysed and expressed as dynamic microbial patterns that unfold across the surrounding screens. At the end of the session, visitors can view their complete data, which is stored and used to refine the AI system. As more participants take part, both individual and collective data accumulate, revealing differences, distributions, and emerging tendencies. This ongoing process allows the installation to evolve continuously, creating an ever-expanding record of human states. Interestingly, many visitors approached the experience with the expectation of seeing a high relaxation pattern in their results. SOUL BUBBLE is a bubble-like prototype of future sensing, where technology surrounds the body, responds to the soul, and reveals the hidden layers of mind and being.

全てTouchDesignerのリアルタイムレンダリングによるビジュアルで構成された2024年のVJリール。

本作は、2024年7月から8月にかけて1週間開催された「表参道 interactivité 展」におけるパフォーマンスとして制作されたオーディオビジュアル・ライブである。テーマである «interactivité»（二つ以上の存在のあいだに生じる対話）をもとに、音と形態が互いに応答しながら変化していく様子をリアルタイムに表現した。 映像は波や立方体の集合といったモチーフを基盤に展開し、中盤のパートでは建築物が登場する。ここでは、monoton による建築構想「方角を棲み分ける家」のモデルを使用しており、TouchDesigner 上でパラメトリックに設計できるよう構築した。 間取りや構造に関する各種パラメーターを変化させ、カメラの視点や断面の切り取りを操作しながら、音と建築形態の関係を提示している。 音楽は Ableton Live を用いたライブ演奏によって生成され、その出力から送信される OSC 信号や MIDI コントローラーの入力がビジュアルの制御に反映される。映像は TouchDesigner によるリアルタイムレンダリングで構成され、音とビジュアルが呼応しながら展開していく様子を観客に提示した。

サウンドプロデューサー・SKYTOPIAとの継続的な音楽・映像コラボレーション企画の集大成として、EPリリースパーティを開催。セットリスト後半よりVJを担当した。 代官山シアターギルドに常設の4K LEDスクリーンを大胆に活用し、空間全体を包み込むような演出を構築。今回のパフォーマンスでは初の試みとして、TouchDesignerによるAudio Reactiveシステムを導入した。リアルタイムで音響信号に反応するヴィジュアルとエフェクトの生成により、音と映像がダイナミックに溶け合う表現を試みている。 一方で、COMP構造の煩雑さや操作の柔軟性など、構築面での課題も少なくなかった。今後はレイアウトの整備や操作性の向上を含めたシステムの再設計を視野に、引き続きアップデートを重ねていく。

auveは、画像を解析して音に変換することで、映像から音楽までを1人で奏でる30分のオーディオビジュアル作品です。10年以上にわたるリアルタイム映像制作の経験を活かし、映像をリアルタイムで解析し、目まぐるしく変化するビジュアルの動きを、多様なピクセル解析技術によって音に変換します。これにより、映像の中に潜むリズムやテンポを浮き彫りにし、画面に映る絵と音が完全に連動した統合的なオーディオビジュアル表現を実現しています。

Expo 2025 大阪・関西万博 シグネチャーパビリオン河森正治プロデュース「いのちめぐる冒険」の 現実と仮想空間が融合する専用シアター「499秒わたしの合体」にて、30名の参加者がカメラ付きVRゴーグルを装着し、VRとMRの技術を通して、過去の記憶から時空を越え、宇宙スケールの食物連鎖を全員で同時体験する、世界でここでしか体験できないイマーシブ展示。数々のSF作品を生み出してきた河森正治が描く「宇宙スケールの食物連鎖」を通じて、パビリオンのテーマである「いのちは合体・変形だ！」というコンセプトを体感できます。 この超時空シアター「499秒 わたしの合体」の演出とアニメーションを担当し、SoVeC株式会社と寺坂波操株式会社によって開発された立体音響技術を用いて、ソニーピーシーエル株式会社（以下、ソニーPCL）の制作する立体音響を融合させ、これまでにない全く新しい映像体験を提供しました。

ライブの演出で使用した映像のリールです。 ライブにおける照明効果としての映像演出を考えました。 実写、CG(Blender)、シミュレーション、オーディオリアクティブ(Touch Designer,Resolume)、生成AI(Midjourney,Runway ML)など、ジャンルを問わず様々なツールでの映像作りを模索しました。 三味線が高速で掛け合う演奏では、コントローラーでの手動のオペレーションでは追いつかないため、Touch Designerでのリアルタイムのビジュアライズが効果的でした。

英国のNTS Radio主催のParallel Vision #10でロンドンのInstitute of Contemporary Artsでの∈Y∋ (BOREDOMS)のオーディオビジュアルライブ。2時間のイベントは3つのセットで構成され、タンザニア発祥の高速ダンス音楽「シンゲリ」を中心に展開され、その高テンポなビートに合わせてビジュアルが同期し、音楽の持つ激しいエネルギーをビジュアルで表現。AIの要素を融合させることで没入感あふれるカオスとスピードを増幅。

ミラノファッションウィーク2023のDiesel SS24のランウェイ後の２時間のアフターパーティーのオーディオビジュアルライブ。野外映画祭をモチーフにしたステージで、約30mの巨大なLEDスクリーンで、ランウェイ後、5千人の客の前で２時間のオーディオビジュアルライブを敢行。赤と黒と白の光に包まれます。

はたらく歓びを追求しながら、チームの創造性を加速させる実践型研究所「RICOH 3L」。 そこにある、チームの創造性を引き出す未来空間「RICOH PRISM」。 そのコンテンツの一つである「Anima」はデジタルに変換された自分のデジタルツインに出会う、16分間の映像と音による新感覚の知覚体験アート作品。 RICOHの複合機から着想し、最先端3Dセンシングと360°音響と映像を使い、５つのステージを体験しながら、体験者のANIMA＝魂を記録し、データに置き換え、主観と客観の視点でメタ認知し、知覚を再確認・再構築します。 3Dセンシングでユーザーの視点を場所を的確に把握することで、VRゴーグルなしの圧倒的な没入感のあるリアルな3D空間を実現しました。また様々な体験者のスキャンデータを記録し、俯瞰することができ、メタ認知を高めます。 全てがデジタル化された未来で、ANIMA＝魂や知覚は存在するのかを問います。

ストロークフォントを用い、それらをp5で操作し、ペンプロッターで描写する様を撮影した。リリックビデオというオーダーだったので、既存の歌詞を画面に乱舞させる手法でない表現の模索を行った。 描き順など文字の持つウェットな要素を排除して紙に描く美しさを追求してている。

オープニングとエンディング映像のディレクション。 ライブ全編のライティングを行いました。