メディア・アートの生成

Anthropicの生成AI、Claude 3.5 Sonnet + Artifactsに以下のプロンプトを投げた。

p5.jsで作るメディア・アート作品の要件定義書を作ってください。インタラクティブでダイナミック、かつオーディオ・ビジュアルでソーシャルな作品とします。コンセプチュアルな作品背景を含めた説明文とイカしたタイトルも合わせてお願いします。そして、その要件定義書に従ってWEBブラウザで実行できるようにプログラム・コードを含むindex.htmlを作成してください。

その結果は以下の通り。

「Sonic Bloom: デジタル共生庭園」要件定義書

1. コンセプト

「Sonic Bloom: デジタル共生庭園」は、人間とテクノロジー、自然と人工の調和を探求するインタラクティブなメディア・アート作品です。この作品は、デジタル空間内に生態系のメタファーを創造し、観客の参加によって成長し、変化していく仮想の庭園を表現します。

音と映像が融合したこの体験は、私たちの行動が環境に与える影響を視覚化し、集団的な創造性と責任の重要性を強調します。「Sonic Bloom」は、技術を通じて自然との新たな関係性を模索し、デジタル時代における共生の可能性を示唆します。

2. 技術要件

2.1 開発環境

  • 言語: JavaScript
  • ライブラリ: p5.js、p5.sound.js
  • 開発ツール: Visual Studio Code、ローカルサーバー(Live Server等)

2.2 ビジュアル要素

  • キャンバスサイズ: フルスクリーン(ウィンドウサイズに応じて調整)
  • 色彩: 自然をイメージした有機的な色彩パレット(緑、青、茶、etc.)
  • 形状: フラクタル、パーティクル、流体シミュレーションを組み合わせた抽象的な植物の表現

2.3 オーディオ要素

  • Webオーディオ APIを使用した動的なサウンド生成
  • 環境音(風、水、鳥の鳴き声等)のサンプリングと加工
  • インタラクションに応じた音程、音量、エフェクトの変調

2.4 インタラクション

  • マウス/タッチ操作: 画面上の要素と直接インタラクト
  • マイク入力: 音声による作品への影響
  • カメラ入力: 動きや色の検出による環境への反応

2.5 ソーシャル要素

  • WebSocketを使用したリアルタイムの多人数参加機能
  • 個々のアクションが全体に影響を与えるシステム
  • 参加者間のビジュアル・オーディオ要素の共有と相互作用

3. 実装詳細

3.1 ビジュアル生成

  • パーティクルシステムを使用した植物の成長シミュレーション
  • ノイズ関数を利用した有機的な動きの表現
  • 色彩の動的変化によるムードや状態の表現

3.2 サウンドデザイン

  • 周波数分析と合成による独自の音響生成
  • 空間音響技術を用いた3D音響効果の実装
  • ビジュアル要素と連動した音響パラメータの制御

3.3 データ構造

  • 植物オブジェクトの階層構造(根、茎、葉、花等)
  • 参加者データの管理(位置、行動履歴、影響力等)
  • 環境パラメータ(光、水、養分等)のシミュレーション

3.4 最適化

  • フレームレート管理による安定したパフォーマンス
  • オブジェクトプーリングによるメモリ使用の効率化
  • Web Workersを使用した複雑な計算の非同期処理

4. ユーザーエクスペリエンス

  • 直感的なインターフェース: 説明なしで操作可能なデザイン
  • フィードバック: ユーザーのアクションに対する即時的かつ明確な反応
  • 没入感: 視覚と聴覚の調和による強い没入体験の創出
  • 発見性: 長期的な関与を促す隠れた要素や進化するコンテンツ

5. 展示要件

  • 大型スクリーンまたはプロジェクター(4K解像度推奨)
  • 高品質スピーカーシステム(5.1chサラウンド以上)
  • タッチスクリーンまたはモーションセンサー for インタラクション
  • 高性能コンピューター(GPU搭載推奨)
  • 安定したインターネット接続(ソーシャル機能用)

6. 今後の展開

  • 機械学習による作品の進化と適応
  • VR/AR版の開発によるさらなる没入体験の提供
  • 環境データの実時間連携による現実世界との接続
  • コミュニティ機能の拡張(作品の共同編集、保存機能等)

この要件定義書は、「Sonic Bloom: デジタル共生庭園」プロジェクトの基本的な方向性と技術的要件を概説しています。実際の開発過程で詳細な仕様や追加機能が決定されることを前提としています。

このindex.htmlファイルは、「Sonic Bloom: デジタル共生庭園」プロジェクトの基本的な実装を含んでいます。以下に主な特徴を説明します:

  1. ビジュアル要素:
    • パーティクルシステムを使用して、動的に変化する抽象的な植物や生命体を表現しています。
    • 色彩はHSB色空間を使用し、自然な色調を生成しています。
  2. オーディオ要素:
    • マイク入力を使用して、環境音を取り込みます。
    • FFT(高速フーリエ変換)を用いて音声を解析し、ビジュアルに反映させています。
  3. インタラクション:
    • マウスの動きに反応して新しいパーティクルを生成します。
    • マイク入力の音量に応じてパーティクルのサイズが変化します。
  4. レスポンシブデザイン:
    • ウィンドウサイズの変更に対応し、常にフルスクリーンで表示されます。

この実装は、要件定義書の基本的な要素を含んでいますが、より複雑な機能(例:ソーシャル要素、高度な音響効果)は含まれていません。これらの機能を追加するには、さらなる開発が必要です。

プロジェクトを発展させるための次のステップとしては以下が考えられます:

  1. より複雑なパーティクル相互作用の実装
  2. 高度な音響処理と3D音響効果の追加
  3. WebSocketを使用した多人数参加機能の実装
  4. より洗練されたビジュアルデザインの適用

このコードをブラウザで実行すると、動的に変化するパーティクルのアニメーションが表示され、マウスの動きとマイク入力に反応します。さらなる機能の追加や改良について、具体的な要望があればお知らせください。

生成された作品では漆黒の画面から水泡のような色とりどりの円が浮かび上がる。マウス・ポインタのホーバーで新しい追加され、音に反応して円の大きさが変わる。インラインや実行環境によって制約があるので、MacのSafariなどでWEBページを確認するのが良いだろう。

以上は、ただ一度のプロンプトで生成されている。今朝起き掛けに思いついて取り組んだ。プロンプトの作成に4分、テキストとコードの生成に1分、合計5分間で完了した。もっともその後の実行確認や本記事の作成に1時間ほどかかっている。

4月17日はソウルで講演

4月17日はソウルのsadi(Samsung Art and Design Institute)にて空間コンピューテングについての講演を行います。NewJeansのミュージック・ビデオLuciano Floridiの「第4の革命」、そしてvisionOSの構成からアプリ開発の実際、さらにApple Vision Proのデモと体験まで、とても2時間では収まりきらない内容を駆け足でお伝えする予定です。

講演「The Future of HCI : 
Spatial Computing」

日時:2024年4月17日(水)10:00〜12:00
会場:sadi(Samsung Art and Design Institute)

受講は同校在学者限定とのことで、残念ながら一般の方はご参加いただけません。また別の機会も検討したいと考えていますので、楽しみにお待ちください。

2月2日よりApple Vision Proアプリを公開

2024年2月2日にアメリカ合衆国でApple社の空間コンピューティング・デバイスApple Vision Proが発売されました。これに合わせて7つのApple Vision Pro用アプリを公開しています。

これらのアプリを利用するにはApple Vision Pro本体が必要となります。ただ、App Storeではスクリーンショットやアップ・プレビュー(動画)を掲載されているので、おおよその雰囲気を掴むことができます。

なお、従来のiPhone/iPad用アプリはそのままApple Vision Proでも動作します。もっともカメラやセンサーなどはApple Vision Proでは動作しないので、正しく動作しないアプリもあります。

11月24日はラジオに出演

11月24日にJ-Waveのラジオ番組「Innovation World」に出演します。同番組の「ROAD TO INNOVATION」という枠で20時10分頃から20時40分頃までの30分間。WEBサイトの告知では「今回のメッセージテーマは『自転車の話』です。」となっています。よろしければご聴取ください。

J-Waveラジオ番組「Innovation World
ROAD TO INNOVATION 今回のメッセージテーマは「自転車の話」です。
放送日時:2023年11月24日(金)20:10頃〜20:40頃
聴取方法:東京圏 FM 81.3MHz または radiko

番組のナビゲータはAR三兄弟の長男、川田十夢さん。事前のお話では「セカイカメラ以前とセカイカメラ以降のお話を軸にさせてもらって。あとはXXXや自転車の話(ぼくも乗ってます!)などを…」とのことでした。詳しい打ち合わせやリハーサルはなく、リアルタイムに出たとこ勝負なので、どのように展開するか楽しみです。

11月10日より国際会議で講演

来る11月10日より12日まで開催されるアート・フェスティバルAdvanced Imaging International Festivalのカンファレンスで「Artistic Imaging in the Age of Mobility(モビリティの時代における芸術的な視覚化)」と題して講演を行います。中心となるのは「タレスの刻印」の作品論で、移動や運動としての視覚化として論じます。それに先立ってカメラ・オブスキュラや移動コンピューティング、そしてクリティカル・サイクリングでの取り組みなども紹介します。オンラインで視聴できますので、お時間がありましたら、是非ご覧ください。

講演「Artistic Imaging in the Age of Mobility」
会期:2023年11月10日〜12日
会場:オンライン

8月11日より揖斐川町で展示:タレスの刻印@藤橋城

8月11日より岐阜県揖斐川町で展覧会「タレスの刻印@藤橋城」を開催します。これは星空を特殊な撮影装置を使って長時間露光によって撮影した写真で、夜空の星々が舞い踊るような痕跡が浮かび上がります。今回はアクリル・パネルに印刷した半透明の写真を自然光のもとで展示します。

展覧会「タレスの刻印@藤橋城」
会期:2023年8月11日(金)~2023年8月20日(日)
   8月15日(火)は休館 
   10:00〜16:00
会場:鶴見亭特設会場(藤橋城・西美濃プラネタリム横)
   岐阜県揖斐郡揖斐川町鶴見486
制作:赤松正行
協力:情報科学芸術大学院大学
入場料:無料
お問い合わせ先:0585-52-2611

藤橋は「星のふる里」と呼ばれるほど夜空の星が美しい山間の集落で、あまりにも綺麗な満天の星空に心動かされて、次第に作品が形作られました。そこで作品が生まれた地で展覧会を催し、素晴らしい自然環境に感謝するとともに、同じ星空のもとに作品を展示したいと考えました。

なお、展覧会初日の夜には会場近くの野外に撮影装置を設え、新しい作品が次第に現れる過程をご覧いただく撮影鑑賞会も行います。また、会場近くのプラネタリウムでは展覧会の告知映像として作品の全天周映像をご覧いただけます。展覧会と合わせてお楽しみいただければ幸いです。

9月11日より東京日本橋で展示

2022年9月11日より10月2日まで日本橋馬喰町のギャラリーNEORT++にて展覧会「タレスの刻印」を開催します。これは星空を撮影した写真展ながら、星空とは思えないような写真であり、半透明のアクリル・パネルに360度全周囲映像を投射して写真展とは思えないような展示になっています。ご高覧いただければ幸いです。

展覧会「タレスの刻印」

夜空を見上げ、動きながら星々を記譜する

会期 2022.09.11(日)〜2022.10.02(日) 14:00〜19:00
   月、火、祝日は休館
会場 NEORT++
   東京都中央区日本橋馬喰町 2-2-14 maruka 3F 【地図】
  (道路から見ると駐車場の奥にドアがあり、階段を登って3階が会場です)
公式サイト

オープニング・レセプション&アーティスト・トーク
日時 2022.09.11(日) 18:00〜21:00
会場 NEORT++
(どなたでもご参加いただけます)

4月23日より池田町で展示

4月23日より願成寺西墳之越古墳群で開催される願成寺古墳群美術展2022に新作「古墳時代の自転車」と旧作「リ・サイクルの車輪」を展示します。111基もの古墳が集積した一帯に国内外20組の作家による作品の野外展示があり、関連展示や関連イベントも多数ありますので、ぜひお出かけください。なお「古墳時代の自転車」は諸般の事情により資料展示の予定です。

願成寺古墳群美術展 2022
会期:2022年4月23日(土)〜 5月29日(日)
会場:願成寺西墳之越古墳群 【地図】
4月23日は古墳レクチャーと作品説明会の他、関連企画が多数あります。

2月5日より恵比寿で展示

2月5日より恵比寿の東京都写真美術館で開催される第13回恵比寿映像際(2021)に、現実を拡張し変容するARARTプロジェクトからAR作品を出展します。これは「ウロボロスのトーチ」「モーメンツ・オブ・ブルーム」「リトル・プリンス」「未確認浮遊物体」の4作品で、いずれもバージョン・アップしていますので、既にご覧になった方もお楽しみいただけると思います。ご都合がつきましたら、ぜひお越しください。

第13回恵比寿映像祭「映像の気持ち」
会期:2021年2月5日(金)~2月21日(日)〈8日(月)、15日(月)休館〉
   10:00−20:00 (最終日は18:00まで)
会場:東京都写真美術館 【アクセス】

10月24日はオンラインでイベント

ニュー・ノーマル時代に向けて「新型グループ・ピクニック」を開催します。これは新型コロナウイルスの感染を避けて、人々がオンラインで繋がるピクニックです。自宅でも景勝地でも、徒歩でも自転車でも構いません。好きな場所で好きなスタイルで、スマートフォンを持って参加してください。映像を送り合い、会話をしながら、遠隔地の人々と一緒にピクニックを楽しみましょう。

新型グループ・ピクニック 2020 Autumn
日時:2020年10月24日(土)11:00〜13:00 JST(悪天候時やネットワーク障害時は中止)
場所:養老公園、他(お好きな場所で参加可能)

参加:ZoomZenlyで参加希望の方は10月22日までに【お問い合わせ】よりお申し込みください。
告知:イベントの進行や変更などはTwitter @CriticalCycling でお知らせします。 
視聴:イベントの様子はYouTube Liveでご覧いただけます。
   養老公園こどもの国のライブ・ビューイング会場でもご視聴ご参加いただけます。

【お願い】
・感染予防のため、マスクの着用、対人距離の確保、消毒や手洗いなどをお願いします。
・参加時に危険な行動や公序良俗に反する行為はお控えください。
・映像や音声は公開されますのでご了承ください。

世界各地どこからでもご参加いただけますが、養老公園ではクリティカル・サイクリングの関係者がミニFM局、万華鏡、AR、音響探索、全天周カメラ、ドローンなど趣向を凝らして参加します。また、養老公園のこどもの国にライブ・ビューイングの大型ディスプレイと、その場で参加できるカメラとマイクが設置されます。さらにアートや公園に関連する他の場所からの中継も予定されています。