Webカメラを楽器に変えるgesture.liveが登場
楽器を持たずに演奏する。そのアイデア自体は昔からあった。テルミンしかり、エアドラムしかり。でも今回のgesture.liveは、特別なセンサーもコントローラーも要らない。手元にあるWebカメラだけでいい。
gesture.liveはブラウザ上で動く無料のツールだ。Webカメラの映像をリアルタイムで解析し、体の動きを音楽演奏のトリガーに変換する。AIとコンピュータビジョンを組み合わせた仕組みで、特別なソフトのインストールも不要。ブラウザを開けば、それがステージになる。
AI音楽の文脈でこれを語るとき、「作る」だけが主役じゃないことを改めて感じる。gesture.liveが面白いのは、AIを「演奏インターフェース」として使っている点だ。楽曲生成でもミックスの自動化でもなく、人間の動きをAIが読み取り、それを音に変換するという、いわば「身体と機械の翻訳」。ここに音楽制作の新しい入口がある。
SunoやDAWで曲を仕上げた後、それをどうライブで表現するか。そこに悩んでいるAI音楽の作り手は少なくないはずだ。gesture.liveはその問いにひとつの答えを出している。機材がなくても、楽器が弾けなくても、カメラの前で動けばいい。ハードルを下げながら、パフォーマンスの幅を広げるという発想は、正直かなり筋がいい。
一方で、「どこまで音楽的にコントロールできるか」という点は気になるところだ。動きをトリガーに変換する以上、精度と表現力のバランスがすべてを左右する。偶然性を楽しむアート寄りのパフォーマンスには向くかもしれないが、緻密なライブ演奏となると話は別になる可能性もある。
編集部的には、まずさわってみてほしいと素直に思う。無料でブラウザから使えるのだから、試さない理由がない。あなたの動きが音になる瞬間、それが「演奏」なのか「操作」なのか、感じてみる価値はある。じゃあそこに生まれるのは、作品なのか、それとも体験なのか。
🎧 審査員はこう聴いた
着眼点は悪くない。身体動作を入力信号として扱う発想は、インターフェース設計の観点から見ても理に適っている。ただし、動きを音楽的トリガーに変換する際の粒度と再現性が担保されなければ、これは楽器ではなくノイズ発生装置に過ぎん。構造的な及第点は、精度次第だ。
（「ノイズ発生装置」と言い切るスピード感、さすが教授。）
やば、これフロアで使ったらどうなるか想像しただけで神。DJが手を上げるたびに音変わるとか、客がヤバすぎる反応するやつじゃん。ブラウザだけで動くのも惜しみなく推せる。ただ遅延がどんくらいあるかだけ教えてくれ、そこが命取りだから。
（最後の一文だけが全部プロ仕様でした。）
マ? カメラだけで楽器になるの? これTikTokで踊りながら演奏する動画に使ったら神すぎる案件じゃん。「踊ったら曲が変わる」ってサムネだけで再生数やば。無料なのも全部正解。ショート動画との相性、考えた人天才すぎ。
（すでにコンテンツの設計図が完成してるの、さすがすぎる。）
👑 うちの本音（Premium）
この記事の“うちの本音”・もう一歩踏み込んだ見立ては、Premium会員だけが読めます。
Premiumで続きを読む本記事は元ニュースを基に AI MUSIC JUDGE 編集部が作成した読み物です。審査員のコメントはキャラクターによる創作・論評であり、出典元の見解ではありません。事実は出典をご確認ください。