世界的ダンサーと人工知能 — AIはダンサーの創造性を刺激できるか

Israel & イスラエル Photo by Yuki Moriya / Courtesy of Yamaguchi Center for Arts and Media [YCAM]
Solo by Israel Galván
Israel Galvan (Wikipedia)
“La casa”, Israel Galván (2006)
AI DJ Project at YCAM
AI DJ Project / YCAM (2017) Photo by Yasuhiro Tani / Courtesy of Yamaguchi Center for Arts and Media [YCAM]

予測不可能性と予測可能性の微妙なバランス、そしてAIが生成するリズムを再解釈する余地、曖昧性が残されていることが重要

とはいえ、実際にプロジェクトが立ち上がると、様々な問題に直面します。一般的な音楽とは違い、今回の場合は学習に使えるようなデータが全くありません。そこで、リズムのパターンをデータとして記録するために、専用のセンサーを埋め込んだフラメンコシューズを開発するところからはじめることになります。YCAM内の研究機関、InterLabのメンバーが、ピエゾセンサー、ジャイロセンサー、圧力センサーなどを仕込んだシューズを作り、イスラエルのサパテアードのデータを、かかと、つま先、足の腹の3点で収集しました。

学習データ収集用フラメンコシューズ — 制作: YCAM InterLab
失敗したデータの例. ステップの圧力が強すぎてセンサーの値が上限に張り付いてしまっている.
学習データ収集時の録音。いかに高速でステップを踏んでいるかよくわかります。
センサーで集めたデータを可聴化したサンプル。データを音に変換するために、映画などで足音の効果音を作るために使われているプラグインを利用しています。
Roberts, A., Engel, J., Raffel, C., Hawthorne, C., & Eck, D. (2018). A Hierarchical Latent Vector Model for Learning Long-Term Structure in Music. http://arxiv.org/abs/1803.05428
Tokui, N. (2020). Towards democratizing music production with AI-Design of Variational Autoencoder-based Rhythm Generator as a DAW plugin. http://arxiv.org/abs/2004.01525
公演で使われたソレノイド Photo by Yuki Moriya / Courtesy of Yamaguchi Center for Arts and Media [YCAM]

イスラエル・ガルバンのフラメンコのステップを学習しつつ、どのようにフラメンコらしさ、イスラエルから適度に逸脱するのか

ランダムなサンプリングに関しては、大きな穴と小さな穴があるいびつなルーレットを考えていただけるといいかもしれません。ルーレットを回して、球を投げ込むと当然大きな穴に落ちる可能性が高くなりますよね。何度も何度も繰り返せば、その穴に球が落ちる確率は穴の大きさに比例するはずです。

生成モデルのアウトプットの一例
Israel & イスラエル — 映像・照明の表現は比嘉了 神田竜の二人の気鋭の映像作家が手掛けた. Photo by Yuki Moriya / Courtesy of Yamaguchi Center for Arts and Media [YCAM]
Israel & イスラエル Photo by Yuki Moriya / Courtesy of Yamaguchi Center for Arts and Media [YCAM]
映像撮影:田邊アツシ、田邊るみ、塩見浩介 映像編集:田邊アツシ
初演直後のイスラエルと

「ミュージシャンでも、もちろんフラメンコ・ダンサーでもない、そもそも人間らしくもない、何か未知の生物がステージにいるような気がした。とっても刺激されたよ。」

失敗してもいいから、自分を驚かせて欲しい。「驚き」を重視する姿勢は、AIのモデルと踊る機会を本番までなるべく短くしたがったイスラエルの姿勢からも伺えました(そのせいで制作チームはかなりやきもきしましたが…)。AIがどんなリズムを生成しても、自分はそれに応えられる、という自信に裏打ちされているのはいうまでもありません。

失敗してもいいから、自分を驚かせて欲しい。

セビーリャのイスラエルのスタジオにて. シューズを試しているところ.
セビーリャの居酒屋の日常
パリ公演後のチームの集合写真。日仏英語にスペイン語の四カ国語が飛び交う刺激的な現場でした。ハンドサインはYCAMのある「山口」を表しています。

Credit

イスラエル・ガルバン+YCAM 「Israel & イスラエル」

振付、演出、出演
イスラエル・ガルバン

--

--

徳井直生 — Qosmo, Inc. / Keio Univ. SFC Computational Creativity Lab — AIと創造性. http://naotokui.net/ http://qosmo.jp/ https://cclab.sfc.keio.ac.jp/

Love podcasts or audiobooks? Learn on the go with our new app.

Get the Medium app

A button that says 'Download on the App Store', and if clicked it will lead you to the iOS App store
A button that says 'Get it on, Google Play', and if clicked it will lead you to the Google Play store