バンダイナムコ研究所は、ゲームAI(人工知能)とxR技術を活用したインタラクティブバーチャルパフォーマンスシステム 「BanaDIVE AX」を開発したと発表した。
このシステムでは、あらかじめアナライズされた楽曲を使用し、DJパフォーマンス(楽曲を違和感なく繋ぐ、楽曲のテンポをコントロールする、オーディエンスを盛り上るなど)が組み込まれたゲームAIが、3Dキャラクターのモーションや、ライブ空間の演出を連動させて実行する。また、リアルタイム投票による楽曲選曲や、楽曲と連動したビジュアル演出、AR視聴演出といったインタラクティブなエンターテインメント要素も組み込んだ。
これにより、会場はもちろん遠隔地にいても、DJとオーディエンスが一体となり、臨場感あふれるライブパフォーマンスを体感できるという。
今後は、バンダイナムコグループが主催するライブイベントをはじめ、キャラクターや音楽関係者とのコラボレーションを試みるのと同時に、深層学習ベースのAIとの連携や、世界中のオーディエンスを盛り上げる仕組みなど、未来のエンターテインメントに向けて研究開発を続けていくとしている。
なお、2020年6月28日開催される無料オンラインイベント「ASOBINOTES ONLINE FES」にて、実験ライブを実施することが決定した。無観客、全世界配信となるこのライブで、遠隔地のオーディエンスとつながる「リアルタイム投票」も実施する。