動画からリアルタイムに音楽を生成する「PhotoMusic Infinite」〜ロボット、ドローン、メタバースなどでの応用も〜

PhotoMusic Infiniteは、動画を読み込ませるだけでその動画の特徴に合った音楽を生成して、BGM付きで演奏するソフトウェアです。
独自の音楽生成技術（特許出願中）により、動画の色彩的特徴や画像の変動を反映する即興的な音楽をリアルタイムに生成します。音楽の知識は必要ありません。曲調を示す「スタイル」を選択するだけで、様々なジャンルの音楽を自動的に生成します。
これまで撮影した動画にBGMを付けるには、ネットで楽曲を探しダウンロードして試行錯誤をする必要がありました。本ソフトウェアによって手軽に動画をBGM付きにしてYouTubeなどに投稿できるようになります。
ドローンやロボットのカメラ映像から風景の変化に追随する音楽をリアルタイムに演奏する、などの用途にも使えます。メタバースでの応用にも向きます。センサーなどからのデータストリームから音楽を生成することも可能です。




ソフトウェア開発ベンチャーのクラウド・テン株式会社（所在地：京都府精華町、代表取締役：南方郁夫、以下クラウド・テン）は、既発売の写真から音楽を自動生成する「PhotoMusic」の技術を拡張して、動画から自動的に音楽を生成してBGM付きの動画にするパソコン向けソフトウェア「PhotoMusic Infinite（フォトミュージック インフィニット）」の発売を2021年12月21日より開始しました。