動画からリアルタイムに音楽を生成する「PhotoMusic Infinite」〜ロボット、ドローン、メタバースなどでの応用も〜 (3/7ページ)

バリュープレス

しかし、動画に合った音楽を見つけるのは、ネットで楽曲を探し、ダウンロードして試行錯誤を繰り返すといった手間が掛かる上に、著作権やロイヤリティも気になります。また、ネットからダウンロードできる音楽はありきたりものが多く、しかも音楽の流れは動画の変化に全く無関係でした。音楽を作曲したときには、それがどのような場面で使われるか、どのような動画と組み合わされるかは分かっていないので、音楽の流れと動画の変化が無関係なのは当然でした。しかし、音楽を動画に合わせて即興的に作曲してすぐに演奏すればそのような問題は解決します。
今回、PhotoMusicの技術を大幅に進展させ、動画からリアルタイムに音楽を生成するPhotoMusic Infiniteを開発しました。本ソフトウェアは、動画ファイルを読み込ませて、曲調を示す「スタイル」を選択するだけで、動画の画像の変化を反映した即興的な音楽をリアルタイムに生成して、動画と音楽を同期して演奏します。
本ソフトウェアによって、スマホで撮影した動画を非常に手軽にBGM付きにしてYouTubeなどに投稿することができるようになります。音楽の著作権を心配することもありません。
しかし、PhotoMusic Infiniteの用途は「撮影済み動画のBGM付け」に留まりません。動画を撮影しながら動画の特徴や変化に追従した即興音楽をリアルタイムに作曲・演奏するというPhotoMusic Infiniteの特長は他には見られません(特許出願済みの技術)。例えば、ドローンの空撮やロボットのカメラ映像から風景の変化に追随した音楽を生成し、リアルタイムに映像に重ねて演奏するようなことは本ソフトウェアしかできません。また最近注目を浴びているメタバースでは、3Dグラフィックスによりインパクトの強い臨場感豊かな映像が実現されていますが、音響的にはRPGゲームのように固定の短いBGMを繰り返し流すだけでインパクトがありませんでした。PhotoMusic Infiniteは、予測不能な映像の変化に対応して音楽をリアルタイムに生成することができますので、メタバースにおいてユーザーの操作で刻々と変化する映像に追随したBGMを流し続けることができます。

「動画からリアルタイムに音楽を生成する「PhotoMusic Infinite」〜ロボット、ドローン、メタバースなどでの応用も〜」のページです。デイリーニュースオンラインは、即興音楽リアルタイム音楽生成自動音楽生成動画BGMメタバースネットなどの最新ニュースを毎日配信しています。
ページの先頭へ戻る