動画からリアルタイムに音楽を生成する「PhotoMusic Infinite」〜ロボット、ドローン、メタバースなどでの応用も〜 (5/7ページ)
- タグ:
-
即興音楽
-
リアルタイム音楽生成
-
自動音楽生成
-
動画BGM
-
メタバース
独自の音楽生成技術(特許出願中)により、動画ファイルをドラッグ&ドロップするだけで、動画の色彩的特徴を反映した伴奏と、動画の画像の変動にを反映して変化するメロディ(旋律)、が合わさった即興的な音楽がリアルタイムに生成されます。同じ動画ファイルを食わせても毎回異なった趣のメロディが作られるので、いつも世界で唯一つの音楽を楽しめます。また音楽の著作権やロイヤリティに煩わされることはありません。
2:動画の変化に反応してメロディがダイナミックに変化
動画の画像の変動量にリアルタイムに追随してメロディがダイナミックに変化します。画像の変化が少ないときは、1つの楽器だけで音の上り下りが少なく単純なリズムのメロディが流れ、ゆったりした曲調になります。一方、画像の変化が多い局面では、複数の楽器を使って音の上下が激しく強いリズムで複数のメロディを奏でるので活発な印象の曲調に変わります。
3:リアルタイムに音楽を生成
PhotoMusic Infiniteは動画からリアルタイムに音楽を生成します。すなわち1拍ごとにその時の画像の変化からメロディを作ってリアルタイムに演奏します。ですのでカメラからのリアルタイムな動画に対してでも、画像の変化と同時にその変化に対応したBGMを生成します。(※カメラからの動画入力機能は本ソフトウェアでは一般向けには提供していません。個別のシステム・インテグレーションで対応します)
4:多彩な曲調のスタイル
「スタイル」を選択するだけで、音楽や作曲の知識が無くても簡単に様々なジャンルの音楽を作れます。数10種類のスタイルが組み込まれており、ジャズ風、トロピカル風、ヒーリング音楽風、室内楽風、宗教音楽風など、一つの動画から驚くほど多様な音楽が作られます。
5: mp4ファイルとしてYouTubeなどに公開
生成した音楽は、簡単な操作で元の動画とミックスしてmp4ファイルとして保存することができますので、YouTubeやVimeoなどの動画共有サイトやFacebookやTwitterなどのSNSに投稿が簡単になります。
【今後の展望】
現在のところ、本ソフトウェアは録画済みの動画ファイルにのみ対応しています。