Qosmo Music & Sound AI

Video2Music

ビデオtoミュージック

動画の雰囲気にピッタリ来るBGMやシーンの感情をうまく表現した楽曲を選曲するには幅広い音楽に関する知識を持っている必要がありますが、QosmoのVideo2Musicは動画をアップロードするだけで、瞬時に選曲候補を探してきてくれます。

Img2Sound

イメージtoサウンド

本製品は与えられた画像に対して最適な環境音または楽曲を見つけてきます。対応する画像の幅は広く、例えばGoogle Street Viewの任意の場所の写真などに対しても質の高いマッチを得ることができます。現バージョンにおいては入力は静止画に限られますが、今後のバージョンアップによって映像入力にも対応予定です。

Music Generation

音楽生成

本製品はジャンルや曲の特徴を指定することによって自動的に作曲を行い、音楽を生成することのできるシステムです。小節ごとに楽曲内容を設定でき、リアルタイムに変更を受け付けるため、生体反応や場の雰囲気などに合わせてきめ細かい操作を動的に行うことができます。

Timbre Transfer

音色変換

本製品はこれまで深層学習モデルでは難しいとされていたリアルタイムでの音生成技術を応用した音色変換を行います。人間の声をドラムやサックスなどの楽器音や他人の声に変換したり、リバーブやディストーションなどのエフェクト処理やその逆処理を行うことができます。これ迄にはあり得なかったような音表現の可能性を広げることができる注目の技術です。

Playlist Generation

自動選曲

本製品は、弊社のフラッグシッププロジェクトであるAI DJプロジェクトの発展とともにその精度を向上してきました。深層学習に音楽を「聞かせる」事によって、各曲の関連性を定量化し、DJの選曲ノウハウを自動化し、様々な音楽ライブラリーに応用することに成功しています。