TuneFlow - Intelligent Music Making Platform, Powered by AI

スタイルとテンポを渡すと、伴奏付きのメロディが返る。ふつうは数小節で、その先へ伸ばせる。雰囲気はあるが動機がないときに、いちばん速い入り口になる。出力はMIDIなので、生成し直して良いテイクを祈るのではなく、音を一つずつ書き換えられる。

タイムラインに空のドラムクリップを置き、ビートのスタイルを選ぶと、その区間に合うパターンで埋まる。効いてくるのはその後だ。打点は普通のMIDIグリッドに乗るので、スネアをずらすのもフィルを削るのも手作業でできる。曲を分かっているドラマーの代わりにはならないが、空のクリップを20分眺める問題は片付く。

声のクローンは、用意された声のモデルを選ぶか、サンプルから作って、書いたメロディを歌わせる機能だ。編曲を判断できる程度の精度のガイドボーカルや、録る時間のないコーラスの積み上げに向く。権利と同意は自分の責任になる。持っていない声をクローンするのは、ほとんどの国でろくなことにならない。

テーマや雰囲気、走り書きのアイデアから、Aメロとサビを書き出す。初稿として扱うのが正しい。きれいに韻を踏んだラジオ向けの行になりやすく、曲を自分のものにする修正は結局こちらの手で入れることになる。

分離ツールはミックスされたトラックを、ボーカル、ドラム、ベース、残りの楽器に分ける。アカペラが欲しいとき、昔のプロジェクトからループを拾いたいとき、静かな伴奏が要るときに手が伸びる機能だ。品質は元音源しだいで、リバーブの多い濃いミックスはドライな音源より滲む。

トラックに向かって歌うか演奏すると、TuneFlowがそれをMIDIノートに変換する。クオンタイズも移調も、シンセに送るのも自由だ。単旋律はよく通る。コードや速いパッセージは荒れて戻るので、直す時間を見込んでおく。

TuneFlowにはプラグインの仕組みがあり、PythonとTypeScriptのSDKがGitHubで公開されている。ライセンスはMITだ。自分のモデルやアルゴリズムを包んでDAWに読み込み、普通のトラックと並べて試聴できる。研究チームにとってはここが本題で、モデルがベンチマークではなく実際のセッションの前に立つ。