このオープンソースのAIツールは、すぐに任意の曲のボーカルを分離します

別々のボーカルや楽器に曲を分割することは、常に生産者、Dj、および分離されたオー それを行う方法はたくさんありますが、プロセスは時間がかかり、結果が不完全なことがよくあります。 新しいオープンソースのAIツールは、このトリッキーなタスクをより速く、より簡単にします。P>

ソフトウェアはSpleeterと呼ばれ、研究目的のために音楽ストリーミングサービスDeezerによって開発されました。 昨日、同社はオープンソースパッケージとしてリリースし、誰もがダウンロードして使用できるようにGithubにコードを置いた。 ちょうどspleeterにオーディオファイルを供給し、それは茎として知られている二つ、四つ、または五つの別々のオーディオトラックに分割spleets。 結果は完璧ではありませんが、彼らは非常に使用可能であり、Spleeter自体は非常に高速です。 専用のGPU上で実行すると、リアルタイムよりも100倍高速に四つの茎にオーディオファイルを分割することができます。あなたは以下のDavid Bowieの”変更”に取り組んでいるソフトウェアの例を聞くことができます。

あなたは次のソフトウェアの例を聞くことができま ボーカルのみとバンドのみの茎の両方でいくつかのオーディオアーティファクトがありますが、全体的な結果は素晴らしいです。 ボウイがあなたのものではない場合は、愛と損失のその時代を超越したバラードのための別のSpleeterの例があります:”Scatman(Ski-Ba-Bop-Ba-Dop-Bop)。”

技術者のAndy Baioは、Spleeterについての優れたブログ記事を書いています。 Baioは、ソフトウェアによって生成された孤立したボーカルは、”ロボットのオートチューン感を得ることがありますが、ブリードの量は他のソリューションと比較して驚くほど低いです。”あなたはMarvin Gayeの上で実行されているSpleeterで以下のBaioによって生成された例を聞くことができます”私はGrapevineを通してそれを聞いた。”(ただし、Lil Nas X、Lizzo、Led Zeppelinなどの孤立したボーカルトラックを聞きたい場合は、元の投稿をクリックしてください。p>

Marvin Gaye–”I Heard It Through the Grapevine”

Marvin Gaye(Vocals Only)
Marvin Gaye(Music Only)

Baioは、Billy Joelの”We Didn’t”の歌詞を使って、Friendsテーマ曲(レンブラントの”I’ll Be There for You”)の不浄な組合で自分自身を実証しているため、マッシュアップを作成したい人にとっても非常に有用であると指摘している。火を始めろ”

このツールは非常に能力があるようですが、警告されます:あなたはそれを使用するには、いくつかの技術的な専門知識が必要になります。 PythonやGoogleのAI toolkit TensorFlow(Spleeterのトレーニングに使用された)などのソフトウェアで定期的に遊んでいない限り、すべてを起動して実行するには、いくつかのプログ また、よりアクセスしやすい視覚的なインターフェイスの代わりに、コマンドライン入力(非常に単純ですが)を使用して快適にする必要があります。Deezer氏は、この作業を自動化するために機械学習を使用したのはこれが初めてではなく、同社の成果は多くの以前の研究に基づいていると指摘してい Deezerのchief data and research officerであるAurelien Heraultは、電子メールでThe Vergeに話をして、同社は様々なジャンルにわたって分離されたボーカルを持つ20,000の音楽トラックでソフトウェアを訓練したと述べています。 この情報から、ソフトウェアはトラック自体を分離する方法を学びました。全体的に、Spleeterは、AIツールが創造的な作業の面倒な部分をより簡単にする方法のもう一つの素晴らしい例です。 現在、機械学習は、写真の背景を削除することから、古いビデオゲームのテクスチャをアップスケーリングすることまで、時間のかかるタスクの範囲を自動化するために使用されています。 そして、ますますこれらのツールは、AdobeのPhotoshopから滑走路MLのような新しい候補に、消費者のソフトウェアに組み込まれています。

Deezerは、Spleeterを消費者ツールに変える計画はないと言いますが、他の人は自分の仕事を取ってシンプルなインターフェイスを平手打ちすることができます。 明らかなアプリケーションは、ミックスに分離されたボーカルを統合するために探しているDjやプロデューサーのためのものである、または自作のカラ (このような活動は、最終的な製品の配布方法によっては、著作権法に準拠していない場合があります。)

Deezer自体は、ストリーミングサービスの改善に役立つ研究アプリケーションの範囲のためにSpleeterを使用しています。 「社内では、音楽の分類、転写、言語検出などの複雑な研究タスクの前処理ツールとして使用しています」とHerault氏は言います。または、もちろん、あなただけのより良いScatmanとグリップを取得するためにそれを使用することができます。

Ski-bi dibby dib yo da dub dub.

Related Posts

コメントを残す

メールアドレスが公開されることはありません。 * が付いている欄は必須項目です