深層学習を活用したAIオーディオ・プラグイン「Neutone」がβ版をリリース

音楽制作においてこれまでアーティストやクリエーターにとっては敷居の高かったAIの利用を、汎用的なプラグインを通じて、簡単に創作プロセスに導入することができる。また、AIの研究者やエンジニアは、本プラットフォームを通じて、新規に開発されたモデルを、簡単に音楽制作者と共有することができるようになる。

これまでAIモデルを利用する上ではPythonプログラミングの習得やGPUマシンなどの環境構築が不可欠だった。NeutoneはVST及びAudio Unit形式のプラグインとして開発され、汎用的なマシン上で動作するAbleton LiveやLogicなどのDAW上でリアルタイムに動作させることができる。すでに多数のAI音声変換モデルが本プラグイン向けに発表されており、プラグイン内のレポジトリーよりダウンロードできる。

以下は現在利用可能なモデルの一部の説明：
・RAVE.amen - 入力音をAmen Breakに変換
・RAVE.drumkit - 入力音をドラムキットに変換
・RAVE.evoice 及び RAVE.jvoice - 入力音を声に変換
・RAVE.NASA - 入力音を月面宇宙飛行士との交信風に変換
・RAVE.kora - 入力音をkora (アフリカのハープ）に変換
・RAVE.violin - 入力音をバイオリンに変換
・convld-overdrive.random - 深層学習を使ったオーバードライブ
・temporalconv.reverb - 深層学習を使ったリバーブ

これらのモデルはまだ実験的な段階のものもあるが、今後の開発によって、さらに量・質ともにアップデートされていく予定とのことだ。

また、AI研究者・開発者は、自身の開発したモデルをNeutoneプラットフォーム上で公開することが可能だ。同社の提供するNeutoneSDKでモデルをラップすることにより、簡単にNeutoneプラグインに対応させることができる。