iZotope Photon、stems分離をクラウドではなくGPUで処理

iZotopeは、stems分離とオーディオクリーンアップのツールPhotonを発表した。ファイルをサーバーにアップロードせず、コンピューターのGPU上で処理する。12個のカスタムトレーニング済み機械学習モデルを搭載し、iZotopeと親会社Boris FXにとって初の共同開発製品となる。

モデルはDemixとDenoiseの2グループに分かれる。Demixは分離を担当する。音楽は4つのstemsに分かれ、ドラムはキック、スネア、ハイハット、タム、シンバルの5つに分解される。Voice Separatorは録音中の最大6人の声を検出し、それぞれ個別のstemsとして出力する。別途用意されたVoiceアルゴリズムは、音楽からボーカルを抜き出し、インストゥルメンタルやアカペラを手早く作るためのもの。Cinemaモデルは、動画または音声ファイルをダイアログ、音楽、効果音、それ以外の音に分ける。

Denoiseには3つのモデルがある。Voice Restoreはスピーチの品質を高め、ノイズにも対処する。IndoorとIndoor Noisyは室内のノイズやリバーブを扱う。Outdoor、Outdoor Traffic、Outdoor Windは、街中のノイズや強風を狙ったモデルだ。

PhotonはスタンドアロンアプリとARA2プラグインの両方で提供され、DAW内でstemsの調整やバックグラウンドノイズの補正ができる。iZotopeによると、複数のモデルを同時に走らせ、待ち時間なしで切り替えることも可能だという。対応ホストは、MacとWindowsではPro Tools、REAPER、Cubase、Windowsではさらに SequoiaとSamplitude。プレビュー機能は長いクリップでの作業を効率化する狙いで、Model Managerを使えば、再インストールなしで新規・更新モデルをダウンロードできる。

読み込めるのはWAV、MP3、FLAC、AIFF、AAC、M4A、MP4、MKV、MOV、MXF、MPGのファイル。動画ではオーディオトラックを読み込み、処理後の音声を書き戻すこともできる。書き出し形式はWAV、FLAC、MP3、または元のビデオストリームを保持した動画。

Photonは現在発売中で、Apple Silicon搭載Macと、Windows 10以降のマシンに対応する。価格は$349。12月7日まで実施中のサイバーセールでは$259。