広告枠を募集中 ご相談ください

Voicify AI(Jammable)でクリーンなボーカル音源と音声前処理ツールを使ってカスタムAI音声モデルをトレーニングする方法

365Finds Editorial
Wiki 記事 11,430 本収録

あなたの AI で 365 Wiki を使う

下のプロンプトをコピーして、普段使っている AI に貼り付け、そのまま質問してください。

完全版 Skill をダウンロード

まずはプロンプトでお試しください。よく使う場合は完全版 365Wiki Skill をインストールすると、毎回貼り付ける必要がありません。普段使う AI がなければ、Gemini や Microsoft Copilot のウェブ版でも使えます。

オリジナルのAIカバー楽曲制作やバーチャルキャラクターの音声合成、パーソナルなナレーション作成を目指すクリエイターにとって、Jammable(旧名称:Voicify AI)は最も手軽にカスタムAI音声モデルを構築できるクラウドプラットフォームです。高価なGPUの用意やPython環境の構築は不要で、ブラウザ上からわずか数分でトレーニングを完了できます。ただし、Jammableの完全自動化されたクラウド環境は、低品質な入力音声を自動修復してくれるわけではありません。伴奏の残り音や部屋の反響(リバーブ)、環境ノイズが混ざった音源をそのままアップロードすると、ニューラルネットワークがそれらの不純物を声の固有特徴として学習してしまい、金属的なノイズや機械的な歪み、ピッチの不安定化を引き起こします。

スタジオ品質のクリアで自然なカスタムAI音声モデルを作成するには、専門ツールによるボーカル分離、波形編集ソフトによる徹底的なノイズ除去とリバーブ除去、そしてJammableへの正しいデプロイという一連の前処理ワークフローが不可欠です。


1. 事前準備と料金プランの選定

音声の前処理を始める前に、自身のアカウントがJammableの音声モデルトレーニング権限を満たしているか確認する必要があります。


2. ステップ1:クリーンなボーカルサンプルの前処理ワークフロー

Jammableの音声変換技術は、トレーニング用音声に含まれるすべての音響特徴を学習します。ドラムの音漏れやリバーブの残響、コーラスの重なりが存在すると、モデルが歌唱や発話を行うたびにそれらの異音が再生されてしまいます。アップロード前に以下の3つの前処理を必ず実行してください。

フェーズA:元音源の選定と収録時間の管理

フェーズB:ボーカル分離とドライ化(Ultimate Vocal Remover / UVR5)

既存の楽曲や動画、ポッドキャストからボーカルを抽出する場合、一般的な簡易Webツールでは高音域の位相崩れが発生しがちです。クリエイターの間でデファクトスタンダードとなっている無料のオープンソースツール**Ultimate Vocal Remover(UVR5)**を使用します。

  1. 高精度ボーカル分離:UVR5に音源を読み込み、処理エンジンにMDX-Net(Kim Vocal 1やUVR-MDX-NET Mainなど)を指定して分離を実行します。伴奏やドラム、ベースを徹底的に除去し、ボーカルのみを抽出します。
  2. リバーブとエコーの完全除去(De-Echo / De-Reverb):AI音声モデルのトレーニングには、エフェクトが一切かかっていない「完全なドライ音」が必要です。元の録音に部屋鳴りやリバーブ成分が含まれている場合は、UVR5のVR ArchitectureからDe-Echo: NormalまたはDe-Echo / De-Reverbモデルを適用して残響を完全に消去します。リバーブが残ったまま学習させると、生成されるすべての音声が風呂場で歌っているようなこもった音になってしまいます。

フェーズC:Audacityによる波形編集・無音カット・ノーマライズ

ドライ化したボーカル音源を、無料の音声編集ソフトAudacity(またはReaper、Adobe AuditionなどのDAW)に読み込み、最終調整を行います。

  1. 低域ノイズのカット:ハイパスフィルター(High-pass Filter)を適用し、カットオフ周波数70〜80Hz(減衰スロープ12dB/octave)で空調ノイズやマイクスタンドの振動音、吹かれ(ポップノイズ)を除去します。
  2. 無音区間の自動短縮:Audacityのメニューからエフェクト > 無音の切り詰め(Truncate Silence)を選択します。閾値を-40dBに設定し、0.5秒以上続く無音部分を0.2秒程度に短縮します。AIは発話・歌唱のフォルマントを学習するため、無駄な空白時間を削ることで学習効率が劇的に向上します。
  3. 手動による不要音の削除:波形を拡大し、過度な息継ぎ(ブレス音)、咳払い、笑い声、唇や舌の開閉時に生じるリップノイズ(クリック音)を手動でカットします。
  4. 音量の均一化(ノーマライズ):データセット全体のピークレベルを-1.0dB〜-2.0dB Peakにノーマライズし、音割れを防ぎつつ均一な音圧を確保します。
  5. ファイル書き出し:非圧縮のWAV形式(16-bitまたは24-bit PCM、サンプリングレート44.1kHzまたは48kHz)で書き出します。JammableはMP3やM4Aにも対応していますが、非可逆圧縮による音質劣化を避けるためWAVの使用を推奨します。

3. ステップ2:Jammable上でのカスタムモデルトレーニング

前処理を施したデータセットが準備できたら、Jammable上でモデルの生成を実行します。

  1. トレーニング画面へアクセス:CreatorまたはPowerプランに加入したアカウントでログインし、https://www.jammable.com/trainにアクセスします(またはヘッダーのCreate > Train a Voiceをクリック)。
  2. 音声ファイルのアップロード:クリーンアップしたWAVまたはMP3ファイルをアップロード枠内にドラッグ&ドロップします。
  3. データセット時間の確認:「DATASET DURATION」メーターを確認し、インジケーターがMINを超え、「RECOMMENDED」(推奨)のゾーンに収まっていることを確かめます。
  4. モデル情報と公開設定:
    • Voice Name:判別しやすいモデル名を入力します。
    • Avatar Image:モデルを識別するためのアイコン画像やキャラクターアートを登録します。
    • Privacy(公開設定):**Private(非公開)またはPublic(公開)**を選択します。自分専用の商用ナレーションやクローンボイスとして保護したい場合は必ずPrivateを選択してください。Publicを選ぶとJammableの全ユーザーに公開されます。
  5. トレーニングの開始:Next Stageをクリックして確定します。Jammableのクラウドアセットが音響特徴の抽出とピッチインデックスの構築を開始します。通常、2〜10分程度でトレーニングが完了します。

4. ステップ3:モデルのテスト・ピッチ調整・カバー曲の生成

トレーニングが完了すると、マイライブラリ内にカスタムモデルが追加されます。

  1. テストカバーの生成:https://www.jammable.com/ai-coverを開き、トレーニングしたカスタムモデルを選択します。
  2. 音源の指定:カバーさせたい楽曲ファイルをアップロードするか、登録楽曲を選択します。Jammableが自動でボーカルを検出し、作成したカスタム音声モデルの声色へと置き換えて伴奏とミックスします。
  3. ピッチシフト(Pitch Shift)の調整:
    • 元の歌声と作成したモデルの音域が大きく異なる場合(例:女性ボーカルの曲を男性低音モデルで歌わせる場合)、ピッチ設定を**-12半音**(1オクターブ下)に設定します。
    • 逆に男性ボーカルの曲を女性モデルで歌わせる場合は、+12半音(1オクターブ上)にシフトします。異性間カバーでオクターブ調整を行わないと、不自然な高音の引きつれやかすれ声の原因になります。
  4. 音声読み上げ(TTS)での活用:Text-to-Speech画面にテキストを入力することで、YouTubeの動画解説、ショート動画のナレーション、ゲーム用セリフなどにカスタム音声を活用できます。

5. 技術比較:Jammableクラウド環境 vs ローカル環境(RVC v2)

比較項目Jammable (Voicify AI) クラウドローカル環境(RVC v2 / Applio)
導入の難易度ブラウザ完結、設定不要で即日利用可能高い(Python環境、CUDA、Gitのセットアップが必要)
ハードウェア要件不要(低スペックPCやスマートフォンでも動作)高性能なNVIDIA製GPUが必須(VRAM 6GB以上推奨)
トレーニング所要時間2〜10分程度GPU性能に依存(15〜45分程度)
パラメータの調整完全自動化(Epoch数やバッチサイズの手動変更不可)学習輪数(Epoch)、ピッチ抽出器(Crepe、Harvest等)の自由設定が可能
ワークフローの統合伴奏分離、デュエット生成、動画書き出しがワンストップ分離、推論、DAWでの再ミックスを手動で行う必要がある
利用コストCreatorプラン(初月9.99ドル、以降24.99ドル/月)ソフトウェアは無料だが、PCハードウェア導入コストが必要

6. クリエイター向けの実践的なアドバイス

参考文献