音声AIの情報を纏めるWikiです

×

RVC公式

・Retrieval-based-Voice-Conversion-WebUI(公式)
https://github.com/RVC-Project/Retrieval-based-Voi...
・事前学習モデル
lj1995/VoiceConversionWebUI at main -
https://huggingface.co/lj1995/VoiceConversionWebUI...
・公式のbilibiliチャンネル。解説動画も上がっている。
https://space.bilibili.com/5760446

学習ガイド

  • 英語圏のガイド(下記AI HUBのdiscordサーバーのもの?)
https://docs.google.com/document/d/13ebnzmeEBc6uzY...
  • 上の和訳
https://docs.google.com/document/d/1heKuaedmHNBTXv...
これらはMangio-forkを前提に歌(AIカバー)前提書かれていることもあり、どこまで信じるかは取捨選択の必要がありそうである。


ConentVec・jp-HuBERT10epoch事前学習モデル
https://www.kaggle.com/datasets/nadare/rvc-webui-t...

Discordサーバー

  • なんJRVC部: なんJRVC部スレ有志のdiscord
  • AI声づくり技術研究会: 日本語のAI音声生成のサーバー。もともと画像生成AIのdiscordサーバーからの分派という形でできたもの。
  • AI HUB: 英語圏のでかいところで、RVCのモデルの共有や情報共有されている
  • RVC Developers: RVC公式のdiscordサーバー

ツール

rvc_scripts

Tampermonkeyスクリプト。本体に手を入れないのでバージョンアップに強い。
7/23現在、RVCのV2には対応していない模様で、更新も止まっているため少し古い?

https://github.com/hetima/rvc_scripts
【rvc_jp_translate】
RVCを日本語化する。4/12にRVCが多言語対応したため不要かも。

【rvc_tweaks】
""で囲まれたファイルパスをペーストすると自動的に"を除去してくれる。

rvc-tts-webui

テキストを入力するとRVCモデルの声で再生してくれるやつ(text-to-speech)
https://github.com/litagin02/rvc-tts-webui
ddPn08版未対応

データセット作成ツール

・Ultimate Vocal Remover
ボーカル除去、抽出する
https://ultimatevocalremover.com/
解説はこちら
AIボーカル除去・抽出ソフト 「Ultimate Vocal Remover」の使い方と最良設定について

UltimateVocalRemoverで音楽や、動画のBGMを消す方法
UVR5で高精度なBGM除去を行う方法


・Voice_Separation_and_Selection
音声を発話ごとに分割し、適切な長さに分割する
https://github.com/teftef6220/Voice_Separation_and...

・sound-helper
音声ファイルを無音部分で分割する
https://github.com/aiczk/sound-helper

Aivis Dataset
https://github.com/litagin02/Aivis-Dataset
音声ファイルからノイズ除去・発話単位で切り出し・セリフ書き起こしできる

このページへのコメント

discordでいろいろ伺いたいと持ったのですが招待コードが切れているのかわかりませんが『無効なコードです』になって参加できません。

現状、進めない点が1つあって解決したいのですが...

0
Posted by SYO 2024年01月15日(月) 23:50:18 返信

事前学習モデルのページ消えてます

0
Posted by 名無し(ID:sEBrjUoYkg) 2023年04月20日(木) 13:25:35 返信

コメントをかく


「http://」を含む投稿は禁止されています。

利用規約をご確認のうえご記入下さい

どなたでも編集できます

広告募集中