AIで歌ってみたい その3 RVC WebUI 完結編
躓き続けているAIで歌わせる会、完結編です。
もう正直全部これでいいじゃん!という感じですが、ここに至るまでに勉強が必要だったと思うことにします。
さて、その画期的な方法、RVC web UI ですが、こちら実は様々なバージョンがあります。
大元、「本家バージョン」の使い方はこちら
かんたん!本家版WebUI「RVC-beta」をWindowsに導入して学習を行うまでの手順解説 https://economylife.net/rvc-beta-windows-train/
そしてこれをより簡単に、日本語対応にしてくださった方がこちらです
RVCのWebUIを1から作り直した話|だだっこぱんだ|pixivFANBOX https://ddpn08.fanbox.cc/posts/5709928
これらはどちらも使い方は同じですので、作り直してくださった方の記事の通りにすれば実装可能です。
が、しかし、一つだけ問題があります。
このプログラム、相当つよつよなPC、GPUでなくては完遂できないのです。
具体的に言いますと、
OS : windows10 Home 64bit
CPU : Intel(R) Core(TM) i9-9900K CPU @ 3.60GHz 3.60 GHz
RAM : 16GB (仮想は12GB)
GPU : NAVIDIA GeForce RTX 2080 Ti
おそらくGPUのパワーが大いに関係していると思うのですが、成功している方々はRTX3000以上のようなので、少なくともそれぐらいのものが必要と考えられます。
しかも動かしている間、つまりトレーニング中はGPUを動かす仕事が出来ませんし、PCが激重の不安定で精神衛生的にもよくありません。
じゃあ、すごくいいPCのスペックじゃないと出来ないの…?
そんなことはありません!
それを解決してくれるのがGoogle Colabです!
そして、このRVC WebUIを Google Colabで使えるようにしてくださった方がこちら!
【ddPn08版】日本人のためのRVC WebUIの使い方 – AIボイスチェンジャー入門
https://child-programmer.com/ai-voice-change-tutorial-ddpn/#_038_RVC_WebUI
この方の記事のとおりに勧めていくとあら簡単!
学習データができるではありませんか!
そして出来上がったものがこちらです
呂律の危うさ、若干のロボ感がありますが、これは私の声です。すばらしい…!
なお、ここに至るまでに結構な手間がかかります。
トレーニングだけでも大変だったのに、まだあるのー!?
と思われるでしょうが、データさえ出来てしまえば、それをチェンジさせる元の音声ファイルを作るだけです。
この「だけ」が大変でした。
一般的に、こういったボイスチェンジャーで歌わせるには、アカペラの音声ファイルを用意する必要があるのですが、これがまあ手間です。
多くの場合、AIシンガーに歌わせてそれをチェンジさせる、という方法が一番安定するようでした。
さきほどの動画は無理やりボーカル抜き出した音声にボイチェンをかけた状態なので、ハモリが入っていたり、インストが残っていたりする部分で音が不安定になります。
完全なアカペラがあれば良いですが、まあ大体そんなものはないので、自作する必要があります。
そこでAIシンガーが必要になるのですが、このAIシンガーに歌わせるのがたいへん大変でした。
いまだにうまく出来ないので、これらの方法は他の方々にお任せします。
アカペラのWAVファイルさえ出来てしまえば、あとは簡単ですからね。
ひとまずAIで歌う!という野望はまあまあ達成出来た気がします。
いずれこの技術を使った動画を上げていきますので、チャンネル登録をしてお待ち下さい!
コメント
コメントを投稿