【RVC】Near to You【多田李衣菜】

RVCを使って李衣菜にNear to Youを歌ってもらいました。原曲のアカペラ音源をそのまま変換せず、NEUTRINOを経由しました。SEVENを軸にして、上手く変換できなかった所は、メロウ、きりたん、めたんから変換しました。RVCでモデルを3つ生成し、それぞれで変換して、1フレーズごとに李衣菜に1番近い物を使用しています。呼吸音と最初の「イェーイ」は後付けです。語尾にSEVENの癖が強く残っています。次に作るときは、フレーズの終わりを長めにとって、削る事で癖が消せるか試してみます。【学習元】・李衣菜のソロ曲のアカペラ 約19分 300ファイル(ØωØerソロ、Arroehead,JttFソロ、ススメオトメソロ、ラブデスソロ、Sparkling Girlの途中まで)・李衣菜のデレステのカードセリフ 約28分 300ファイル(N～JttFの途中まで、プロデュースノートの音源) ・アカペラとカードセリフ 約3時間 2394ファイル(N～王子りーな(現状全部)、ソロ音源16曲、ユニット曲、デレパCDのソロパート)設定は全てデフォルトの20エポック、バッチサイズ4、歌声「可」を使用しています。アカペラの作製には歌声りっぷ、Spleeter(GUI),Demucsを利用しています。音きりすでアカペラから雑音を消しています。colabの無料枠1回で学習が終了しました。学習元を多くしても、学習が長くなるだけであまり精度は上がりませんでした。有料枠でエポック数を増やしてもあまり精度は上がりませんでした。バッチサイズを上げて、エポック数を下げるのは、精度が下がりました。【NEUTRINO】完璧なアカペラが作れない、原曲のソロ音源を持ってない(存在する？)、そのまま変換するのは創作感が薄い等の理由でNEUTRINOで出力したアカペラから変換しています。NEUTRINOの楽譜はUTAUで作成し、MuseScoreで歌詞を入れました。李衣菜×Near to Youでは、SEVENからの変換が、1番李衣菜に近くなりました。↓他のモデルから変換した感想・きりたん：「きりたん感」が強く残る。他のモデルと比べて聞きなじみありすぎて違和感が強い。・メロウ：バラード向き？で李衣菜にもNear to Youにも向かない。Cuや落ち着いたCoに合いそう。・めたん：機械感が強い。・ずん子：ウィスパー声？で李衣菜には合わない。ほたるとかに合いそう。・イタコ：癖が強すぎる。声優が同じ可奈でも厳しそう。

http://www.nicovideo.jp/watch/sm42161282