タグ RVC-beta が登録されている動画 : 172 件中 33 - 64 件目
種類:
- タグ
- キーワード
対象:
【RVC式人力風】ハルニ / カーヴェ【原神】
カーヴェさん実装おめでとうございます(素振り)
使用楽曲:ハルニ / 煮ル果実 様(sm42012424)
この動画はゲーム内音声と声質変換AI「RVC」とNEUTRINOを使用したファンメイド作品です。動画内敬称略。
何かあればTwitterまで⇛@zesei_
【音声AI】蘭子っぽい声でRed Rose Evangel
歌声のみを教材にしてみた
蘭子の声で聴きたかったので感慨深い
変換後のボーカルにディレイをかけてみた
AIを使って変態糞土方を吹き替えてもらった2.RVC
再度初投稿です
RVC-betaを使用しています
使用した学習用のファイルは前回の四分の一ほどですがクオリティは遜色なく感じます
#1:19の「しばらくやりまくってから~」以降はかなり高い精度で変換してくれていますね
sm42103731←前回
RVC webUIのDLはここ→https://huggingface.co/lj1995/VoiceConversionWebUI/tree/main
【RVC】Near to You【多田李衣菜】
RVCを使って李衣菜にNear to Youを歌ってもらいました。
原曲のアカペラ音源をそのまま変換せず、NEUTRINOを経由しました。
SEVENを軸にして、上手く変換できなかった所は、メロウ、きりたん、めたんから変換しました。
RVCでモデルを3つ生成し、それぞれで変換して、1フレーズごとに李衣菜に1番近い物を使用しています。
呼吸音と最初の「イェーイ」は後付けです。
語尾にSEVENの癖が強く残っています。次に作るときは、フレーズの終わりを長めにとって、削る事で癖が消せるか試してみます。
【学習元】
・李衣菜のソロ曲のアカペラ 約19分 300ファイル
(ØωØerソロ、Arroehead,JttFソロ、ススメオトメソロ、ラブデスソロ、Sparkling Girlの途中まで)
・李衣菜のデレステのカードセリフ 約28分 300ファイル(N~JttFの途中まで、プロデュースノートの音源)
・アカペラとカードセリフ 約3時間 2394ファイル
(N~王子りーな(現状全部)、ソロ音源16曲、ユニット曲、デレパCDのソロパート)
設定は全てデフォルトの20エポック、バッチサイズ4、歌声「可」を使用しています。
アカペラの作製には歌声りっぷ、Spleeter(GUI),Demucsを利用しています。
音きりすでアカペラから雑音を消しています。
colabの無料枠1回で学習が終了しました。
学習元を多くしても、学習が長くなるだけであまり精度は上がりませんでした。
有料枠でエポック数を増やしてもあまり精度は上がりませんでした。
バッチサイズを上げて、エポック数を下げるのは、精度が下がりました。
【NEUTRINO】
完璧なアカペラが作れない、原曲のソロ音源を持ってない(存在する?)、そのまま変換するのは創作感が薄い等の理由でNEUTRINOで出力したアカペラから変換しています。
NEUTRINOの楽譜はUTAUで作成し、MuseScoreで歌詞を入れました。
李衣菜×Near to Youでは、SEVENからの変換が、1番李衣菜に近くなりました。
↓他のモデルから変換した感想
・きりたん:「きりたん感」が強く残る。他のモデルと比べて聞きなじみありすぎて違和感が強い。
・メロウ:バラード向き?で李衣菜にもNear to Youにも向かない。Cuや落ち着いたCoに合いそう。
・めたん:機械感が強い。
・ずん子:ウィスパー声?で李衣菜には合わない。ほたるとかに合いそう。
・イタコ:癖が強すぎる。声優が同じ可奈でも厳しそう。
【RVC】過純性ブリーチ【多田李衣菜】
RVCで李衣菜に樹里の過純性ブリーチを歌ってもらいました。
デレの担当×シャニの担当です。
担当と言えるほどシャニマスやってないけど……
【学習元データセット】
李衣菜のソロ音源17曲、ユニット曲11曲のソロパート、デレパCD10曲の瑠璃子さんのソロパートから、
アカペラ抽出を行い、2~10秒程度に分割し、約300ファイルごとに1つのデータセットとする
1:300ファイル 約19分
2:300ファイル 約15分
3:370ファイル 約19分
【学習モデル】
それぞれのモデルで変換を行い、1フレーズごとに最も李衣菜に近いものを選択
20エポック、バッチサイズ4、歌声(f0?)可
A:1を学習
B:2を学習
C:3を学習
D:Aに2を追加学習
E:Dに3を追加学習
【変換元】
SEVEN(NEUTRINO)
UTAUで耳コピしMIDI出力、MuseScoreで歌詞入れ、NEUTRINOで歌声出力
【加工】
VocalShifterで各部の音量調節
REPAERでReaDelayとReaCompをかける
「スタート」と「スタンバイ」はどうしても無理だった
「HEY」は無重力シャトルから
Songable feat. Cape
歌:ケープペンギン(RVC)
ハモリ:トキ(RVC)
ボーカルミックス:Nectar 3 Plus
マスタリング:Ozone 10 Advanced
元歌:Mai(Synthesizer V)
元ハモリ:花隈千冬(Synthesizer V)
本家様→[sm41487334]
参考ust→[sm41557399]
今まで投稿した動画→[mylist/57201706]
本日の放送の様子(2023-07-06)
こんなかんじで不定期で雑談生配信やってるので、見かけたら遊びに来てみてください(*>_<*)
キタのすみか
キタちゃんに青のすみかを歌ってもらいました。
天上天下唯我独尊のシーンいいよね
v2 になってちょっと精度上がったかな
ずとまよの「ミラーチューン」歌ってみたよ!
「お勉強しといてよ」のコメントが嬉しくて、「ミラーチューン」も歌ってしまいました!
ボイチェンRVCなので、声が出てないところもありますが、生暖かく見てもらえると嬉しいです(> <)
[MMD] 未完成の歴史 (AIカバー - 結月おとぎさん)
ツイキャスで普段お世話になっている、結月おとぎさんのAIボイスを作って、デレマス曲「未完成の歴史」のカバーを作ってみました!
(AI音声作成につき、ご本人様のご了承を得ております。)
結月おとぎさん:
http://twitter.com/yuizuki_1019
http://twitcasting.tv/yuizuki_1019
ボカロ & UTAU制作マイリスト - mylist/58707576
今まで作ったMMD動画 - mylist/37143453
お借りした素材:
キャラクター(結月おとぎさん、MMD : S.Aikawa)
星空パーティドレス(クレイスさん) - http://crais.booth.pm/items/3595474
モーション(Mr. Kiwiiさん) - http://www.youtube.com/watch?v=6Jk73vVhNj0
天文時計ステージ(yudukiさん) - im4940485
球体星図(yudukiさん) - im3181028
PowerShaderエフェクト(角砂糖さん) - sm32258872
ExellentShadowエフェクト(そぼろさん) - sm19123817
AutoLuminous(そぼろさん) - sm16087751
SvDOFエフェクト(そぼろさん)
WorkingFloorXエフェクト(針金Pさん)
「ためいきのスターライトファイアー」歌ってみたよ
OVAアニメ「RANCE」OPテーマ 須藤まゆみさんの「ためいきのスターライトファイア」を歌ってみました。
ハル@まったり さんの、こちらの動画をに使わせて貰いました。
https://www.nicovideo.jp/watch/sm5517405
ロマンスの堂主様 @海灯祭2023【人力+AI】
海灯祭を祝して!!(激遅)
おまけの歌唱部のみ、ゲーム内音声を学習させたRVC(AIボイチェン)を使用しています。
やっべぇ技術なので、動画に使うのはこれが最初で最後だと思います。
ーーーーーーーーーーーーーーーーーーーーー
元ネタ様→sm40683783
モーション制作者様→sm40716229
ーーーーーーーーーーーーーーーーーーーーー
「Super Love Lotion 」を歌ってみたよ♪
リクエストがあったので、ときめきトゥナイトのED「Super Love Lotion 」を歌ってみました。
EDの映像可愛くて大好きになりました(ӦvӦ。)
佐々木道誉と骨皮道賢 さんのこちらの映像をお借りしました
https://www.nicovideo.jp/watch/sm34115038
「ハレ晴レユカイ」を歌ってみたよ♪
涼宮ハルヒの憂鬱のED「ハレ晴レユカイ」を歌ってみたよ❤(ӦvӦ。)
ハルヒと長門ちゃんめっちゃ好きです✨
梨缶さんのコチラの動画をお借りしました
https://www.nicovideo.jp/watch/sm2621549
【リゼ・ヘルエスタ】Squall【AI cover】
この動画はRVCを使ったAIカバー動画です。苦手な方はブラウザバックをお奨めします。
数秒の比較
個人用の比較動画なので動画上限切迫したら消す
①本家をボーカル抽出したもの
②録音を変換し切り貼りしたもの
間違いなく①が上手いけど、キャラクターイメージ追及すると②となるので
皆さんもRVCで二次する時はとりあえず歌って変換してみてね
おまけで人力も挑戦したけどガビガビ!無かったことにしてください
【補足】
紛らわしかったかも
画面の数字は作業時間でAIの学習時間じゃないです。
歌唱力に大きく影響するのは変換前の音源の歌唱力です。
AI学習量で変化するのは出力後の音声の質だと思います。
動画には無いですけど、10分間と一晩の学習で比較したところ
後者が学習元の背景にある雑音を練りこんでる感じがしました。(あくまでも体感)
学習元の音声がクリアであればRVCは少量の学習でも問題なさそうです。
何事も適度なのに従い、適量を探るのがよいでしょう。
【DQ10】人マニア【AIナラジア】
ツイッ…Xで募集した「ナラジアに合いそうな曲」で教えていただいた曲でした。
楽曲 人マニア/原口沙輔 sm42585649
UST ねこやろー様
このページで利用している株式会社スクウェア・エニックスを代表とする共同著作者が権利を所有する画像の転載・配布は禁止いたします。
(C) ARMOR PROJECT/BIRD STUDIO/SQUARE ENIX All Rights Reserved.
【AI歌わせてみた】マリーゴールド/本田未央【アイマス】
今話題のAIを使って本田未央に歌ってもらいました。
イラストもAIなので、動画を作るのが簡単になりました。
細かい個所を人力ボカロで均せばよりよくなりそうです。
カラオケ音源 ⇒ https://www.youtube.com/watch?v=zduP-6somBM
【RVC-Beta】WANDS (AI Cover) - 世界が終わるまでは [第3期Ver.]
AI 和久二郎さんに歌っていただきやした
【人力ウマ娘MAD】笑っていてほしいから【ダイワスカーレット】
ダイワメジャー号追悼作品
他の人力ウマ娘はこちら!:series/411342
*本動画にはAI音声、AI画像を利用しております。
機械音声の苦手な方はブラウザバックをお願いします。
【使用楽曲】
■笑っていてほしいから(牧柵チャンネルオリジナル)
お知らせ!
ブログサイト立ち上げました!
動画の最新情報や素材配布、ウマ娘COCのシナリオ紹介、ウミガメのスープ問題集などをお届けする予定なので遊びに来てね!
「牧柵チャンネルのおもちゃ箱」
▶ https://bokusaku4.wordpress.com/
P.S.
普段はウマ娘×クトゥルフ神話TRPG動画を投稿しています!
GMはゴルシちゃんです
こちらも見てね!
シーズン1(完結済み):sm40811957
ウミガメのスープ動画も作ってます!:series/488451
新型リアルタイムボイチェンRVCでずんだもん
リアルタイムボイスチェンジャーのRetrieval-based-Voice-Conversion + VC Clientを試しただけです。
前半はepoch 30、後半はepoch 60でピッチ推定はharvestを使っています
RVC https://github.com/liujing04/Retrieval-based-Voice-Conversion-WebUI
VC Client https://github.com/w-okada/voice-changer
SSS合同会社 ITAコーパスマルチモーダルデータベース ずんだもん https://zunko.jp/multimodal_dev/login.php
坂本アヒル ずんだもん https://seiga.nicovideo.jp/seiga/im10788496
【音声AI】胡桃っぽい声のGod knows...
RVCというやつらしい
何も分からないけど書いてある通りにやったらできた
参考
https://ddpn08.fanbox.cc/posts/5709928
https://ddpn08.fanbox.cc/posts/5717350
教材は10分程度のwav
2080s(VRAM8GB)ではBatch size16でフリーズ、12で動きました
ちゃんとやったらもっと似そう
ノイズは土台にするボーカルオンリー音声の抽出が不完全な事の方にも原因がありそう
AI加藤純一が歌うアメイジンググレイス
RVCを使って加藤さんにアメイジンググレイスを歌わせる動画です。
加藤さんすみません。神々の詩は私の現在の技術では無理でした。
