タグ MMVC が登録されている動画 : 248 件中 225 - 248 件目
種類:
- タグ
- キーワード
対象:
【英語ボイス投稿祭】スーシー
のーと様主催の『英語ボイス投稿祭』参加作品です
告知動画 sm40596300
MMVCを利用しています
MMVCって何?って人はこの動画を見るべし
https://www.nicovideo.jp/watch/sm40415108
思い付きで作ってみたけど、案外美味しくならないね。
照り焼きチキンとかウナギとか天ぷらとか肉っ気の強いものを入れて、
バーベキューソースとかもっと強い味付けするほうがいいのかしら
見た目ほどのインパクトがない料理なのかSUSHIって?
This sushi is like my life,
beginning a lot of things, left undone,
and nobody loves you.
このスシはお前の人生そのものだ。お前はいつも失敗ばかりだ。
お前はいろんなことに手を付けるが、ひとつだってやり遂げられない。
誰もお前を愛さない。
(完)I'mずんだもん王への道講座_好きな声に即時ボイチェンを実行するまでの流れに関してだいたい0から説明していく予定【MMVC】(応用編_音街ウナ)【ソフトウェアトーク解説】
2023/05/11:現UI向け講座(v1.5,v1.3)をnoteに書いたのでコッチ見てください。各編ごとに記事があります。:https://note.com/pipo_lll/n/n948531a7750f
今度こそウナです。
※2022/09/12追記:VOICEROID2でMMVCになってますがMMVC利用規約基づきコレは『何か問題起きたら当動画投稿者(ピポッ)の責任である』リスクがあります。
正確にはVOICEROID、CeVIO、VOICEVOX等を用いた場合の話になります。
※音声準備とファイル配置のみで、他は九州そら編、ずんだもん編と同じです。
いいねボタンをよろしくお願いします(完結したので)
●説明
好きな声でリアルタイムボイスチェンジャーする
「MMVC」(v1.2.1.3)の、準備から実行までの流れを話していきます。
●導入等で困ったら下記Disocordコミュで質問すると良いかもしれません。
●話者
音街ウナ:MMVC(学習データはVOICEROID) 東北きりたん:VOICEROID
●使う物
MMVC_Trainer:https://github.com/isletennos/MMVC_Trainer
FlexibleRenamer:https://forest.watch.impress.co.jp/library/software/flexrenamer/
MMVCITA(MMVC向けITAコーパス文量リスト)_v101:https://drive.google.com/file/d/1WB-Aw11V7FLukifAaCQ546Y5tGhJIWiV/view?usp=sharing
●MMVC導入講座(I'mずんだもん王への道)シリーズ
https://www.nicovideo.jp/series/318700
MMVCv1.2.1.3
Copyright (c) 2021 Isle.Tennos
Released under the MIT license
https://opensource.org/licenses/mit-license.php
git:https://github.com/isletennos/MMVC_Trainer
community(discord):https://discord.gg/Kryuvf6aj6
Youtube:https://youtu.be/JDMlRz-PkSE
【MMVC】東北きりたんになりたいおじさんの音声変換テスト
(MMVC使ったので)初投稿です。
動画内でも言っている通り、あくまで「使ってみたよ」って動画です。変換例の最後の文章は怪文書みたいになってますが・・・喋る練習もしない人間が喋るとこんな感じになるぞってのと、変換精度を見るために「特に演技せず(飾らず)、普段通りに喋ってきりたんになれるか?」を念頭に置いています。
変換精度をあげるためにはどうすればいいかは・・・ぜひ知りたいですね。
今年度のCEDECの公演にもボイスチェンジャーの関連のものがあったと思うので、興味がある方は参加してみてはいかがでしょうか。
MMVC動作確認用のついっち→https://www.twitch.tv/hoge_coo
MMVCv1.2.1.1
Copyright (c) 2021 Isle.Tennos
Released under the MIT license
https://opensource.org/licenses/mit-license.php
git:https://github.com/isletennos/MMVC_Trainer
community(discord):https://discord.gg/PgspuDSTEc
そういえばニコニコ大百科のボイスチェンジャーの記事に「演技する羞恥心に対する壁」みたいなのが書かれてましたが、発声した声と変換後の声が同時に(遅れて)聞こえてくると自己認識というか自己同一性みたいなものが崩れるので、「ボイスチェンジャーの変換後の音声はDiscordやOBSの入力に使用して自分はその結果を聞かない」ことを徹底すると違和感なくボイスチェンジャーを使えると思います。自分はそうしてます。
(聞かないことを徹底した結果ボイスチェンジャーを起動し忘れて生声で配信しちゃう事故もあるけど気にするな)
>ぐだぐだ想定
最初から理想的な発声をテストケースにしてしまうと現実の使用感との乖離が大きくなってしまうので、このようにしています。
【同一台本劇場祭】台本あったんでMMVCで喋りました、春日部つむぎと四国めたんですけど
本物の春日部つむぎと四国めたんです
ホントはカメラ制御が練習したかっただけの動画です
MMVCはあんま激しい演技させると声がおかしくなるみたいね、台本読み上げは難しいね
この二人を選んだ理由は、学習させたモデルの中で一番品質が安定してたからです。
あと、立ち絵がカワイイってのもある
注意
下ネタアリです
ガッkoyaさん『同一台本劇場祭』参加作品ですhttps://www.nicovideo.jp/watch/sm40550123
台本:ガっkoya様
合成音声:MMVC(天王洲アイル様)
学習データ:
四国めたん(イタコーパス)
春日部つむぎ(VOICEVOX)
立ち絵:坂本アヒル様
元ボイス:namerou
ED曲:ジプシーキングス『Inspiration』
MMVCって何?って人はこの動画を見るべし
この動画を見れば、あなたも美少女になれますよ!!
https://www.nicovideo.jp/watch/sm40415108
これって、『ゆっくり茶番劇』になるかしら?
I'mずんだもん王への道講座_好きな声に即時ボイチェンを実行するまでの流れに関してだいたい0から説明していく予定【MMVC】(応用編_九州そら)【ソフトウェアトーク解説】
2023/05/11:現UI向け講座(v1.5,v1.3)をnoteに書いたのでコッチ見てください。各編ごとに記事があります。:https://note.com/pipo_lll/n/n948531a7750f
九州そらです(ずんだもん以外になる時のチュートリアルです)。
●説明
好きな声でリアルタイムボイスチェンジャーする
「MMVC」(v1.2.1.3)の、準備から実行までの流れを話していきます。
●導入等で困ったら下記Disocordコミュで質問すると良いかもしれません。
●話者
九州そら:MMVC(学習データはVOICEVOX)
東北きりたん:VOICEROID
●使う物
MMVC_Trainer:https://github.com/isletennos/MMVC_Trainer
MMVC_Client:https://github.com/isletennos/MMVC_Client
●MMVC導入講座(I'mずんだもん王への道)シリーズ
https://www.nicovideo.jp/series/318700
MMVCv1.2.1.3
Copyright (c) 2021 Isle.Tennos
Released under the MIT license
https://opensource.org/licenses/mit-license.php
git:https://github.com/isletennos/MMVC_Trainer
community(discord):https://discord.gg/Kryuvf6aj6
MMVCのFAQ(よくある質問):https://github.com/isletennos/MMVC_Trainer/wiki/FAQ
Youtube:https://youtu.be/MEXKZoHVd-A
本物の春日部つむぎだよ!!
イエーイ、オタク君見てるー?
本物の埼玉ギャル、春日部つむぎだよ!!
偉大なる作者様:
https://github.com/isletennos/MMVC_Trainer
データセット作成には、VOICEVOXを使用しました
MMVCって何?って人はこの動画を見るべし
https://www.nicovideo.jp/watch/sm40415108
I'mずんだもん王への道講座_好きな声に即時ボイチェンを実行するまでの流れに関してだいたい0から説明していく予定【MMVC】(質問・補足編)【ソフトウェアトーク解説】
2023/05/11:現UI向け講座(v1.5,v1.3)をnoteに書いたのでコッチ見てください。各編ごとに記事があります。:https://note.com/pipo_lll/n/n948531a7750f
※2022/09/12追記:VOICEROID2でMMVCになってますが利用規約基づき『何か問題起きたら当動画投稿者(ピポッ)の責任である』リスクがあります。
コメントへの回答や補足、今後のMMVC更新の話です。
●説明
好きな声でリアルタイムボイスチェンジャーする
「MMVC」(v1.2.1.3)の、準備から実行までの流れを話していきます。
●導入等で困ったら下記Disocordコミュで質問すると良いかもしれません。
●デモ(?)
https://www.nicovideo.jp/watch/sm40566216
●話者
音街ウナ:MMVC(学習データはVOICEROID2)
東北きりたん:VOICEROID ずんだもん:VOICEVOX
●使う物
サクラエディタ:https://sakura-editor.github.io/
7zip:https://sevenzip.osdn.jp/download.html
Voicemeeter Banana(情報サイト):https://www.gigafree.net/media/mixer/Voicemeeter-Banana.html
VB-CABLE:https://vb-audio.com/Cable/index.htm
フォルダの音声を24000Hz,16bit,モノラル(1ch)にする物(Colab):https://colab.research.google.com/drive/1CXc7B_mZE3mZLm3MPXMNm_NB56mpBPZS
●MMVC導入講座(I'mずんだもん王への道)シリーズ
https://www.nicovideo.jp/series/318700
MMVCv1.2.1.3
Copyright (c) 2021 Isle.Tennos
Released under the MIT license
https://opensource.org/licenses/mit-license.php
git:https://github.com/isletennos/MMVC_Trainer
community(discord):https://discord.gg/Kryuvf6aj6
Youtube:https://youtu.be/aGBcqu5M6-c
台本あったからMMVCで喋りました、琴葉葵と音街ウナですけど_漫才_ボイロ&Vtuber編【ソフトウェアトーク劇場(?)】【MMVC】
本物の琴葉葵と音街ウナです
※2022/09/12追記:VOICEROID2でMMVCになってますがMMVC利用規約基づきコレは『何か問題起きたら当動画投稿者(ピポッ)の責任である』リスクがあります。
Q. 「S○irenV○iceで」って書いてなかった?
A. 台本に「ボイスロイド『等』を混ぜても構いません。」とあったため実行しました。
●元:ガッkoyaさんの動画
https://www.nicovideo.jp/watch/sm40550123
https://youtu.be/FJEsNy0PgAc
●音声(琴葉葵、音街ウナ、ずんだもん):MMVC
※学習元データはVOICEROID2、VOICEVOX
●各ボイスチェンジャーに、それぞれ別個の長所がある点をご了承願います。
●MMVCを試したくなったら以下の解説動画をご確認ください(宣伝)。
I'mずんだもん王への道講座(MMVC導入講座)
https://www.nicovideo.jp/watch/sm40415108
https://youtu.be/gq1Hpn5CARw
MMVC_Trainer v1.2.1.3
MMVC_Client v0.2.0.2
Copyright (c) 2021 Isle.Tennos
Released under the MIT license
https://opensource.org/licenses/mit-license.php
git:https://github.com/isletennos/MMVC_Trainer
(client):https://github.com/isletennos/MMVC_Client
community(discord):https://discord.gg/Kryuvf6aj6
MMVCのFAQ(よくある質問):https://github.com/isletennos/MMVC_Trainer/wiki/FAQ
動いた方法:talking-head-anime-2-demo
https://www.nicovideo.jp/watch/sm38211856
https://github.com/pkhungurn/talking-head-anime-2-demo
Youtube版:https://youtu.be/ducmYAESDz8
I'mずんだもん王への道講座_好きな声に即時ボイチェンを実行するまでの流れに関してだいたい0から説明していく予定【MMVC】(リアルタイム編)【ソフトウェアトーク解説】
2023/05/11:現UI向け講座(v1.5,v1.3)をnoteに書いたのでコッチ見てください。各編ごとに記事があります。:https://note.com/pipo_lll/n/n948531a7750f
リアルタイムにボイスチェンジャーを行います。これで即時ずんだもんになれます。お疲れ様でした。
●説明:好きな声でリアルタイムボイスチェンジャーする「MMVC」(v1.2.1.0)の、準備から実行までの流れを話していきます。
当シリーズでは「ずんだもん」になる事を目標とします。
●導入等で困ったら下記Disocordコミュで質問すると良いかもしれません。
●章立て
その1:必要な物を入手しよう:#00:56
MMVC_ClientのDL:#01:14
学習ファイルのDL:#03:34
その2:ボイチェンの準備をしよう:#05:14
デバイス取得:#05:33
設定(myprofile.json)の書き方:#06:43
環境音の録音:#09:47
その3:リアルタイムボイスチェンジしよう:#11:46
遅延や滑らかさの設定:#13:38
エラー対応:#14:45
余談:ボイチェンを入力にする:#17:26
●話者 ずんだもん:MMVC きりたん:VOICEROID
●使う物:MMVCドキュメント:https://bit.ly/38RtkpV
MMVC_Client:https://github.com/isletennos/MMVC_Client
Googleドライブ:https://bit.ly/3Gjkcqm
SYNCROOM:https://yamaha.io/3yWUFS7
Voicemeeter Banana(情報サイト):https://bit.ly/3yTJJVy
●MMVC導入講座(I'mずんだもん王への道)シリーズ
https://www.nicovideo.jp/series/318700
MMVCv1.2.1.1
Copyright (c) 2021 Isle.Tennos
Released under the MIT license
https://opensource.org/licenses/mit-license.php
git:https://github.com/isletennos/MMVC_Trainer
community(discord):https://discord.gg/Kryuvf6aj6
Youtube:https://youtu.be/Al5DFCvKLFA
MMVC:ずんだもん導入したので試しに学習段階ごとの読み上げ比較してみた
みんなもずんだもんになろう!
この動画は天王洲アイル(Isle.Tennos)さん制作のMMVCというソフトを使って短い朗読をやってみた動画です。
大体どれくらいの学習でどれくらいなめらかなのか、の参考程度にご利用ください。
解説や導入方法については他の方の動画を参照ください。もっといいマイク使ったらもっとなめらかだと思う
追記:当時の私は知らなかったのですが、実際の学習状態を表す数値はモデル番号ではなくg/melという値でございます。当然当時の私はその数値を記録していないので、この動画はほとんど参考になりません。ご了承ください。
MMVCの概要 https://www.nicovideo.jp/watch/sm40189392
導入の解説はピポッさんの動画へ https://www.nicovideo.jp/watch/sm40415108
図書カード:D坂の殺人事件 - 青空文庫 https://www.aozora.gr.jp/cards/001779/card56650.html
MMVC:ずんだもん
Copyright (c) 2021 Isle.Tennos
Released under the MIT license
https://opensource.org/licenses/mit-license.php
I'mずんだもん王への道講座_好きな声に即時ボイチェンを実行するまでの流れに関してだいたい0から説明していく予定【MMVC】(学習編_後編)【ソフトウェアトーク解説】
2023/05/11:現UI向け講座(v1.5,v1.3)をnoteに書いたのでコッチ見てください。各編ごとに記事があります。:https://note.com/pipo_lll/n/n948531a7750f
学習時のエラー・異常とその対策、次に実際に声を変換してみます。
●説明
好きな声でリアルタイムボイスチェンジャーする「MMVC」(v1.2.1.1)の、準備から実行までの流れを話していきます。
当シリーズでは「ずんだもん」になる事を目標とします。
●導入等で困ったら下記Disocordコミュで質問すると良いかもしれません。
●章立て
異常と対応
①ModuleNotFound, No such :#00:42
※Train_MMVC.ipynbの注意:#01:17
②色々(DataLoader, buffer size, SR):#02:38
③CUDA out of memory.:#03:52
④FileExistsError:#04:45
⑤cuFFT dosen't, SM_53:#05:12
⑥cc:144:#05:55
⑦size mismatch:#07:06
⑧学習できない(GPU未接続):#08:15
その3:声を変換してみよう:#09:37
一連の流れ:#10:09
再録音する場合:#15:17
●話者
ずんだもん:MMVC、VOICEVOX
きりたん:VOICEROID
●使う物
MMVC_Trainer:https://bit.ly/37ZN76d
Googleドライブ:https://bit.ly/3lo93e6
●MMVC導入講座(I'mずんだもん王への道)シリーズ
https://www.nicovideo.jp/series/318700
MMVCv1.2.1.1
Copyright (c) 2021 Isle.Tennos
Released under the MIT license
https://opensource.org/licenses/mit-license.php
git:https://github.com/isletennos/MMVC_Trainer
community(discord):https://discord.gg/Kryuvf6aj6
MMVCのFAQ(よくある質問):https://github.com/isletennos/MMVC_Trainer/wiki/FAQ
Youtube:https://bit.ly/3wrE8E1
I'mずんだもん王への道講座_好きな声に即時ボイチェンを実行するまでの流れに関してだいたい0から説明していく予定【MMVC】(学習編_前2)【ソフトウェアトーク解説】
2023/05/11:現UI向け講座(v1.5,v1.3)をnoteに書いたのでコッチ見てください。各編ごとに記事があります。:https://note.com/pipo_lll/n/n948531a7750f
学習の開始・再開の説明と、良し悪しを数字・図で確認します。本当はここまで前編でした。
●説明
好きな声でリアルタイムボイスチェンジャーする
「MMVC」(v1.2.1.0)の、準備から実行までの流れを話していきます。
当シリーズでは「ずんだもん」になる事を目標とします。
●導入等で困ったら下記Disocordコミュで質問すると良いかもしれません。
●今回の章立て
その2:機械学習しよう(Train_MMVC.ipynb)続き:#00:00
出力と学習の良し悪しの見方:#02:02
グラフで結果確認:#02:55
学習結果の出力と位置:#04:52
※追記:#07:53頃の説明の無効。
複数アカウントによるリソース回避は禁止だったため、
この部分の解説(GPU制限時の対処)は現在無効です
学習再開の注意事項4点:#09:23
(残りは後編)
●話者
ずんだもん:MMVC、VOICEVOX
きりたん:VOICEROID
●動画で使うもの
MMVC_Trainer
https://github.com/isletennos/MMVC_Trainer
Googleドライブ
https://drive.google.com/drive
●MMVC導入講座(I'mずんだもん王への道)シリーズ
https://www.nicovideo.jp/series/318700
MMVCv1.2.1.0
Copyright (c) 2021 Isle.Tennos
Released under the MIT license
https://opensource.org/licenses/mit-license.php
git:https://github.com/isletennos/MMVC_Trainer
community(discord):https://discord.gg/Kryuvf6aj6
MMVCドキュメント:https://bit.ly/3MJ9cVF
Youtube:https://youtu.be/zQW59vrOSuA
AIねこせんせい.mp1
初投稿です。リアルタイムでボイチェンしようとしたけどGPU版はNVIDIA製のじゃないと使えないってマジかよぉ!マジ俺の期待を裏切るなよな!しょうがないからCPU版を使ったけど、CPUくんがここでマジ狂い。すぐに使用率100%になるし、反映も遅いからwavファイルに書き出して使ったぜ!
I'mずんだもん王への道講座_好きな声に即時ボイチェンを実行するまでの流れに関してだいたい0から説明していく予定【MMVC】(学習編_前1)【ソフトウェアトーク解説】
2023/05/11:現UI向け講座(v1.5,v1.3)をnoteに書いたのでコッチ見てください。各編ごとに記事があります。:https://note.com/pipo_lll/n/n948531a7750f
いよいよ学習編です。また長くなったので前後編に、かつ前編が2つになりました。
●説明
好きな声でリアルタイムボイスチェンジャーする
「MMVC」(v1.2.1.0)の、準備から実行までの流れを話していきます。
当シリーズでは「ずんだもん」になる事を目標とします。
●導入等で困ったら下記Disocordコミュで質問すると良いかもしれません。
●今回の章立て
前書き:v1.2.1.1アップデート方法:#02:33
その1:設定ファイルを作ろう(Create_Configfile):#02:28
一連の流れ:#03:26
エラー異常とその対応:#07:27
その2:機械学習しよう(Train_MMVC):#11:24
一連の流れ:#11:51
GPUの確認:#13:25
train_config_zundamon.jsonの修正:#14:30
GPUメモリーの見方:#16:21
(残りは前編2と後編)
●話者
ずんだもん:MMVC、VOICEVOX きりたん:VOICEROID
●動画で使うもの
MMVC_Trainer
https://github.com/isletennos/MMVC_Trainer
Googleドライブ
●MMVC導入講座(I'mずんだもん王への道)シリーズ
https://www.nicovideo.jp/series/318700
MMVCv1.2.1.0
Copyright (c) 2021 Isle.Tennos
Released under the MIT license
https://opensource.org/licenses/mit-license.php
git:https://github.com/isletennos/MMVC_Trainer
community(discord):https://discord.gg/Kryuvf6aj6
MMVCのFAQ(よくある質問):https://github.com/isletennos/MMVC_Trainer/wiki/FAQ
Youtube:https://youtu.be/HRSPEy2jUvg
バ美肉.mmvc
公式様に見つかりませんように・・・
ちゃんとした環境で音声を収録してる四国めたんちゃんは、もっと質がいいんだけどね…どうしても音源の質がね…
https://twitter.com/OBt4cPqhYoEGOrc/status/1524020941466271744?t=rBdi1He-dGdk6e8PrKbGdQ&s=19
偉大なる作者様:
https://github.com/isletennos/MMVC_Trainer
音源サイト:
https://sugtao4423.xyz/inm/
今回はうp主の声を野獣先輩の声に変換するように学習させましたが、
野獣先輩の声を例えばすんだもんや四国めたんちゃんとペアにして学習させれば、
彼女たちに語録を読み上げてもらうことができるわけですね。
まあ、東北ずん子ガイドラインの禁止行為『イメージを悪くする、公序良俗に反するもの』に該当するので、やりませんが
【WoT】Mバッジとったよ Pz.38(t)n.A.
動画編集スキルどこー?
MMVCという新兵器を投入してみたのだ。すごい面白いのだ。
MYCOEIROINKで出力した音声をMMVCで変換してずんだもんにしたのだ。
生声を変換するより精度がいい気がするのだ。
動画作りよくわからなかったけど、頑張ったのだ。ほめてほしいのだ。
新型38(t)戦車へ乗りました。
やっぱり、ルクス君ユーザーは強い人多いよなぁって思いました。
ルクス君Mバッジ全然取れないから、新型38(t)戦車に乗り始めたの思い出しました。
そして、ルクス君を狩る喜びに目覚めたのはしばらく後の話。
利用させていただいたもの(up時に書いてませんでした。ごめんなさい。書き方間違ってたら教えてください。)
VOICEVOX:ずんだもん
VOICEVOXの公式ページ:https://voicevox.hiroshiba.jp/
MYCOEIROINK:うぷ主の声(自作モデル)
COEIROINKの公式ページ:https://coeiroink.com/
MMVC:ずんだもん
MMVCv1.2.0.2
Copyright (c) 2021 Isle.Tennos
Released under the MIT license
https://opensource.org/licenses/mit-license.php
git:https://github.com/isletennos/MMVC_Trainer
この動画はウォーゲーミングジャパン株式会社が権利を所有する著作物を利用しております。© Wargaming.net
I'mずんだもん王への道講座_好きな声に即時ボイチェンを実行するまでの流れに関してだいたい0から説明していく予定【MMVC】(前準備編2)【ソフトウェアトーク解説】
2023/05/11:現UI向け講座(v1.5,v1.3)をnoteに書いたのでコッチ見てください。各編ごとに記事があります。:https://note.com/pipo_lll/n/n948531a7750f
長くなるので前準備編を増やしました。
学習実行の直前まで説明します。
●説明
好きな声でリアルタイムボイスチェンジャーする
「MMVC」(v1.2.0.4)の、準備から実行までの流れを話していきます。
当シリーズでは「ずんだもん」になる事を目標とします。
●導入等で困ったら下記Disocordコミュで質問すると良いかもしれません。
●今回の章立て
その1:学習に必要なプログラムを入手・配置しよう:#00:25
入手:#00:36
配置:#01:58
その2:ファイルの設定を書き換えよう:#05:43
baseconfig:#06:09
.ipynb3種:#08:37
その3:Googleドライブの準備をしよう:#10:24
アカウント作成:#10:37
フォルダコピー:#12:08
Colaboratory接続:#13:08
●話者
ずんだもん:MMVC、VOICEVOX
きりたん:VOICEROID
●動画で使うもの
MMVC_Trainer
https://github.com/isletennos/MMVC_Trainer
Google
https://Google.co.jp
●MMVC導入講座(I'mずんだもん王への道)シリーズ
https://www.nicovideo.jp/series/318700
MMVCv1.2.0.4
Copyright (c) 2021 Isle.Tennos
Released under the MIT license
https://opensource.org/licenses/mit-license.php
git:https://github.com/isletennos/MMVC_Trainer
community(discord):https://discord.gg/Kryuvf6aj6
MMVCのFAQ(よくある質問):https://github.com/isletennos/MMVC_Trainer/wiki/FAQ
Youtube:https://youtu.be/m4Jew7sTs9w
要修正音声:I'mずんだもん王への道講座_好きな声に即時ボイチェンを実行するまでの流れに関してだいたい0から説明していく予定【MMVC】(前準備編v1.2.0.3→4修正)【ソフトウェアトーク解説】
2023/05/11:現UI向け講座(v1.5,v1.3)をnoteに書いたのでコッチ見てください。各編ごとに記事があります。:https://note.com/pipo_lll/n/n948531a7750f
バージョンアップで修正必須点が増えたため
急遽動画化しました。
追記:さらにVerアップして制限領域が変わりました。
結論(v1.2.0.4):音声は0.401秒以上15.99秒以下にしてください。
・0.4秒以下:無音を増やす
・16秒以上:テキストを分割2ファイル化、音声も分割2ファイル化で録音
(最悪、無視して99文でもOK)
・16秒を超える場合の対処:テキストを分割2ファイル化、2つに分けて録音する。
の方が良いかもとのことです(製作者様言及)
●説明
好きな声でリアルタイムボイスチェンジャーする
「MMVC」(v1.2.0.2)の、準備から実行までの流れを話していきます。
当シリーズでは「ずんだもん」になる事を目標とします。
●導入等で困ったら下記Disocordコミュで質問すると良いかもしれません。
●話者
ずんだもん:MMVC
きりたん:VOICEROID
●MMVC導入講座(I'mずんだもん王への道)シリーズ
https://www.nicovideo.jp/series/318700
MMVCv1.2.0.3
Copyright (c) 2021 Isle.Tennos
Released under the MIT license
https://opensource.org/licenses/mit-license.php
git:https://github.com/isletennos/MMVC_Trainer
community(discord):https://discord.gg/Kryuvf6aj6
MMVCのFAQ(よくある質問):https://github.com/isletennos/MMVC_Trainer/wiki/FAQ
Youtube:https://youtu.be/NgzC7Nuk6gg
I'mずんだもん王への道講座_好きな声に即時ボイチェンを実行するまでの流れに関してだいたい0から説明していく予定【MMVC】(前準備編)【ソフトウェアトーク解説】
2023/05/11:現UI向け講座(v1.5,v1.3)をnoteに書いたのでコッチ見てください。各編ごとに記事があります。:https://note.com/pipo_lll/n/n948531a7750f
私がずんだもんです(前準備編)
●説明
好きな声でリアルタイムボイスチェンジャーする
「MMVC」(v1.2.0.2)の準備から実行の流れを話します。
当シリーズでは「ずんだもん」になる事を目標とします。
●前準備編『MMVCを使うためのソフトやファイルを用意しよう』
今回は前準備として、学習用のテキスト・音声ファイルの用意およびファイルを用意するための物の紹介を行います。
●章立て
その1:録音ソフトを用意しよう:#02:19
その2:読み上げる文章を用意しよう:#05:05
ラスト:文章を読み上げて録音しよう:#08:54
設定(仮)と最初の録音:#09:43
保存設定:#12:00
Audacityショートカットキー+録音:#13:49
一括データ変換(真):#16:19
●話者
ずんだもん:MMVC、VOICEVOX きりたん:VOICEROID
●今回使う物
■Audacity(窓の社):https://bit.ly/3kG4qf7
■ITAコーパス文章リスト(分割ファイル付き):https://bit.ly/3Ferfjv
ふりがな付き:https://bit.ly/3P6s5n7
■Audacityのショートカットキー:https://bit.ly/38919Cm
●MMVC導入講座(I'mずんだもん王への道)シリーズ
https://www.nicovideo.jp/series/318700
MMVCv1.2.0.2
Copyright (c) 2021 Isle.Tennos
Released under the MIT license
https://opensource.org/licenses/mit-license.php
git:https://github.com/isletennos/MMVC_Trainer
community(discord):https://discord.gg/Kryuvf6aj6
MMVCのFAQ(よくある質問):https://github.com/isletennos/MMVC_Trainer/wiki/FAQ
Youtube:https://bit.ly/3MP2ZXP
リアルタイムで自分の好きな声に変換できるボイスチェンジャー(自称) MMVC v1.2.0 リリース!
MMVCがv1.2.0になったぞ!
ずんだもんと四国めたんと九州そらを正式サポートだ!
みんな使ってくれよな!!
今回の動画も音声はすべてMMVC v1.2.0でつくっているのだ!
ダウンロードはこちらから
https://github.com/isletennos/MMVC_Trainer.git
https://github.com/isletennos/MMVC_Client.git
わからないことは何でも聞いてくれよな!
discordか開発者に直接質問ぶん投げてください。
みんなの質問がMMVCがさらに進化させるのだ。
========== 質問&ナレッジ用コミュニティサーバ(discord) ==========
https://discord.gg/4A4Q4cv2Vw
========== 開発者 ==========
天王洲アイル
・Twitter
https://twitter.com/IsleTennos
========== Special thanks!! ==========
illustrator:凪瀬ロロ様(天王洲アイル)
illustrator:坂本アヒル様(ずんだもん)
https://seiga.nicovideo.jp/seiga/im10788496
音声提供:犬塚わんこ様
twitter:https://mobile.twitter.com/wanko_inuzuka
YouTube : https://m.youtube.com/channel/UCgRe5eq4h30AAqKwLINFX8Q
========== 前回の動画 ==========
ゼロから始めるMMVC ~モデル学習編~ : sm40292061
========== 導入解説動画 ==========
有志による解説(公式)
前準備編 : sm40415108
修正編:sm40420683
前準備編2:sm40445164
学習編_前1:sm40467662
学習編_前2:sm40415108
学習編_後:sm40490554
リアルタイム編 : sm40524705
質問編:sm40599514
応用編_九州そら:sm40647601
リアルタイム音街ウナ【第二回10秒動画祭】【ディープラーニング】【ボイスチェンジャー】【表情変換】
ウナです。
●概要
リアルタイムに「1枚絵で表情変換」&「音声変換」&「字幕化」
した音街ウナです。
真面目な方:https://twitter.com/pipo_lll/status/1511905854634737665
以下のプログラムを使用しました。
顔:talking-head-anime-2-demo
sm38211856
https://github.com/pkhungurn/talking-head-anime-2-demo
声:MMVC (MITライセンス準拠)
sm40292061
MMVCv1.1.0
Copyright (c) 2021 Isle.Tennos
Released under the MIT license
https://opensource.org/licenses/mit-license.php
git:https://github.com/isletennos/MMVC_Trainer
community(discord):https://discord.gg/PgspuDSTEc
字幕:リアルタイム字幕ツール
https://hirarichan.fanbox.cc/posts/654899
導入方法は各動画やページをご確認ください。
顔はNVIDIAのGPUのあるパソコンならいけます。
声はGPU版とCPU版があるのでパソコンに合わせていけます。
字幕はChrome入ってればOKです。
●その他動画で使ったもの
立ち絵(音街ウナ):ふにちか
BGM:PANICPUMPKIN
背景:きまぐれアフター
フォント:源柔ゴシック Heavy、あずきフォント、
851ゴチカクット、コーポレート・ロゴ(ラウンド)
Aviutl
PSDtoolKit
nc158303
コモンズ素材リストアップツール
patch.aul
●これは「第二回10秒動画祭」の参加動画です。
sm40256053
Youtube版:https://youtu.be/FYdKljlM39c
ゼロから始めるMMVC ~モデル学習編~
MMVCのモデルの学習までの流れの解説動画を作成しました!
リアルタイムでVCを動かすためのクライアントは別の動画で紹介します!
MMVCのダウンロードはこちらから
https://github.com/isletennos/MMVC_Trainer.git
https://github.com/isletennos/MMVC_Client.git
わからないことは何でも聞いてくれよな!
discordか開発者に直接質問ぶん投げてください。
みんなの質問がMMVCがさらに進化させるのだ。
========== 質問&ナレッジ用コミュニティサーバ(discord) ==========
https://discord.gg/PgspuDSTEc
=======1.元音声、2.変換後の音声、3.遅延込みで同時録音した音声のデモ(v1.0.0) =======
https://docs.google.com/presentation/d/1BmP11WfXNRdUA1vYxO7wG6l0t1oMDccDvAgIz2Rbrh0/edit?usp=sharing
(順次更新中)
========== 開発者 ==========
天王洲アイル
・Twitter
https://twitter.com/IsleTennos
・Fanbox
天王洲アイル|pixivFANBOX
https://isle.fanbox.cc/
========== Special thanks!! ==========
■illustrator:凪瀬ロロ様
■音声提供:犬塚わんこ様
twitter:https://mobile.twitter.com/wanko_inuzuka
YouTube : https://m.youtube.com/channel/UCgRe5eq4h30AAqKwLINFX8Q
■BGM:mozell 様
傾き屋根から見た景色 https://mozeen.com/music/mozegaku2/
夏休みの思い出 https://mozeen.com/music/mozegaku2/
ネレイア ~Long Version~ https://mozeen.com/music/mozegaku/
========== 前回の動画 ==========
リアルタイムで自分の好きな声に変換できるボイスチェンジャーを作ってみた : sm40230761
リアルタイムで自分の好きな声に変換できるボイスチェンジャーを作ってみた
無料で使えるAIを使ったリアルタイムボイスチェンジャーを作ったぞ
みんな使ってくれよな!!
ダウンロードはこちらから
https://github.com/isletennos/MMVC_Trainer.git
https://github.com/isletennos/MMVC_Client.git
わからないことは何でも聞いてくれよな!
遊戯王のこと以外でな!!
みんなの質問がMMVCがさらに進化させるのだ。
========== 1.元音声、2.変換後の音声、3.遅延込みで同時録音した音声のデモ ==========
追加しました!
https://docs.google.com/presentation/d/1BmP11WfXNRdUA1vYxO7wG6l0t1oMDccDvAgIz2Rbrh0/edit?usp=sharing
(ソフトウェア上では299msの遅延ですが、実際に録音してみると600ms近い遅延が…)
========== 質問&ナレッジ用コミュニティサーバ(discord) ==========
https://discord.gg/4A4Q4cv2Vw
========== 開発者 ==========
天王洲アイル
・Twitter
https://twitter.com/IsleTennos
・Fanbox
天王洲アイル|pixivFANBOX
https://isle.fanbox.cc/
========== 前回の動画 ==========
遅延時間約0.32秒のリアルタイムボイスチェンジャーを作ってみた : sm40189392
========== おまけ ==========
下記の技術のと組み合わされば・・・?
一枚の画像で表情豊かなVTuberになれるシステムを作ってみた : sm38211856
========== Special thanks!! ==========
illustrator:凪瀬ロロ
音声提供:犬塚わんこ様
twitter:https://mobile.twitter.com/wanko_inuzuka
YouTube : https://m.youtube.com/channel/UCgRe5eq4h30AAqKwLINFX8Q
遅延時間約0.32秒のリアルタイムボイスチェンジャーを作ってみた
2021年に音声合成の手法として提案された
VITS(Conditional Variational Autoencoder with Adversarial Learning for End-to-End Text-to-Speech)
を用いた低遅延リアルタイムボイスチェンジャーを作成しました。
2022/01/30に行われた「OV2L EVOLVING SUMMIT 2022」にて
「VITSを用いた低遅延REALTIME-VC」という題目で登壇した時のアーカイブを編集したものです。
(最優秀賞頂きました!!)
3月末~4月中旬くらいにはOSSの方も公開できそうな進捗になってきたので、改めて編集しました!
3/26(土) リリース予定!!
リリースしました > sm40230761
・VITS
https://arxiv.org/abs/2106.06103
・OV2L EVOLVING SUMMIT 2022
https://www.ov2levolvingsummit2022.com/
他の登壇者様のセッション一覧
https://youtube.com/playlist?list=PL6q9s3S2J0lEjOTKjXk98anZZoFsQpEVA
・Twitter
https://twitter.com/IsleTennos
※2022/03/18 19:36 追記
実際にプレゼンで使用した資料です。画質が悪かったのでこちらにアップロードしておきます。
https://docs.google.com/presentation/d/1I9ceFnnH5R2CMKMhX5GF8CTh6SU3DPKTyhIO7Dg6yH0/edit?usp=sharing