タグ 声質変換 が登録されている動画 ： 44 件中 1 - 32 件目
種類:
- タグ
- キーワード
対象:
【AI】RVCで、東北きりたんにボイチェンして歌ってみる バルーン【声質変換】
あなたがボイスロイドになって歌える時代が来ました！！
Retrieval-based-Voice-Conversion(RVC)という、AI声質変換を利用して、きりたんにボイチェンして歌ってみました。
リアルタイム変換版ではないのですが、とても高音質な声質変換が出来ていると思います。
学習させた音域と違う音域が苦手なのか、高音域で多少カスれてしまっているのが今後の課題ですね。
--------------
リポジトリ → https://huggingface.co/lj1995/VoiceConversionWebUI/tree/main
導入方法を解説してくださっているサイト → https://rentry.co/cxuc3
バルーン(オフボーカル) → https://piapro.jp/t/o5R_
--------
過去の声質変換→mylist/65160705
単発→mylist/63886206
ﾂｲｯﾀｰ：@Yukakiri_0213
【声質変換してみた】残響散歌／緋惺【Diff-SVC】
■原曲
Aimer「残響散歌」MUSIC VIDEO（テレビアニメ「鬼滅の刃」遊郭編オープニングテーマ）
https://youtu.be/tLQLa6lM3Us
■イラスト&動画制作
緋惺( @akesato_vtuber )
https://twitter.com/akesato_vtuber
■ボーカル
夏色花梨に歌わせた残響散歌( sm41544385 )をDiff-SVCで緋惺の歌声に声質変換しました。
このモデルはVtuber緋惺の歌唱データ1時間12分(約300MB)を30万ステップ学習させたものです。
■カラオケ制作&調声&ミックス
こぬこ( @konuko73 )
https://twitter.com/konuko73
※無断転載はおやめください。
I wholly forbid the reproduction and manufacturing of my work without permission.
【Diff-SVC+やり方】任意の歌声に変換する高品質ボイスチェンジャーを使ってみた【DAYBREAK FRONTLINE】
今回は巷で話題の「Diff-SVC」を使ってみました！
自分の声を任意の歌声に適用できるAIボイスチェンジャーです！
このモデルは1時間(300MB分)のデータを27.2万ステップ(not epoch)学習させたものです
変換元にはSynthV Ryo AIの音声を使ってます
やり方はこちらから↓
https://amanokei.hatenablog.com/entry/2022/12/13/182636
リアルタイムで自分の好きな声に変換できるボイスチェンジャー(自称) MMVC v1.2.0 リリース！
MMVCがv1.2.0になったぞ！
ずんだもんと四国めたんと九州そらを正式サポートだ！
みんな使ってくれよな！！
今回の動画も音声はすべてMMVC v1.2.0でつくっているのだ！
ダウンロードはこちらから
https://github.com/isletennos/MMVC_Trainer.git
https://github.com/isletennos/MMVC_Client.git
わからないことは何でも聞いてくれよな！
discordか開発者に直接質問ぶん投げてください。
みんなの質問がMMVCがさらに進化させるのだ。
========== 質問＆ナレッジ用コミュニティサーバ(discord) ==========
https://discord.gg/4A4Q4cv2Vw
========== 開発者 ==========
天王洲アイル
・Twitter
https://twitter.com/IsleTennos
========== Special thanks!! ==========
illustrator:凪瀬ロロ様(天王洲アイル)
illustrator:坂本アヒル様(ずんだもん)
https://seiga.nicovideo.jp/seiga/im10788496
音声提供:犬塚わんこ様
twitter:https://mobile.twitter.com/wanko_inuzuka
YouTube : https://m.youtube.com/channel/UCgRe5eq4h30AAqKwLINFX8Q
========== 前回の動画 ==========
ゼロから始めるMMVC ~モデル学習編~ : sm40292061
========== 導入解説動画 ==========
有志による解説(公式)
前準備編 : sm40415108
修正編：sm40420683
前準備編2：sm40445164
学習編_前1：sm40467662
学習編_前2：sm40415108
学習編_後：sm40490554
リアルタイム編 : sm40524705
質問編：sm40599514
応用編_九州そら：sm40647601
ゼロから始めるMMVC ~モデル学習編~
MMVCのモデルの学習までの流れの解説動画を作成しました！
リアルタイムでVCを動かすためのクライアントは別の動画で紹介します！
MMVCのダウンロードはこちらから
https://github.com/isletennos/MMVC_Trainer.git
https://github.com/isletennos/MMVC_Client.git
わからないことは何でも聞いてくれよな！
discordか開発者に直接質問ぶん投げてください。
みんなの質問がMMVCがさらに進化させるのだ。
========== 質問＆ナレッジ用コミュニティサーバ(discord) ==========
https://discord.gg/PgspuDSTEc
=======1.元音声、2.変換後の音声、3.遅延込みで同時録音した音声のデモ(v1.0.0) =======
https://docs.google.com/presentation/d/1BmP11WfXNRdUA1vYxO7wG6l0t1oMDccDvAgIz2Rbrh0/edit?usp=sharing
(順次更新中)
========== 開発者 ==========
天王洲アイル
・Twitter
https://twitter.com/IsleTennos
・Fanbox
天王洲アイル｜pixivFANBOX
https://isle.fanbox.cc/
========== Special thanks!! ==========
■illustrator:凪瀬ロロ様
■音声提供:犬塚わんこ様
twitter:https://mobile.twitter.com/wanko_inuzuka
YouTube : https://m.youtube.com/channel/UCgRe5eq4h30AAqKwLINFX8Q
■BGM:mozell 様
傾き屋根から見た景色 https://mozeen.com/music/mozegaku2/
夏休みの思い出 https://mozeen.com/music/mozegaku2/
ネレイア ～Long Version～ https://mozeen.com/music/mozegaku/
========== 前回の動画 ==========
リアルタイムで自分の好きな声に変換できるボイスチェンジャーを作ってみた : sm40230761
リアルタイムで自分の好きな声に変換できるボイスチェンジャーを作ってみた
無料で使えるAIを使ったリアルタイムボイスチェンジャーを作ったぞ
みんな使ってくれよな！！
ダウンロードはこちらから
https://github.com/isletennos/MMVC_Trainer.git
https://github.com/isletennos/MMVC_Client.git
わからないことは何でも聞いてくれよな！
遊戯王のこと以外でな！！
みんなの質問がMMVCがさらに進化させるのだ。
========== 1.元音声、2.変換後の音声、3.遅延込みで同時録音した音声のデモ ==========
追加しました！
https://docs.google.com/presentation/d/1BmP11WfXNRdUA1vYxO7wG6l0t1oMDccDvAgIz2Rbrh0/edit?usp=sharing
(ソフトウェア上では299msの遅延ですが、実際に録音してみると600ms近い遅延が…)
========== 質問＆ナレッジ用コミュニティサーバ(discord) ==========
https://discord.gg/4A4Q4cv2Vw
========== 開発者 ==========
天王洲アイル
・Twitter
https://twitter.com/IsleTennos
・Fanbox
天王洲アイル｜pixivFANBOX
https://isle.fanbox.cc/
========== 前回の動画 ==========
遅延時間約0.32秒のリアルタイムボイスチェンジャーを作ってみた : sm40189392
========== おまけ ==========
下記の技術のと組み合わされば・・・？
一枚の画像で表情豊かなVTuberになれるシステムを作ってみた : sm38211856
========== Special thanks!! ==========
illustrator:凪瀬ロロ
音声提供:犬塚わんこ様
twitter:https://mobile.twitter.com/wanko_inuzuka
YouTube : https://m.youtube.com/channel/UCgRe5eq4h30AAqKwLINFX8Q
遅延時間約0.32秒のリアルタイムボイスチェンジャーを作ってみた
2021年に音声合成の手法として提案された
VITS(Conditional Variational Autoencoder with Adversarial Learning for End-to-End Text-to-Speech)
を用いた低遅延リアルタイムボイスチェンジャーを作成しました。
2022/01/30に行われた「OV2L EVOLVING SUMMIT 2022」にて
「VITSを用いた低遅延REALTIME-VC」という題目で登壇した時のアーカイブを編集したものです。
(最優秀賞頂きました！！)
3月末～4月中旬くらいにはOSSの方も公開できそうな進捗になってきたので、改めて編集しました！
3/26(土) リリース予定！！
リリースしました > sm40230761
・VITS
https://arxiv.org/abs/2106.06103
・OV2L EVOLVING SUMMIT 2022
https://www.ov2levolvingsummit2022.com/
他の登壇者様のセッション一覧
https://youtube.com/playlist?list=PL6q9s3S2J0lEjOTKjXk98anZZoFsQpEVA
・Twitter
https://twitter.com/IsleTennos
※2022/03/18 19:36 追記
実際にプレゼンで使用した資料です。画質が悪かったのでこちらにアップロードしておきます。
https://docs.google.com/presentation/d/1I9ceFnnH5R2CMKMhX5GF8CTh6SU3DPKTyhIO7Dg6yH0/edit?usp=sharing
【ベータ版公開！】誰でも色々な声が出せる声質変換ソフト作る③
とりあえずそれなりに形になったので、ベータ版の公開に踏み切ることにしました
公式サイト▼
https://takosumi.github.io/koehen-site/index.html
利用規約▼
https://takosumi.github.io/koehen-site/termsOfUse.html
追記(2024年2月21日)
2年間の研究の末、変換品質向上のための改良の方向性は固まりました。
今後はできるだけ早期にバージョンアップを実施できるよう詳細な仕様の検討を進めていきます。
＜解説動画の構成＞
変換の仕組み：sm39377001
歌声変換のデモ：sm39592238
利用規約・導入方法：この動画
誰でも色々な声が出せる声質変換システム作る②～歌声変換編～
【追記】ベータ版の公開を開始しました。詳しくは→sm40183287
機械学習を使用しないことにより母音のデータだけで変換ができる、新発想の声質変換システム。
通常の声に加えて、歌声の変換にも成功しました。
＜解説動画の構成＞
変換の仕組み：sm39377001
歌声変換のデモ：この動画
利用規約・導入方法：sm40183287
ご意見・ご感想はこの動画のコメントか、公式Discordにお願いします。
公式Discord→https://discord.gg/eCj95dbqYh
誰でも色々な声が出せる声質変換システム作る①～理論編～
【追記】ベータ版の公開を開始しました。詳しくは→sm40183287
機械学習を使用しないことにより母音のデータだけで変換ができる、新発想の声質変換システム。
この動画では、変換の仕組みを解説した後、変換結果のサンプルをいくつか示します。
変換結果だけ聞きたい方は→#5:39
＜解説動画の構成＞
変換の仕組み：この動画
歌声変換のデモ：sm39592238
利用規約・導入方法：sm40183287
ご意見・ご感想はこの動画のコメントか、公式Discordにお願いします。
公式Discord→https://discord.gg/eCj95dbqYh
ディープラーニングの力で誰でもゆかりさんの声になれる声変換技術を作ってみた
「誰でも」「高品質に」ゆかりさんの声になれる声変換技術を作りました。
また一歩、結月ゆかりになるという夢に近づけた気がします。
～Q&A～
Q. 生放送で使える？
A. 現状だと声変換に数十秒かかるので難しいです。
生放送用途だとリアルタイムYukarinがおすすめです。
sm35735482
Q. ゆかりねっととの違いは？
A. テキスト以外の情報も利用するので、笑ったり怒ったりできます。
Q. 公開予定は？
A. 声変換システムの配布予定はありませんが、技術解説はブログにて公開しています。
また、声変換にご興味ありましたら、ツイッターなどでご連絡いただけるととても嬉しいです。
-----------------------------------
・ツイッター
https://twitter.com/hiho_karuta
・技術解説ブログ
https://blog.hiroshiba.jp/everybody-yukarin-with-deep-learning-power/
・スペシャルサンクス
@AkishoMK2
Rimworld - エンディング曲【yukarin式 歌うボイスロイド】
あなたがボイスロイドになって歌えば一瞬で歌ボが(ry
2か月ぶりぐらいの投稿です！
Yukarinライブラリを使えば歌うだけで歌ボ(っぽいもの)が作れちゃいます。
今回はWaiting for the sun。
手足がもげるゲーム リムワールドから宇宙船で脱出するときに流れるエンディングBGMですね！
この曲は私のお気に入りなので前々から作りたいなと思っていました。今回こうして作れてよかったです。
ちょっとカスれちゃったり音痴だったりするかもですがよろしくお願いします！
--------------
このシステムを作られたヒホ様の動画！ →sm33677204
導入方法など解説してくださっているサイト→https://qiita.com/atticatticattic/items/575d71dab4ee716e4969
--------
夏祭り→sm35514068
カントリー・ロード→sm35553809
君がくれたもの→sm35604504
Part1→sm34712010
きりたんボイス→mylist/65160705
単発やエロめのやつ→mylist/63886206
ツイスター：@Kiritan_Vtuber
Secret Base ～君がくれたもの～【yukarin式 歌うボイスロイド】
あなたがボイスロイドになって歌えば一瞬で歌ボが(ry
第三弾！ 夏ももう終わりということで、ZONEより Secret Baseです。
夏休みーいかないでー！！！！！
ひじき祭のタグせっかくなので付けたかったんですが、ゲーム画面映っちゃってるのでダメですね…
ちょっとカスれちゃったり音痴だったりするかもですがよろしくお願いします！
--------------
このシステムを作られたヒホ様の動画！ →sm33677204
導入方法など解説してくださっているサイト→https://qiita.com/atticatticattic/items/575d71dab4ee716e4969
--------
夏祭り→sm35514068
カントリー・ロード→sm35553809
Part1→sm34712010
きりたんボイス→mylist/65160705
単発やエロめのやつ→mylist/63886206
ツイスター：@Kiritan_Vtuber
【yukarin式 歌うボイスロイド】カントリー・ロード
あなたがボイスロイドになって歌えば一瞬で歌ボが(ry
英語の歌もがんばれば歌えるかな！？ ということで
fallout76版のカントリーロードを歌わせていただきました！
ちょっとカスれちゃったり音痴だったりするかもですがよろしくお願いします！
--------------
このシステムを作られたヒホ様の動画！ →sm33677204
導入方法など解説してくださっているサイト→https://qiita.com/atticatticattic/items/575d71dab4ee716e4969
--------
夏祭り→sm35514068
Part1→sm34712010
きりたんボイス→mylist/65160705
夏祭り【Become-yukarin式 歌うボイスロイド】
歌ボって、 歌→VSQX作成→Kotonosync
と結構ハードル高いですよね。特に初心者がVSQX作るのは絶望的だと思います。
(ピヨ式は作業量がヤバいし…)
でも、ボイスロイドというツールを使わずに、歌声をそのままボイロの声にできればとっても楽ですよね？
そう、あなたがボイスロイドになって歌えば
一瞬で歌ボが作れるのでは？
--------------
このシステムを作られたヒホ様の動画！ →sm33677204
導入方法など解説してくださっているサイト→https://qiita.com/atticatticattic/items/575d71dab4ee716e4969
--------
Part1→sm34712010
きりたんボイス→mylist/65160705
ゆかりソースを使って音質変換に挑戦する#9
音質変換に挑戦します#9
第ゼロ段階追加しました。300万は大事にね。
2019/7/11追記
再生数500いったら動画つくる
18万→230万→120万(now)
■サンクス
ディープラーニングの力で結月ゆかりの声になってみた
https://www.nicovideo.jp/watch/sm32724409
「ディープラーニングの力で結月ゆかりの声になる」ための基礎知識とコマンド操作
https://qiita.com/atticatticattic/items/f1e4c671d73d815bbad2
■使用したBGMや素材など
http://commons.nicovideo.jp/material/nc134041
http://commons.nicovideo.jp/material/nc148839
http://commons.nicovideo.jp/material/nc110340
ゆかりソースを使って音質変換に挑戦する#8
音質変換に挑戦します#8
RTX2080Ti買っちゃった。
■サンクス
ディープラーニングの力で結月ゆかりの声になってみた
https://www.nicovideo.jp/watch/sm32724409
「ディープラーニングの力で結月ゆかりの声になる」ための基礎知識とコマンド操作
https://qiita.com/atticatticattic/items/f1e4c671d73d815bbad2
■使用したBGMや素材など
http://commons.nicovideo.jp/material/nc134041
http://commons.nicovideo.jp/material/nc148839
http://commons.nicovideo.jp/material/nc110340
ゆかりソースを使って音質変換に挑戦する#7.5調整版2
音質変換に挑戦します#7.5 第二段階改良版＋旧第二段階
前回の動画
-
次の動画
-
これまでをまとめました。
まとめ記事
https://qiita.com/sunnyyone/items/f85c26d6149a200ed119
■サンクス
ディープラーニングの力で結月ゆかりの声になってみた
https://www.nicovideo.jp/watch/sm32724409
ゆかりソースを使って音質変換に挑戦する#7.5調整版
音質変換に挑戦します#7.5ノイズ調整版
前回の動画
-
次の動画
-
これまでをまとめました。
まとめ記事
https://qiita.com/sunnyyone/items/f85c26d6149a200ed119
■サンクス
ディープラーニングの力で結月ゆかりの声になってみた
https://www.nicovideo.jp/watch/sm32724409
ゆかりソースを使って音質変換に挑戦する#7.5
音質変換に挑戦します#7.5
前回の動画
-
次の動画
-
これまでをまとめました。
まとめ記事
https://qiita.com/sunnyyone/items/f85c26d6149a200ed119
■サンクス
ディープラーニングの力で結月ゆかりの声になってみた
https://www.nicovideo.jp/watch/sm32724409
ゆかりソースを使って音質変換に挑戦する#7(卓上防音壁設計)
音質変換に挑戦します#7
真面目に動画つくりました。
卓上防音壁作りたい方は参考にしてください。
買った材料は次回まとめます。
前回の動画
-
次の動画
-
これまでをまとめました。
まとめ記事
https://qiita.com/sunnyyone/items/f85c26d6149a200ed119
■サンクス
ディープラーニングの力で結月ゆかりの声になってみた
https://www.nicovideo.jp/watch/sm32724409
使用したBGM
http://commons.nicovideo.jp/material/nc134041
http://commons.nicovideo.jp/material/nc86708
https://dova-s.jp/bgm/play400.html
結月ゆかりになる RTA 0:11:37【勝手に更新】
sm34356037に便乗してやってみました。
過去に私が作ったものを簡略化・機能削減したものになります。
https://www.mumeigames.online/nvc/
（公開しているソースコードでは、精度優先で数時間かかりますので、ご了承ください）
RTAに使用したソースコードや技術詳細については、要望があったら考えます。
ディープラーニングの力で人工知能になって結月ゆかりと会話してみた
～半年前～
ゆかりさんとお喋りしたい！
↓
でもゆかりさんのデータが無いから人工知能作れない・・・。
↓
そうだ！僕が人工知能になればいいんだ！！
---------------------------------------------------------------
・解説記事「ディープラーニングの力で人工知能になって結月ゆかりと会話してみた」
https://blog.hiroshiba.jp/talk-to-yuduki-yukari-with-deep-learning-power/
・解説記事「ディープラーニングを使って自分を模した人工知能を作って会話してみた」
https://qiita.com/Hiroshiba/items/b4daca0176af5fd352a2
・デモ動画「【生放送】ゆかりさんがマスター（を模した人工知能）とお話」
https://www.nicovideo.jp/watch/sm34723546
・ソースコード（Python+Chainer）「自分のチャットボットを作る」
https://github.com/Hiroshiba/hihobot
・声質変換の解説動画「ディープラーニングの力で結月ゆかりの声になってみた」
sm32724409
・ゆかりさん関連マイリスト
mylist/63405223
・毎日放送してるコミュ
co3686550
・ツイッター
https://twitter.com/hiho_karuta
・スペシャルサンクス
@AkishoMK2
私、ボイスロイドになります！！【ディープラーニングで結月ゆかりの声になるリポジトリ】
知ってるか？
ボイロ勢は3つに分けられる
ー動画を作るやつ
ー妄想に生きる奴
ー自分がボイロになる奴
あいつはー
---------
ヒホ様のディープラーニングの力で結月ゆかりの声になってみた(sm32724409)のリポジトリを使わせていただいて東北きりたんっぽいボイスになってみました。
本っ当っっに素晴らしいです。初めて出力したボイスを聞いた時には強い感動を覚えましたね。
え？きりたんに聞こえない？申し訳ない。まだ700文近くしか学習させられてないので…進捗によってはノイズキャンセリングマイク使ってもうちょっときれいな感じのきりたんになれ…たらいいなあ…
あとゆかきりははやるべき。ゆかきりは世界を救います。
導入方法など解説してくださっているサイト→https://qiita.com/atticatticattic/items/575d71dab4ee716e4969
--------
歌ってみた→ sm34745847
Beatsaber→sm34881052
きりたんボイス→mylist/65160705
スカイリム → mylist/63822762
ゆかりソースを使って音質変換に挑戦する#6
音質変換に挑戦します#6
前回の動画
https://www.nicovideo.jp/watch/sm34214534
次の動画
xxx
-- 次回予告
分散学習の組み込み
学習途中での保存・再開
アバター変更について
結月ゆかりになる RTA 1：49：50
結月ゆかりになってみました。ついでにRTAしました。
後悔はしていない。
技術紹介記事
https://qiita.com/toda_necgene/items/bfd5da79cdbfdc3be6c6
ソースコード
https://github.com/toda-necgene/VRC_Project
ゆかりソースを使って音質変換に挑戦する#5_2
音質変換に挑戦します#5_2
前回の動画
https://www.nicovideo.jp/watch/sm34202036
次の動画
https://www.nicovideo.jp/watch/sm34369070
※98ファイルのパラレルデータを588ファイルにして動作させてます。
ゆかりソースを使って音質変換に挑戦する#4
音質変換に挑戦します#4
前回の動画
https://www.nicovideo.jp/watch/sm34179010
次の動画
https://www.nicovideo.jp/watch/sm34202036
※98ファイルのパラレルデータで動作させてます。
ゆかりソースを使って音質変換に挑戦する(音声プロット2)
第一段階の音質変換と第二段階の高音質高速化をプロットした音声
スペクトログラム、メルケプストラムを0-1に正規化
前回の動画
https://www.nicovideo.jp/watch/sm34174153
次の動画
https://www.nicovideo.jp/watch/sm34194658
▪️グラフの説明
第一段階音質変換後（スペクトログラム）↖︎ ↗︎ 第二段階高音質高速化後（スペクトログラム）
第一段階音質変換後（メルケプストラム）↙︎ ↘︎ 第二段階高音質高速化後（メルケプストラム）
高音質高速化は第二段階のpix2pixを使って第一段階音質変換後音声と
ゆかり音声のスペクトログラムをINPUTとしたため、高音質化と言いつつ音質変換もしていそう。