キーワード Colab が含まれる動画 : 187 件中 1 - 32 件目
種類:
- タグ
- キーワード
対象:
オリジナル曲
作品コンテストに参加しています。(Lenovo MTV CO:LAB)ぜひ投票願います!ここです!VOTE ME!http://www.project-colab.com/showcase/shortlisted/art?country=jp
AIでダンス映像の動きをキャラタへ変換(1)(OpenPose&MMD)
MMD自動トレース使ってみました(その1:ダンス編)
MMD自動トレース作者:miu200521358 様
トレース用素材動画:七河みこ 様
トレース用素材音楽:みきなつみ様(3月18日(水)リリースの3rdデジタルシングル「君にだけバレて欲しいな」)
モデル作者: Moskva様式藤崎由愛 ver3.0様
miu様のcolab版MMD自動トレースは、便利ですごいです。
高度なAI技術でOpenPoseを利用されていて勉強になります。
avi形式の動画ファイルから、MMD用のモーションを自動生成します。
上下左右の動きだけでなく、奥行き方向の精度も高い、優れものです。
MMDモーショントレース自動化キットライセンス
https://ch.nicovideo.jp/miu200521358/blomaga/ar1686913
AIで体操床演技の映像の動きをキャラタへ変換(OpenPose&MMD)
MMD自動トレース使ってみました(その1:床体操編)
MMD自動トレース作者:miu200521358 様
トレース用素材動画:畠田千愛 様
モデル作者: Mirai_Akari_v1.0様
miu様のcolab版MMD自動トレースは、便利ですごいです。
高度なAI技術でOpenPoseを利用されていて勉強になります。
〇課題
足が地面に引っ張られて回転しないです(´;ω;`)ウッ…
全てに初心者なので、
MMDの設定なのかな?
AI技術OpenPoseなどの特性なのかな?
とか検討違いのこと書いてたらすみませんm(__)m
MMDモーショントレース自動化キットライセンス
https://ch.nicovideo.jp/miu200521358/blomaga/ar1686913
AIでダンス映像の動きをキャラタへ変換(2)(OpenPose&MMD)
MMD自動トレース使ってみました(その2:ダンス編)
MMD自動トレース作者:miu200521358 様
トレース用素材動画:やこまぺんた 様
トレース用素材音楽:恋愛裁判 様
モデル作者: ねぐも、ながなみ、SisterPrincess可憐様
複数人数なのでトレースのパラメータ設定が必要
・最初の反転指定は実施済みで、人物反転開始映像には対応できました
・順番指定を実施していないので、メンバー交差の時、追跡がうまくいってないです
miu様のcolab版MMD自動トレースは、便利ですごいです。
高度なAI技術でOpenPoseを利用されていて勉強になります。
avi形式の動画ファイルから、MMD用のモーションを自動生成します。
上下左右の動きだけでなく、奥行き方向の精度も高い、優れものです。
MMDモーショントレース自動化キットライセンス
https://ch.nicovideo.jp/miu200521358/blomaga/ar1686913
AIでダンス映像の動きをキャラタへ変換(4)(OpenPose&MMD)
MMD自動トレース使ってみました(その4:ダンス編)
MMD自動トレース作者:miu200521358 様
トレース用素材動画:owoかや 様
トレース用素材音楽:こいだん 様
MMDモデル: Mirai_Akari_v1.0 様、洋館書庫-白ステージ 様
結果
・後半の手の細かい動きは、トレースできず
→これはOpenPoseの限界というか、トレースは手首までで手先は対象外ですかね
・後半の上半身アップシーンでトレースできず
→これもOpenPoseの限界というか、姿勢推定AIでは対象外ですかね
・映像の背景が変わっても、人物の画角・大きさが変わらなければ対応できてありがたいです
miu様のcolab版MMD自動トレースは、便利ですごいです。
高度なAI技術でOpenPoseを利用されていて勉強になります。
avi形式の動画ファイルから、MMD用のモーションを自動生成します。
上下左右の動きだけでなく、奥行き方向の精度も高い、優れものです。
MMDモーショントレース自動化キットライセンス
https://ch.nicovideo.jp/miu200521358/blomaga/ar1686913
海外の方がAIで生成したメカ画像がなんかすごい
転載です。
https://drive.google.com/drive/folders/1wfWbU4bB0t_EDmC0OzxErmgrERl3zVb2?usp=sharing
https://drive.google.com/file/d/1MMnlT4Ex5wE9VzETcUNRBk35RQe1Rr1q/view?usp=sharing
https://colab.research.google.com/github/Hephyrius/Stylegan2-Ada-Google-Colab-Starter-Notebook/blob/main/Stylegan2_Ada_Colab_Starter.ipynb#scrollTo=UEwqxKzY-dWZ
【第七話】Loose Lips(SIDE:foggy)【BLドラマゲーム】予告動画
トール・カサイ容疑者、緊急逮捕!
窮地に陥るカサイを救い出せるのはただ一人、死刑囚のセディだけ
――――しかし、セディもまた精神を追い込まれて行く
『Loose Lips(SIDE:foggy)』
⚠第七話【3月下旬】公開予定⚠
◆
【公式サイト】
https://ll.likemadgames.com/
【製品版】
https://www.dlsite.com/bl/work/=/product_id/RJ267119.html
【体験版】
https://game.nicovideo.jp/atsumaru/games/gm14190
◆
Director
LIKEMAD_GAMES
https://likemadgames.com/
Cast
秋月勇人様 https://twitter.com/akitsuki_yuto
神宮厚生様 https://ci-en.dlsite.com/creator/3629
葉山九五様 https://twitter.com/kyugohayama
武田直人様 https://nao-samuraivoice.wixsite.com/...
丸山徹様 https://twitter.com/maruyama_tooru
岡田みほ様 https://twitter.com/himi1201
ともにん様 https://twitter.com/sek_tomo
冬木兎衣様 https://twitter.com/fuyugasuki_ui
六夕七月様
Song
Melancholicose by Phazor
(c) copyright 2011 Licensed under a Creative Commons Attribution (3.0) license.
http://dig.ccmixter.org/files/aerosol... Ft: colab, Vidian
Sound
News Intro by Maximilien
Mike Koenig by Cop Car And Helicopter
Video
Vidsplay.com
Supporter
名前未定(仮)様 https://freegame-mugen.jp/simulation/...
Mint様
7様
COEIROINKがVer1.0.0 になったので、外郎売 壱の段落読んでもらった
COEIROINK on VOICEVOXがVer1.0.0 になって色々変わったようなので、収録音声さんに外郎売 壱の段落を読んでもらいました。
順番はつくよみちゃん(れいせい→おしとやか→げんき)、MANAさん、おふとんP、ディアちゃん、アルマちゃんです。
以前から使っている外郎売のテキストファイルを改行等なしで利用。
アクセント部、語の区切りと読みの編集のみであとはデフォの設定を適応しています。
COEIROINKとはシロワニさんによって開発されている、無料で使えるAIトークソフトです。
無料とは思えないクオリティなので、とてもすごいです。
遊んでるとすごい勢いで時間が溶けていきます。
今後はGoogle Colab?を用いてユーザーが独自に音声を作成できるようになっていくようですね。
目標は100以上とのことなので、今後どういう感じの人が追加されるんだろうなとか、ワクワク要素がたくさんです。
COEIROINK公式サイト
https://coeiroink.com/
シロワニさんTwitter
https://twitter.com/shirowanisan
声の方のTwitterアカウント(うぷ主の適当調べによる適当列挙なので、間違ってたらごめんなさい)
つくよみちゃん https://twitter.com/TYC_Project
鹿仲茉菜さん https://twitter.com/manakana_VT
おふとんP https://twitter.com/joumonsugi
ディアちゃん、アルマちゃん https://twitter.com/diamante_prs
こちらの方々には面白いものを提供いただいているので、本当に感謝です。
【千代おちゃこ】日本国憲法 前文【TALQu新音源デモ】
「バーチャル・シンガーでお茶っこおうた部」第10弾!
昨年UTAUオリジナル音源「千代おちゃこ」(センシロ オチャコ)をつくったお茶っこ、今度は深層学習系読み上げソフト「TALQu」(トーク)のオリジナル音源もつくっちゃいました!
おしゃべりデビューで読み上げてもらったのは、皆さんご存じ「日本国憲法」の前文です。
施行以来、75年経った現在もなおその内容について議論され続けている日本国憲法前文。
生身の人間の朗読より、機械に淡々と読み上げてもらった方が、かえって冷静に内容を吟味できるのかもしれません。
あえて機械っぽさを残したかったのと、新音源デモということもあり、調声はせずに仕上げました。
無調声でもここまでおしゃべりできるんだから凄い!
いろいろ荒削りのテスト音源ですが、これからさらにレベルアップしていけたら良いなと思ってます。
こんなに凄いのになんと無料で使えちゃうTALQu、魅力的な音源や、音源を使った素敵な作品もたくさん公開されています。ぜひいろいろチェックしてみてください!
(高品質な音源は、無調声でもすごく自然です!多彩な感情表現もできてビックリ!)
【TALQu千代おちゃこ(テストタイプ)概要】
・Haruqaコーパス2.0ベリーイージーエディションを使用しました。
https://colab.research.google.com/drive/1gZe8-ls6ouV9aMwdFxh0DufsJon6iWNH?usp=sharing
・使用コーパス:Haruqaコーパステキスト(2500文)
・学習回数:5000
【動画使用素材】
・日本国憲法(e-Gov法令検索)
https://elaws.e-gov.go.jp/document?lawid=321CONSTITUTION
・ウィキメディア・コモンズ (Wikimedia Commons)
https://commons.wikimedia.org/wiki/File:Japanese_diet_outside_Kokkaigijido-1946.gif?uselang=ja
・Oradano明朝GSRRフォント
http://www.asahi-net.or.jp/~sd5a-ucd/freefonts/Oradano-Mincho/
企画・制作
♀×♀お茶っこ飲み会・仙台(宮城県仙台市)
blog
https://blog.goo.ne.jp/ochakkonomi
Twitter
https://twitter.com/ochakkonomi
【あみたろ】しぐたろいどの使い方解説【フリモメン&ずんだもん】
「しぐたろいど」はGoogle colabを応用して作られた音声合成ブラウザツールで、スマホからでも、パソコンからでも音声合成ができます。パソコンでの動作は問題有りませんでしたが、スマホの場合、音声の保存が不可能だったので、動画編集アプリ「Inshot Pro」を使用して、画面収録した音声合成の音声のみオーディオに抽出して動画に貼り付ける形で、音声利用ができました。
MY COEIROINKと並び称される(PCでしか使えない)かと思いきや、スマホでこの品質で音声合成できるのであれば、パソコンよりは手間はかかりますが、スマホだけで音声合成解説動画を作れるということになります。おそらく、スマホでも使える、という点において、音声の保存がSafari、Chrome、Googleアプリのどれでもできない(Inshotの機能でカバーできる)点を無視すれば、相当強いウェブサービスかと思います。
【クレジット】
あみたろ
https://amitaro.net/
しぐたろいど
https://twitter.com/seichi25
https://amitaro.net/wp/20220321_01/
ずんだもん
https://booth.pm/ja/items/3451659
ロサ(ROSA)
https://rosa.zan-shin.net/
フリモメン
https://www.ah-soft.com/pitagoe/frimomen/
Recotte Studio
https://www.ah-soft.com/rs/
VMagicMirror
https://booth.pm/ja/items/1272298
OBS Studio
https://obsproject.com/ja
BGM「いい天気だね」Dova-syndrome
MYCOEIROINKが作れるようになったので作成して、外郎売 壱の段落読ませた
COEIROINKで自作合成音声モデル(MYCOEIROINK)を作れるようになったので、実際に作ってみました。
以前から使っている外郎売のテキストファイルを改行等なしで利用。
アクセント部、語の区切りと読みの編集のみであとはデフォの設定を適応しています。
COEIROINKとはシロワニさんによって開発されている、無料で使えるAIトークソフトです。
無料とは思えないクオリティなので、とてもすごいです。
遊んでるとすごい勢いで時間が溶けていきます。
2022年4月2日から、Google Colabを用いてユーザーが独自に音声を作成できるようになりました。
ITAコーパスを読み上げた音声ファイルを学習して作成していくみたいですね。
これは伝聞情報ですが、GoogleColabに課金すれば大体1日で作れるみたいですね。
無課金でも普通に遊べるので今回この動画を作成しました。
自分の場合は色々やって5日ほどで作成しました。
あと、MYCOEIROINK作成ページの作業指示が分かりやすすぎて神なので、それを見るだけでとても勉強になります。
ITAコーパスの録音には適当なコンデンサマイクとNVIDIA Broadcastとかっていう名前のノイズ除去ソフトを使いました。
慣れていないのと、合間を見つけてやっていたので3日(実働7時間くらい?)かかりました。
そんなの面倒って方は、あみたろ様がMYCOEIROINKに利用していいよという形で、ITAコーパス読み上げ音声を公開してくださっているので、ぜひそれを使って遊びましょう。
COEIROINK公式サイト
https://coeiroink.com/
シロワニさんTwitter
https://twitter.com/shirowanisan
ITAコーパスの文章リストの公開ページ
https://github.com/mmorise/ita-corpus
あみたろ素材工房様 あみたろITAコーパス読み上げ音声 for MYCOEIROINKのページ
https://amitaro.net/wp/ita_formycoeiroink/
他にもITAコーパス文章リスト編纂?にかかわった人や、VOICEVOX開発チームなどなど...ほかにも沢山の方々の成果が積み重なってできています。
月並みですが、本当にすごいなって感じます。
こちらの方々には面白いものを提供いただいているので、本当に感謝です。
だめだね(里見灯花)
Dame Da Ne(だめだね)が超簡単に作れるツール『だめだねメーカー』
https://give-shot.com/damedane-maker/
だめだねメーカー/Damedane Maker
https://colab.research.google.com/drive/1PSmW3pRdEK75pnx3M7QRBlZLTExgWDIS?usp=sharing
マギアレコード 魔法少女まどか☆マギカ外伝【里見灯花】iPhone8(750 x 1334) 壁紙 #163854
https://wallpaperboys.com/163854
だめだね(疾走ドラスティックラバー)
笠音君と月咲君とヒコ様と八雲のNGも入れる予定だったが途中からサイトの接続調子が悪くなってしまいできなかった…。すまん…。
Dame Da Ne(だめだね)が超簡単に作れるツール『だめだねメーカー』
https://give-shot.com/damedane-maker/
だめだねメーカー/Damedane Maker
https://colab.research.google.com/drive/1PSmW3pRdEK75pnx3M7QRBlZLTExgWDIS?usp=sharing
【無料】GPUなしでStable Diffusionのimg2imgがColabで簡単動作!【商用利用可能】
(2023年1月8日追記)この動画の情報は古くなったのでお勧めしません。以下の動画でColabをメンテナンスしているので、良かったら見ていただけたら嬉しいです。
WD1.4を使ったワークフローをAUTOMATIC1111版WebUIで学ぶ
sm41602488
※ブラウザはGoogle Chromeが一番相性がいいです。
※画像のアップロードで動かない場合があり、クッキーの使用が禁止されてる可能性があります。
【動画目次】
#01:23 HuggingFaceのアカウントを作成
■Stable Diffusionのimg2imgが動作するGoogle Colabratoryを日本語翻訳したもの
https://colab.research.google.com/gist/thx-pw/6b1b82891b0a4da8ff0c6e6fd97c9978/img2img8_22_v3_jp.ipynb
■使用したStable Diffusionのモデル
https://huggingface.co/CompVis/stable-diffusion-v-1-4-original
■参考にしたredditの投稿
https://www.reddit.com/r/StableDiffusion/comments/wv2msc/stable_diffusion_img2img_google_collab_setup_guide/
■YouTubeもよろしく!
https://www.youtube.com/channel/UCdSArCQC3yg_lkhGxixfh3g
【使用した絵】
■AvatarSample_G(Victoria Rubin)
https://vroid.pixiv.help/hc/ja/articles/360014900233-AvatarSample-G
【使用した音】
■VOICEVOX
https://voicevox.hiroshiba.jp/
冥鳴ひまり
■ニコニ・コモンズ
https://commons.nicovideo.jp/
パステルハウス
【無料】Textual Inversionの紹介【Waifu Diffusion・Stable Diffusion】
□ここから追記□
1時間ごとにColabが動いているのかを見に行く必要がありました。
Colabに90分ルールという制限があって、90分間マウスやキーボードに触れないと全部削除されます。
以下、動画で間違えている呼び方
.ptや.binファイル → 学習済みデータ
pickleの読み方 → ピクル
AUTOMATIC1111版でのTextual Inversionの記事を見つけたので参考にURLを貼ります。
https://rentry.co/zk4u5#textual-inversion-on-automatic1111-web-ui
□ここまで追記□
■動画目次
#00:00 前置き
#01:08 SD concepts libraryの使い方
#04:32 SD concepts libraryにアップロード
#09:20 AI学習禁止ができるかどうか
■Stable Diffusion concepts library
https://huggingface.co/sd-concepts-library
■AUTOMATIC1111版webUIを改造したもの
https://colab.research.google.com/github/thx-pw/stable-diffusion-webui-colab/blob/main/colabs/stablediffusion_webui.ipynb
■AUTOMATIC1111版webUIの機能一覧
https://github.com/AUTOMATIC1111/stable-diffusion-webui-feature-showcase
■HuggingFaceのアカウントを作る動画
sm40977760
■YouTubeもよろしく!
https://www.youtube.com/channel/UCdSArCQC3yg_lkhGxixfh3g
AI画像生成「Stable Diffusion」 の動画版【Deforum Stable Diffusion】でテキストからムービーを生成してみた。モチーフは”18世紀の肖像画”。
AI作画ができるPythonプログラムStable Diffusionの動画版 Deforum Stable Diffusion を使ってみた。
「18世紀の肖像画、花、ロセッティ風、ブーグロー風、ミュシャ風の絵柄」などの単語や短い文章を英語でプログラムに与えてやると、文字から画像を生成できる。時間に沿って背景の雲の量を増やす、とか花の色や量を変える、人物の目を閉じさせる、などの指定を文字で指定すると、そのような変化を加えてくれたりもする。
以下のリンクで GoogleColabを使ってブラウザ上からDeforum Stable Diffusionを使えます。 https://colab.research.google.com/github/deforum/stable-diffusion/blob/main/Deforum_Stable_Diffusion.ipynb
同じDeforum Stable Diffusionを、Githabからプログラムを自分のPCにダウンロードして使う場合は、このページからできる。
https://github.com/HelixNGC7293/DeforumStableDiffusionLoc
这是一只花臼
花臼usu的b站空间:
https://space.bilibili.com/9983449
制作网站以及教程:
https://square01.gitee.io/2022/02/23/petpet/
原神派蒙语音合成链接:
https://colab.research.google.com/drive/1HDV84t3N-yUEBXN8dDIDSv6CzEJykCLw
【NEUTRINOカバー】ツイッターランド covered by ずんだもん【ずんだもんが歌ってみた】
ずーろんますく「この呼吸を褒めて」
元動画
「ツイッターランド / miku」
https://www.nicovideo.jp/watch/sm40023005
楽曲 : STEAKA 様
イラスト:しろくろ 様
使用UST
【UTAU音源配布】ツイッターランド【鳴音レイ】+ust
https://www.nicovideo.jp/watch/sm40165546
作成 : A子 様
ボーカル
NEUTRINO(v1.3.0) ずんだもん(v1.3.2)
google colab版で出力→NSF版使用
ずんだもんLive2Dモデル
「ずんだもんLive2Dモデル使用方法」
https://www.nicovideo.jp/watch/sm40935216
製作者 めぃまぁ 様
wavファイル
https://drive.google.com/drive/folders/14Fo653JmC7rXXXoK9jp6nmqqU5941IMc?usp=share_link
【NEUTRINOカバー】メンタルチェンソー covered by ずんだもん【ずんだもんが歌ってみた】
クロノトリガーのラスボスみたいになっちゃった
元動画
【公式】 メンタルチェンソー/かいりきベア feat.初音ミク
https://www.youtube.com/watch?v=HbSMzi9niVg
楽曲 : かいりきベア/Kairiki bear 様
イラスト:のう(Twitter:@nounoknown) 様
【MV】メンタルチェンソー /P丸様。【かいりきベア】
https://www.nicovideo.jp/watch/sm38641096
ボーカル P丸様。 様
参考にしたUST
メンタルチェンソー/愛〆メメ,ミツキ・シズカ/UTAUカバー+ust
https://www.nicovideo.jp/watch/sm38533381
作成 : 心汰(m 様
ボーカル
NEUTRINO(v1.3.0) ずんだもん(v1.3.2)
google colab版で出力→NSF版使用
ずんだもんLive2Dモデル
「ずんだもんLive2Dモデル使用方法」
https://www.nicovideo.jp/watch/sm40935216
製作者 めぃまぁ 様
wavファイル
https://drive.google.com/drive/folders/10rXrINH1BqMK0mdueaC4acVRWxix3jxn?usp=share_link
MMVCのヘルパーアプリケーション VC Trainer & Playerについて、ざっくり紹介 (旧バージョン。最新情報は説明文を見てね。)
この動画は少し古いです。次のURLで最新版を公開しています。
https://www.nicovideo.jp/watch/sm41507891
-------------------
VC Trainer & Playerは、AIを使ったリアルタイムボイスチェンジャMMVCのヘルパーアプリケーションです。MMVCの仕様に合わせて作成された音声録音アプリ、トレーニングアプリ、ボイチェンアプリを提供しています。
MMVCに特殊な部分の多くをユーザから隠しているのでとても使いやすくなっていると思います。興味を持たれましたら是非使ってみてください。
https://github.com/w-okada/voice-changer
MMVC: https://github.com/isletennos/MMVC_Trainer
■ シリーズ
概要編 ←これ
ボイチェンができるまで
- ユーザー音声の録音編
- AIトレーニング編
- VC実施編
(1) Colabでボイチェン編
(2) PCでボイチェン編
- 番外編
(1) WSL2とDocker(CPU版)のインストール
(2) WSL2とAnacondaのインストール
(3) WSL2とDocker(GPU版)のインストール
■ 謝辞
VOICEVOX:ずんだもん、春日部つむぎ、九州そら
VC Trainer & Player: ボイチェンができるまで。「ユーザー音声の録音編」 (旧バージョン。最新情報は説明文を見てね。)
この動画は少し古いです。次のURLで最新版を公開しています。
https://www.nicovideo.jp/watch/sm41507901
VC Trainer & Playerは、AIを使ったリアルタイムボイスチェンジャMMVCのヘルパーアプリケーションです。MMVCの仕様に合わせて作成された音声録音アプリ、トレーニングアプリ、ボイチェンアプリを提供しています。
MMVCに特殊な部分の多くをユーザから隠しているのでとても使いやすくなっていると思います。興味を持たれましたら是非使ってみてください。
https://github.com/w-okada/voice-changer
録音アプリのURLはこちら
https://w-okada.github.io/voice-changer/
今回はユーザー音声の録音について説明しています。
■ シリーズ
概要編
ボイチェンができるまで
- ユーザー音声の録音編 ←これ
- AIトレーニング編
- VC実施編
(1) Colabでボイチェン編
(2) PCでボイチェン編
- 番外編
(1) WSL2とDocker(CPU版)のインストール
(2) WSL2とAnacondaのインストール
(3) WSL2とDocker(GPU版)のインストール
■ 謝辞
VOICEVOX:ずんだもん、春日部つむぎ、九州そら
VC Trainer & Player: ボイチェンができるまで。「Colabでボイチェン編」 (旧バージョン。最新情報は説明文を見てね。)
この動画は少し古いです。次のURLで最新版を公開しています。
https://www.nicovideo.jp/watch/sm41507901
VC Trainer & Playerは、AIを使ったリアルタイムボイスチェンジャMMVCのヘルパーアプリケーションです。MMVCの仕様に合わせて作成された音声録音アプリ、トレーニングアプリ、ボイチェンアプリを提供しています。
MMVCに特殊な部分の多くをユーザから隠しているのでとても使いやすくなっていると思います。興味を持たれましたら是非使ってみてください。
https://github.com/w-okada/voice-changer
録音アプリのURLはこちら
https://w-okada.github.io/voice-changer/
今回はユーザー音声の録音について説明しています。
■ シリーズ
概要編
ボイチェンができるまで
- ユーザー音声の録音編
- AIトレーニング編
- VC実施編
(1) Colabでボイチェン編 ←これ
(2) PCでボイチェン編
- 番外編
(1) WSL2とDocker(CPU版)のインストール
(2) WSL2とAnacondaのインストール
(3) WSL2とDocker(GPU版)のインストール
■ 謝辞
VOICEVOX:ずんだもん、春日部つむぎ、九州そら
VC Trainer & Player: ボイチェンができるまで。「ユーザー音声の録音編」 (v.1.1)
VC Trainer & Playerは、AIを使ったリアルタイムボイスチェンジャMMVCのヘルパーアプリケーションです。MMVCの仕様に合わせて作成された音声録音アプリ、トレーニングアプリ、ボイチェンアプリを提供しています。
MMVCを使用するうえで手間がかかる部分を自動化ているのでとても使いやすくなっていると思います。興味を持たれましたら是非使ってみてください。
https://github.com/w-okada/voice-changer
今回はユーザ音声の録音について説明しています。
■ シリーズ
ボイチェンができるまで
- ユーザー音声の録音編 ← 今回の動画
- AIトレーニング編
- VC実施編
(1) Colabでボイチェン編
(2) PCでボイチェン編
- 番外編
(1) WSL2とDocker(CPU版)のインストール
(2) WSL2とAnacondaのインストール
(3) WSL2とDocker(GPU版)のインストール
■ 謝辞
VOICEVOX:ずんだもん、春日部つむぎ、九州そら 玄野武宏
だめだね(弱いぞ!!)
Dame Da Ne(だめだね)が超簡単に作れるツール『だめだねメーカー』
https://give-shot.com/damedane-maker/
だめだねメーカー/Damedane Maker
https://colab.research.google.com/drive/1PSmW3pRdEK75pnx3M7QRBlZLTExgWDIS?usp=sharing
だめだね(アニムス)
Dame Da Ne(だめだね)が超簡単に作れるツール『だめだねメーカー』
https://give-shot.com/damedane-maker/
だめだねメーカー/Damedane Maker
https://colab.research.google.com/drive/1PSmW3pRdEK75pnx3M7QRBlZLTExgWDIS?usp=sharing
WD1.4を使ったワークフローをAUTOMATIC1111版WebUIで学ぶ
明けましておめでとうございます!
ずんだもん解説?に変えましたが、生成AIは変わらずに追っていきます。
本年もよろしくお願いいたします。
初心者から中級者向けです。
【使用するColab】
■stable-diffusion-webui-colab
https://github.com/thx-pw/stable-diffusion-webui-colab
【参考サイト(ありがとう!)】
■Waifu Diffusion 1.4で使えるプロンプト(英語)
https://gist.github.com/harubaru/8581e780a1cf61352a739f2ec2eef09b#prompting
【動画目次】
#00:00 Waifu Diffusion 1.4について
#00:35 基本的な使い方(ワークフロー)
#04:49 補足:RAM不足について
#05:13 補足:Waifu 1.4のyaml
#05:24 補足:Waifu 1.4のCLIP skip
#05:42 補足:拡張機能
#05:51 補足:選べるモデル
#06:11 補足:VAEについて
#06:34 補足:ngrokの使い方
#07:38 まとめ
【使用した絵】
■ずんだもん立ち絵素材
https://seiga.nicovideo.jp/seiga/im10788496
【使用した音】
■VOICEVOX
https://voicevox.hiroshiba.jp/
ずんだもん
■ニコニ・コモンズ
https://commons.nicovideo.jp/
ほんわかぷっぷー
■効果音ラボ
https://soundeffect-lab.info/
#waifudiffusion
#stablediffusion
#画像生成AI
※ngrok_authtokenが映ってますがリセットしたので大丈夫です。
※Gmailが映ってますが複垢なので大丈夫です。
【最新】Loraモデル学習をGoogle Colabで作る方法解説。Kohya LoRA Dreambooth v15.0.0使用。【Stable Diffusion】
学習リンク https://github.com/Linaqruf/kohya-trainer
sd-scripts https://github.com/kohya-ss/sd-scripts
有料記事を書きました https://note.com/shinao39/n/n16b918cca068
旧バージョン説明動画 https://youtu.be/6YOugshoyO4
Lora学習のバージョン15.0.0です。新しい設定項目が増えました。なんぞ効率よく学習を行う設定のようです。とはいえ設定の選択肢が増えて大混乱です。
チャンネル登録よろしくです https://bit.ly/shinano-sub
ウィッシュリスト https://www.amazon.jp/hz/wishlist/ls/3D0A081RG7SGQ?ref_=wl_share
Blog https://shinanomatsumoto.hatenablog.com/
note https://note.com/shinao39/
#DreamBooth
#StableDiffusion
#Lora
#generativeai
#shinanomatsumoto
【AIリマスター】のびのびサロンシップ 1440×1080
普通の動画を貼ろうとしたら、却って粗く成った。ボキッ、ア゛ッ!
CodeFormerにしたら、滑らかに成った。アァ~♥
元動画
https://www.youtube.com/watch?v=88toigLiphQ
使用ソフトウェア
CodeFormer (Google Colab) ※要Googleアカウント
https://colab.research.google.com/github/cedro3/CodeFormer/blob/master/CodeFormer_movie.ipynb
製作者様有難う御座居ます。
本素材のダウンロード
https://drive.google.com/drive/folders/1J36MuSZF51lAphtpZGYrcOl7koUtGp9L
【AIリマスター】のびのびサロンシップ2 1440×1080
動画を作る時に、もう失敗したく無い。
CodeFormerは、此処迄滑らかに成って、其儘、ピタッと貼る!
元動画
sm9232371
使用ソフトウェア
CodeFormer (Google Colab) ※要Googleアカウント
https://colab.research.google.com/github/cedro3/CodeFormer/blob/master/CodeFormer_movie.ipynb
製作者様有難う御座居ます。
本素材のダウンロード
https://drive.google.com/drive/folders/1J36MuSZF51lAphtpZGYrcOl7koUtGp9L
そういわれても / feat. 名誉会長Pのフォルマント
歌うの面倒臭いので、自分の声質を変換して男声ボカロ的なものを作ってみました。colab上でしか動かないですが。。
wav(2496) :公開後100日限定
https://104.gigafile.nu/0523-naae3385adece519fc08f58a5d3fba42c
・具体的なやり方
wavファイルとして、「ソース」と、「ターゲット」を用意します。
ソースというのは、たとえばこの場合を考えると、誰かが歌った歌唱のファイルです。ここから、ピッチ*1とコンテンツ*2を抜き出します。
ターゲットというのは、参照する音源です。この場合は、自分を、喋らせた、あるいは歌わせたwavファイルです。ここから、フォルマント*3を抜き出します。
で、自作のコードがひょいっとほいっとしてこうです。
*1:f0、あるいは音源特徴
*2:内容。平たくいえば何を歌っているかとか。具体的には歌詞の情報
*3:声道特徴、誰が歌っているかの情報
【波音リツ】Mamang Sorbetero【RVCカバー】
original by Celeste Legaspi
波音リツRVC ROCK by canon_73
RVC via Google Colab
t2i IllustriousXL via TensorArt
AIでダンス映像の動きをキャラタへ変換(3)(OpenPose&MMD)
AI
MMD自動トレース使ってみた!(その3:ダンス編)
MMD自動トレース作者:miu200521358 様
トレース用素材動画:owoかや 様
トレース用素材音楽:ハッピーシンセサイザ 様
MMDモデル: Mirai_Akari_v1.0 様、洋館書庫-白ステージ 様
結果
・最後部分でトレース反転失敗
トレースのパラメータ設定をすれば多分大丈夫だと思いますが、暇がなく断念
miu様のcolab版MMD自動トレースは、便利ですごいです。
高度なAI技術でOpenPoseを利用されていて勉強になります。
avi形式の動画ファイルから、MMD用のモーションを自動生成します。
上下左右の動きだけでなく、奥行き方向の精度も高い、優れものです。
MMDモーショントレース自動化キットライセンス
https://ch.nicovideo.jp/miu200521358/blomaga/ar1686913
