キーワード Colab が含まれる動画 : 187 件中 1 - 32 件目
種類:
- タグ
- キーワード
対象:
オリジナル曲
作品コンテストに参加しています。(Lenovo MTV CO:LAB)ぜひ投票願います!ここです!VOTE ME!http://www.project-colab.com/showcase/shortlisted/art?country=jp
AIで体操床演技の映像の動きをキャラタへ変換(OpenPose&MMD)
MMD自動トレース使ってみました(その1:床体操編)
MMD自動トレース作者:miu200521358 様
トレース用素材動画:畠田千愛 様
モデル作者: Mirai_Akari_v1.0様
miu様のcolab版MMD自動トレースは、便利ですごいです。
高度なAI技術でOpenPoseを利用されていて勉強になります。
〇課題
足が地面に引っ張られて回転しないです(´;ω;`)ウッ…
全てに初心者なので、
MMDの設定なのかな?
AI技術OpenPoseなどの特性なのかな?
とか検討違いのこと書いてたらすみませんm(__)m
MMDモーショントレース自動化キットライセンス
https://ch.nicovideo.jp/miu200521358/blomaga/ar1686913
AIでダンス映像の動きをキャラタへ変換(4)(OpenPose&MMD)
MMD自動トレース使ってみました(その4:ダンス編)
MMD自動トレース作者:miu200521358 様
トレース用素材動画:owoかや 様
トレース用素材音楽:こいだん 様
MMDモデル: Mirai_Akari_v1.0 様、洋館書庫-白ステージ 様
結果
・後半の手の細かい動きは、トレースできず
→これはOpenPoseの限界というか、トレースは手首までで手先は対象外ですかね
・後半の上半身アップシーンでトレースできず
→これもOpenPoseの限界というか、姿勢推定AIでは対象外ですかね
・映像の背景が変わっても、人物の画角・大きさが変わらなければ対応できてありがたいです
miu様のcolab版MMD自動トレースは、便利ですごいです。
高度なAI技術でOpenPoseを利用されていて勉強になります。
avi形式の動画ファイルから、MMD用のモーションを自動生成します。
上下左右の動きだけでなく、奥行き方向の精度も高い、優れものです。
MMDモーショントレース自動化キットライセンス
https://ch.nicovideo.jp/miu200521358/blomaga/ar1686913
KMR×UNRAVEL 無料の痛み
転帖自:https://www.bilibili.com/video/BV1FT4y177FD
コードアドレスは:https://colab.research.google.com/github/AliaksandrSiarohin/first-order-model/blob/master/demo.ipynb
海外の方がAIで生成したメカ画像がなんかすごい
転載です。
https://drive.google.com/drive/folders/1wfWbU4bB0t_EDmC0OzxErmgrERl3zVb2?usp=sharing
https://drive.google.com/file/d/1MMnlT4Ex5wE9VzETcUNRBk35RQe1Rr1q/view?usp=sharing
https://colab.research.google.com/github/Hephyrius/Stylegan2-Ada-Google-Colab-Starter-Notebook/blob/main/Stylegan2_Ada_Colab_Starter.ipynb#scrollTo=UEwqxKzY-dWZ
【第七話】Loose Lips(SIDE:foggy)【BLドラマゲーム】予告動画
トール・カサイ容疑者、緊急逮捕!
窮地に陥るカサイを救い出せるのはただ一人、死刑囚のセディだけ
――――しかし、セディもまた精神を追い込まれて行く
『Loose Lips(SIDE:foggy)』
⚠第七話【3月下旬】公開予定⚠
◆
【公式サイト】
https://ll.likemadgames.com/
【製品版】
https://www.dlsite.com/bl/work/=/product_id/RJ267119.html
【体験版】
https://game.nicovideo.jp/atsumaru/games/gm14190
◆
Director
LIKEMAD_GAMES
https://likemadgames.com/
Cast
秋月勇人様 https://twitter.com/akitsuki_yuto
神宮厚生様 https://ci-en.dlsite.com/creator/3629
葉山九五様 https://twitter.com/kyugohayama
武田直人様 https://nao-samuraivoice.wixsite.com/...
丸山徹様 https://twitter.com/maruyama_tooru
岡田みほ様 https://twitter.com/himi1201
ともにん様 https://twitter.com/sek_tomo
冬木兎衣様 https://twitter.com/fuyugasuki_ui
六夕七月様
Song
Melancholicose by Phazor
(c) copyright 2011 Licensed under a Creative Commons Attribution (3.0) license.
http://dig.ccmixter.org/files/aerosol... Ft: colab, Vidian
Sound
News Intro by Maximilien
Mike Koenig by Cop Car And Helicopter
Video
Vidsplay.com
Supporter
名前未定(仮)様 https://freegame-mugen.jp/simulation/...
Mint様
7様
COEIROINKがVer1.0.0 になったので、外郎売 壱の段落読んでもらった
COEIROINK on VOICEVOXがVer1.0.0 になって色々変わったようなので、収録音声さんに外郎売 壱の段落を読んでもらいました。
順番はつくよみちゃん(れいせい→おしとやか→げんき)、MANAさん、おふとんP、ディアちゃん、アルマちゃんです。
以前から使っている外郎売のテキストファイルを改行等なしで利用。
アクセント部、語の区切りと読みの編集のみであとはデフォの設定を適応しています。
COEIROINKとはシロワニさんによって開発されている、無料で使えるAIトークソフトです。
無料とは思えないクオリティなので、とてもすごいです。
遊んでるとすごい勢いで時間が溶けていきます。
今後はGoogle Colab?を用いてユーザーが独自に音声を作成できるようになっていくようですね。
目標は100以上とのことなので、今後どういう感じの人が追加されるんだろうなとか、ワクワク要素がたくさんです。
COEIROINK公式サイト
https://coeiroink.com/
シロワニさんTwitter
https://twitter.com/shirowanisan
声の方のTwitterアカウント(うぷ主の適当調べによる適当列挙なので、間違ってたらごめんなさい)
つくよみちゃん https://twitter.com/TYC_Project
鹿仲茉菜さん https://twitter.com/manakana_VT
おふとんP https://twitter.com/joumonsugi
ディアちゃん、アルマちゃん https://twitter.com/diamante_prs
こちらの方々には面白いものを提供いただいているので、本当に感謝です。
【千代おちゃこ】日本国憲法 前文【TALQu新音源デモ】
「バーチャル・シンガーでお茶っこおうた部」第10弾!
昨年UTAUオリジナル音源「千代おちゃこ」(センシロ オチャコ)をつくったお茶っこ、今度は深層学習系読み上げソフト「TALQu」(トーク)のオリジナル音源もつくっちゃいました!
おしゃべりデビューで読み上げてもらったのは、皆さんご存じ「日本国憲法」の前文です。
施行以来、75年経った現在もなおその内容について議論され続けている日本国憲法前文。
生身の人間の朗読より、機械に淡々と読み上げてもらった方が、かえって冷静に内容を吟味できるのかもしれません。
あえて機械っぽさを残したかったのと、新音源デモということもあり、調声はせずに仕上げました。
無調声でもここまでおしゃべりできるんだから凄い!
いろいろ荒削りのテスト音源ですが、これからさらにレベルアップしていけたら良いなと思ってます。
こんなに凄いのになんと無料で使えちゃうTALQu、魅力的な音源や、音源を使った素敵な作品もたくさん公開されています。ぜひいろいろチェックしてみてください!
(高品質な音源は、無調声でもすごく自然です!多彩な感情表現もできてビックリ!)
【TALQu千代おちゃこ(テストタイプ)概要】
・Haruqaコーパス2.0ベリーイージーエディションを使用しました。
https://colab.research.google.com/drive/1gZe8-ls6ouV9aMwdFxh0DufsJon6iWNH?usp=sharing
・使用コーパス:Haruqaコーパステキスト(2500文)
・学習回数:5000
【動画使用素材】
・日本国憲法(e-Gov法令検索)
https://elaws.e-gov.go.jp/document?lawid=321CONSTITUTION
・ウィキメディア・コモンズ (Wikimedia Commons)
https://commons.wikimedia.org/wiki/File:Japanese_diet_outside_Kokkaigijido-1946.gif?uselang=ja
・Oradano明朝GSRRフォント
http://www.asahi-net.or.jp/~sd5a-ucd/freefonts/Oradano-Mincho/
企画・制作
♀×♀お茶っこ飲み会・仙台(宮城県仙台市)
blog
https://blog.goo.ne.jp/ochakkonomi
Twitter
https://twitter.com/ochakkonomi
MYCOEIROINKが作れるようになったので作成して、外郎売 壱の段落読ませた
COEIROINKで自作合成音声モデル(MYCOEIROINK)を作れるようになったので、実際に作ってみました。
以前から使っている外郎売のテキストファイルを改行等なしで利用。
アクセント部、語の区切りと読みの編集のみであとはデフォの設定を適応しています。
COEIROINKとはシロワニさんによって開発されている、無料で使えるAIトークソフトです。
無料とは思えないクオリティなので、とてもすごいです。
遊んでるとすごい勢いで時間が溶けていきます。
2022年4月2日から、Google Colabを用いてユーザーが独自に音声を作成できるようになりました。
ITAコーパスを読み上げた音声ファイルを学習して作成していくみたいですね。
これは伝聞情報ですが、GoogleColabに課金すれば大体1日で作れるみたいですね。
無課金でも普通に遊べるので今回この動画を作成しました。
自分の場合は色々やって5日ほどで作成しました。
あと、MYCOEIROINK作成ページの作業指示が分かりやすすぎて神なので、それを見るだけでとても勉強になります。
ITAコーパスの録音には適当なコンデンサマイクとNVIDIA Broadcastとかっていう名前のノイズ除去ソフトを使いました。
慣れていないのと、合間を見つけてやっていたので3日(実働7時間くらい?)かかりました。
そんなの面倒って方は、あみたろ様がMYCOEIROINKに利用していいよという形で、ITAコーパス読み上げ音声を公開してくださっているので、ぜひそれを使って遊びましょう。
COEIROINK公式サイト
https://coeiroink.com/
シロワニさんTwitter
https://twitter.com/shirowanisan
ITAコーパスの文章リストの公開ページ
https://github.com/mmorise/ita-corpus
あみたろ素材工房様 あみたろITAコーパス読み上げ音声 for MYCOEIROINKのページ
https://amitaro.net/wp/ita_formycoeiroink/
他にもITAコーパス文章リスト編纂?にかかわった人や、VOICEVOX開発チームなどなど...ほかにも沢山の方々の成果が積み重なってできています。
月並みですが、本当にすごいなって感じます。
こちらの方々には面白いものを提供いただいているので、本当に感謝です。
2022年4月24日 農作業日誌P244 背景はETS2だが会話はMYCOEIROINK VOICEVOX
本日の農作業
午前 収録作業
午後 各種編集作業
普通に雨の一日になってました。少し背景用にゲーム内で動画撮影しながら、本日の動画はここ最近頑張っているMYCOEIROINKの作成の話でした。
今まで制作された音声ですが
0号1型、2型(再収録) こけし音声
音声はMYCOEIROINKの動作確認用音声
1号音声 市松音声
0号より前に収録練習として録音された変わったデータを元とした加工に挑戦した音声
2号1型、2型(低速低音)
音声は低音を強くして渋く力強く読み上げたらどうなるかで収録した場合の音声
3号1型、2型(話速変換)
音声はイントネーションに特徴を付けてかなりおかしく読んだ場合はどこまで再現出来るか実験のみ
4号音声
素敵な女性音声を目指した音声
4号を作っての感想ですが、コーパスの音名リストを読んでいる時の間の取り方がここまで影響するとは思いませんでした。これで得られた経験としては、句読点ではしっかり止めつつ、文章はペースを落としつつなめらかに読み上げるのがポイントと感じました。フラットな感じに発声を期待するなら淡々と読むのが良いみたいな?この経験を元に4号2型みたいな感じの音声を再収録しても良いかな?って思ってもいます。ただ、声優ではないのでその時の話し方に近づけるかは難しそうです。
超ガチりたいなら作業機材としてはホップガードとリフレクションフィルターもあると尚芳なのかな?
akorin
https://github.com/adlez27/akorin/releases
OREMO
https://ja.osdn.net/users/nwp8861/pf/OREMO/wiki/FrontPage
ITAコーパス
https://github.com/Haruqa/ita-corpus
MYCOEIROINK作成
https://colab.research.google.com/drive/1BqaB-Zv5RuaQp-OW0effsFVGCYwvaJ4R?usp=sharing#scrollTo=YUBWFggfUwME
だめだね(里見灯花)
Dame Da Ne(だめだね)が超簡単に作れるツール『だめだねメーカー』
https://give-shot.com/damedane-maker/
だめだねメーカー/Damedane Maker
https://colab.research.google.com/drive/1PSmW3pRdEK75pnx3M7QRBlZLTExgWDIS?usp=sharing
マギアレコード 魔法少女まどか☆マギカ外伝【里見灯花】iPhone8(750 x 1334) 壁紙 #163854
https://wallpaperboys.com/163854
だめだね(疾走ドラスティックラバー)
笠音君と月咲君とヒコ様と八雲のNGも入れる予定だったが途中からサイトの接続調子が悪くなってしまいできなかった…。すまん…。
Dame Da Ne(だめだね)が超簡単に作れるツール『だめだねメーカー』
https://give-shot.com/damedane-maker/
だめだねメーカー/Damedane Maker
https://colab.research.google.com/drive/1PSmW3pRdEK75pnx3M7QRBlZLTExgWDIS?usp=sharing
だめだね(藍家ひめな)
Dame Da Ne(だめだね)が超簡単に作れるツール『だめだねメーカー』
https://give-shot.com/damedane-maker/
だめだねメーカー/Damedane Maker
https://colab.research.google.com/drive/1PSmW3pRdEK75pnx3M7QRBlZLTExgWDIS?usp=sharing
だめだね(BUTIYO)
元動画
コーラをメントスで、破壊します 【ぶっこわしチャレンジ #001】
https://m.youtube.com/watch?v=TrHQi60Qj9c&t=8s
ぶっこわしブラザーズ YouTube
https://m.youtube.com/channel/UC3fbBdZW3JSEwYp2repAHNg
Dame Da Ne(だめだね)が超簡単に作れるツール『だめだねメーカー』
https://give-shot.com/damedane-maker/
だめだねメーカー/Damedane Maker
https://colab.research.google.com/drive/1PSmW3pRdEK75pnx3M7QRBlZLTExgWDIS?usp=sharing
だめだね(放牧されるずんだもん)
皆さんも小学生の頃にこういうだめだねをしていたと思います。
お借りした素材
放牧されるずんだもん:赤島様 https://www.nicovideo.jp/watch/sm40446024
お借りしたツール
だめだねメーカー https://colab.research.google.com/drive/1PSmW3pRdEK75pnx3M7QRBlZLTExgWDIS?usp=sharing#scrollTo=UCMFMJV7K-ag
【無料】Stable Diffusionのinpaintingを使ってColabで遊ぼう!
(2023年1月8日追記)この動画の情報は古くなったのでお勧めしません。以下の動画でColabをメンテナンスしているので、良かったら見ていただけたら嬉しいです。
WD1.4を使ったワークフローをAUTOMATIC1111版WebUIで学ぶ
sm41602488
※ブラウザはGoogle Chromeが一番相性がいいです。
※画像のアップロードで動かない場合があり、クッキーの使用が禁止されてる可能性があります。
【動画目次】
#00:34 HuggingFaceのアクセストークンを発行
■Stable Diffusionのinpaintingが動作するcolabのノートブック
https://colab.research.google.com/gist/thx-pw/dc08b4367f4136e1d93361a1ea84d51b/in-painting-with-stable-diffusion-using-diffusers-with-canvas-drawing.ipynb
■HuggingFaceのアクセスリポジトリする場所
https://huggingface.co/CompVis/stable-diffusion-v1-4
■前回の動画
sm40977760
■YouTubeもよろしく!
https://www.youtube.com/channel/UCdSArCQC3yg_lkhGxixfh3g
【使用した絵】
■AvatarSample_G(Victoria Rubin)
https://vroid.pixiv.help/hc/ja/articles/360014900233-AvatarSample-G
【使用した音】
■VOICEVOX
https://voicevox.hiroshiba.jp/
冥鳴ひまり
■ニコニ・コモンズ
https://commons.nicovideo.jp/
shuffle shuffle
【無料】KritaにSDプラグインが来たぞ!GPUなくてもcolabで動作!【Stable Diffusion】
(2023年1月8日追記)この動画の情報は古くなったのでお勧めしません。auto-sd-paint-extプラグインの方が人気があるので、「auto-sd-paint-ext」で検索したほうがよいです。
※beta3.2版で動作確認しました
■Krita
https://krita.org/jp/
■KritaのStableDiffusionベータ版プラグイン
https://www.flyingdog.de/sd/en/
■Lexica.art
https://lexica.art/
■img2imgでmodel.ckptをダウンロードする動画
https://www.nicovideo.jp/watch/sm40977760
■YouTubeもよろしく!
https://www.youtube.com/channel/UCdSArCQC3yg_lkhGxixfh3g
■Krita
https://krita.org/jp/
■KritaのStableDiffusionベータ版プラグイン
https://www.flyingdog.de/sd/en/
■Lexica.art
https://lexica.art/
■img2imgでmodel.ckptをダウンロードする動画
https://www.youtube.com/watch?v=zF9Ji0NSKR8
■ニコニコ動画もよろしく!
https://www.nicovideo.jp/user/10006015/video?ref=pc_userpage_menu
■ニコニ・コモンズ
https://commons.nicovideo.jp/
パステルハウス
shuffle shuffle
かえるのピアノ
■効果音ラボ
https://soundeffect-lab.info/
【無料】Textual Inversionの紹介【Waifu Diffusion・Stable Diffusion】
□ここから追記□
1時間ごとにColabが動いているのかを見に行く必要がありました。
Colabに90分ルールという制限があって、90分間マウスやキーボードに触れないと全部削除されます。
以下、動画で間違えている呼び方
.ptや.binファイル → 学習済みデータ
pickleの読み方 → ピクル
AUTOMATIC1111版でのTextual Inversionの記事を見つけたので参考にURLを貼ります。
https://rentry.co/zk4u5#textual-inversion-on-automatic1111-web-ui
□ここまで追記□
■動画目次
#00:00 前置き
#01:08 SD concepts libraryの使い方
#04:32 SD concepts libraryにアップロード
#09:20 AI学習禁止ができるかどうか
■Stable Diffusion concepts library
https://huggingface.co/sd-concepts-library
■AUTOMATIC1111版webUIを改造したもの
https://colab.research.google.com/github/thx-pw/stable-diffusion-webui-colab/blob/main/colabs/stablediffusion_webui.ipynb
■AUTOMATIC1111版webUIの機能一覧
https://github.com/AUTOMATIC1111/stable-diffusion-webui-feature-showcase
■HuggingFaceのアカウントを作る動画
sm40977760
■YouTubeもよろしく!
https://www.youtube.com/channel/UCdSArCQC3yg_lkhGxixfh3g
AI画像生成「Stable Diffusion」 の動画版【Deforum Stable Diffusion】でテキストからムービーを生成してみた。モチーフは”18世紀の肖像画”。
AI作画ができるPythonプログラムStable Diffusionの動画版 Deforum Stable Diffusion を使ってみた。
「18世紀の肖像画、花、ロセッティ風、ブーグロー風、ミュシャ風の絵柄」などの単語や短い文章を英語でプログラムに与えてやると、文字から画像を生成できる。時間に沿って背景の雲の量を増やす、とか花の色や量を変える、人物の目を閉じさせる、などの指定を文字で指定すると、そのような変化を加えてくれたりもする。
以下のリンクで GoogleColabを使ってブラウザ上からDeforum Stable Diffusionを使えます。 https://colab.research.google.com/github/deforum/stable-diffusion/blob/main/Deforum_Stable_Diffusion.ipynb
同じDeforum Stable Diffusionを、Githabからプログラムを自分のPCにダウンロードして使う場合は、このページからできる。
https://github.com/HelixNGC7293/DeforumStableDiffusionLoc
这是一只花臼
花臼usu的b站空间:
https://space.bilibili.com/9983449
制作网站以及教程:
https://square01.gitee.io/2022/02/23/petpet/
原神派蒙语音合成链接:
https://colab.research.google.com/drive/1HDV84t3N-yUEBXN8dDIDSv6CzEJykCLw
【Stable Diffusion】春日部つむぎの魔法界レポート「AI絵師召喚魔術」とは?【Google Colaboratory】
魔法界の皆様こんにちは、一般魔術学生の春日部つむぎです。
今回は人間界で新たに登場したAI召喚魔術とAI絵師および術式の発動までの解説をいたします。
動画内のリンクは以下の通りです。適宜ご利用ください。
2:46 Stable Diffusion お試し版 https://huggingface.co/spaces/stabilityai/stable-diffusion
3:03 Hagging Face https://huggingface.co/
3:14 Stable Diffusion v.1.4 https://huggingface.co/CompVis/stable-diffusion-v1-4
5:14 Google Colaboratory https://colab.research.google.com/
5:26 Stable Diffusion公式ブログ https://huggingface.co/blog/stable_diffusion
5:35 Stable Diffuion with diffusers https://colab.research.google.com/github/huggingface/notebooks/blob/main/diffusers/stable_diffusion.ipynb
【音楽生成AI】自動でピアノアレンジMIDIを生成!?『Pop2Piano』を使ってみる!
Pop2Piano : Pop Audio-based Piano Cover Generation
■Colab版デモ
https://colab.research.google.com/drive/1rBAs2TkryDnnQOhcM-mtlrgtL2h3ekml?usp=sharing
■githubリンク
https://github.com/sweetcocoa/pop2piano
■論文
https://arxiv.org/abs/2211.00895
■プロジェクトページ
https://sweetcocoa.github.io/pop2piano_samples/
【作業用BGM】自動作曲AIとイラストAIに挿絵付きBGM集を作ってもらおう【Mubert】
無料の作曲AI、Mubert(ミューベルト)くんと、イラストAI、Stable Diffusionくんのコンビに、
イラスト付きのBGM集を作ってもらいました。導入方法の解説もあります!(0:30~1:00)
※単体でも楽しめるように作ってありますが、偽ボイスロイド解説動画『mubert(ミューベルト)くんと遊ぼう!』のおまけ動画です。
本編で採用されたBGM22曲を単体ノーカットで、イラストは本編で採用しなかったものや新規に生成したものを大幅増量して計150枚収録しています。
作業用BGMやイラスト集としてお楽しみください。
よければ(偽)ボイスロイド実況解説の本編もご覧ください!
【ボイロ実況】自動作曲AIのmubert(ミューベルト)くんと遊ぼう!【解説動画】
sm41307617
【Mubert導入手順リンク】
1. ここから登録(Sign Up)
https://mubert.com/
2. ここで作曲
https://colab.research.google.com/github/ferluht/Mubert-Text-to-Music/blob/main/Mubert_Text_to_Music.ipynb
【NEUTRINOカバー】シンクタンク covered by ずんだもん【ずんだもんが歌ってみた】
ずんだたんく「ぼくへのほめがほしい」
元動画
「稲葉曇『シンクタンク』Vo. 裏命」
https://www.nicovideo.jp/watch/sm40978472
楽曲 : 稲葉曇 様
イラスト:ぬくぬくにぎりめし 様
ボーカル
NEUTRINO(v1.1.0) ずんだもん(v1.2.0)
google colab版で出力→NSF版使用
ずんだもんLive2Dモデル
「ずんだもんLive2Dモデル使用方法」
https://www.nicovideo.jp/watch/sm40935216
製作者 めぃまぁ 様
vocal musicxmlファイル&wavファイル
https://drive.google.com/drive/folders/1yl3meqtGfb_UJRRqnKZ5ZcQ9SIocSAiT?usp=share_link
VC Trainer & Player: ボイチェンができるまで。「ユーザー音声の録音編」 (旧バージョン。最新情報は説明文を見てね。)
この動画は少し古いです。次のURLで最新版を公開しています。
https://www.nicovideo.jp/watch/sm41507901
VC Trainer & Playerは、AIを使ったリアルタイムボイスチェンジャMMVCのヘルパーアプリケーションです。MMVCの仕様に合わせて作成された音声録音アプリ、トレーニングアプリ、ボイチェンアプリを提供しています。
MMVCに特殊な部分の多くをユーザから隠しているのでとても使いやすくなっていると思います。興味を持たれましたら是非使ってみてください。
https://github.com/w-okada/voice-changer
録音アプリのURLはこちら
https://w-okada.github.io/voice-changer/
今回はユーザー音声の録音について説明しています。
■ シリーズ
概要編
ボイチェンができるまで
- ユーザー音声の録音編 ←これ
- AIトレーニング編
- VC実施編
(1) Colabでボイチェン編
(2) PCでボイチェン編
- 番外編
(1) WSL2とDocker(CPU版)のインストール
(2) WSL2とAnacondaのインストール
(3) WSL2とDocker(GPU版)のインストール
■ 謝辞
VOICEVOX:ずんだもん、春日部つむぎ、九州そら
VC Trainer & Player: ボイチェンができるまで。「Colabでボイチェン編」 (旧バージョン。最新情報は説明文を見てね。)
この動画は少し古いです。次のURLで最新版を公開しています。
https://www.nicovideo.jp/watch/sm41507901
VC Trainer & Playerは、AIを使ったリアルタイムボイスチェンジャMMVCのヘルパーアプリケーションです。MMVCの仕様に合わせて作成された音声録音アプリ、トレーニングアプリ、ボイチェンアプリを提供しています。
MMVCに特殊な部分の多くをユーザから隠しているのでとても使いやすくなっていると思います。興味を持たれましたら是非使ってみてください。
https://github.com/w-okada/voice-changer
録音アプリのURLはこちら
https://w-okada.github.io/voice-changer/
今回はユーザー音声の録音について説明しています。
■ シリーズ
概要編
ボイチェンができるまで
- ユーザー音声の録音編
- AIトレーニング編
- VC実施編
(1) Colabでボイチェン編 ←これ
(2) PCでボイチェン編
- 番外編
(1) WSL2とDocker(CPU版)のインストール
(2) WSL2とAnacondaのインストール
(3) WSL2とDocker(GPU版)のインストール
■ 謝辞
VOICEVOX:ずんだもん、春日部つむぎ、九州そら
【Riffusion】txt2musicとmusic2musicをやるぞ!【音楽生成AI】
すみません、バグでほとんど動いていなかったです。
動画にする場合は、ニコニコモンズの派生作品なら編曲は良いようです。
他のサイトは各自気をつけてください。
【使用するColab】
■music2music
https://colab.research.google.com/github/thx-pw/riffusion-music2music-colab/blob/main/riffusion_music2music.ipynb
【参考サイト(ありがとう!)】
■Riffusionの解説(英語)
https://www.riffusion.com/about
■公式サイト(txt2music)
https://www.riffusion.com
■Riffusion によるテキストからの音楽生成を試す
https://note.com/npaka/n/n88f185dc72d2
■HuggingFaceのデモ
https://huggingface.co/spaces/anzorq/riffusion-demo
■プロンプトのwiki
https://ai-art-wiki.com/wiki/Riffusion#Prompts
■Stable Diffusion画像生成スクリプト(Diffusersベース、SD2.0、一括生成対応)
https://note.com/kohya_ss/n/n2693183a798e
【使用した絵】
■AvatarSample_G(Victoria Rubin)
https://vroid.pixiv.help/hc/ja/articles/360014900233-AvatarSample-G
【使用した音】
■VOICEVOX
https://voicevox.hiroshiba.jp/
冥鳴ひまり
■ニコニ・コモンズ
https://commons.nicovideo.jp/
shuffle shuffle
■効果音ラボ
https://soundeffect-lab.info/
#riffusion
#stablediffusion
#音楽生成AI
だめだね(弱いぞ!!)
Dame Da Ne(だめだね)が超簡単に作れるツール『だめだねメーカー』
https://give-shot.com/damedane-maker/
だめだねメーカー/Damedane Maker
https://colab.research.google.com/drive/1PSmW3pRdEK75pnx3M7QRBlZLTExgWDIS?usp=sharing
だめだね(アニムス)
Dame Da Ne(だめだね)が超簡単に作れるツール『だめだねメーカー』
https://give-shot.com/damedane-maker/
だめだねメーカー/Damedane Maker
https://colab.research.google.com/drive/1PSmW3pRdEK75pnx3M7QRBlZLTExgWDIS?usp=sharing
【原神】「あらら~□」でモールス信号作ってみた 【放浪者】【春日部つむぎ実況】
ニコニコ動画の方で初めていいねされました。嬉しいです。
古びたアララー
https://colab.research.google.com/drive/1UBzrl9_e4Kz4Mj8v5pw_63N9bp516aM7?usp=share_link
古びたへなちょこアララー
https://colab.research.google.com/drive/1yNuZz0igcwohobU_V5dTZBIy0wwuBk6F?usp=share_link
VOICEVOX:春日部つむぎ
https://voicevox.hiroshiba.jp/
春日部つむぎ立ち絵
https://tsukushinyoki10.wixsite.com/ktsumugiofficial
使用BGM
https://dova-s.jp/bgm/play710.html
https://dova-s.jp/bgm/play1022.html
hoyolabアカウント
https://www.hoyolab.com/accountCenter/postList?id=193609758
【著作権に関しまして】
動画で掲載している画像などの著作権や肖像権等は全てその権利所有者様に帰属致します。
各権利所有者様や第三者に不利益がない様配慮しておりますが、動画の内容に問題がある場合は、各権利所有者様本人からご連絡頂けましたら幸いです。
AI君「GPUが違うから同じ絵にならないです」
GPUが違うとAI君は違う絵を出すって聞いたよ!
折角だから検証してみたよ!
pixai、google colab、ローカル環境で検証したよ!
前
次 sm42376863
BGM
バラエティな12曲より Onion soul
https://www.dlsite.com/home/work/=/product_id/RJ353244.html
Twitter
https://twitter.com/ikuratio
一時停止すると見えなくなる「Bad Apple!!」
できれば720pで見てください!
YouTube: https://www.youtube.com/watch?v=GOODSQHEVXI
YouTubeのChickenMann さんの動画がおすすめで流れてきたのでこれは改良せねばならぬと思い、より見やすいものを作った。またこのバージョンでは動きの速い場面 ( 2:32 など)でもエンコーディングのブロックノイズが目立つことがない。
影絵動画のアーカイブ入手元: https://archive.org/details/TouhouBadApple
オリジナルのアイディア : https://www.youtube.com/watch?v=Myeatl2Q3wM
生成スクリプト: https://colab.research.google.com/drive/1LGM3E55uZIFKJPTyjQGJjrTKBMDR_lyM
この動画は三つの領域(白・黒・境界)が別のノイズで塗られてできています。どのノイズも純粋な乱数を表示しているだけなので、動画を停止すると領域の区別がつかなくなります。それぞれの領域は時間が進むとランダムなピクセルの乱数が別の乱数に更新されるのですが、黒・白・境界はピクセルの置換速度が異なります。 それにより、動画が再生されている間は人間の目で見て領域の違いが認識できます。
ランダムノイズの動画データ、特に高い頻度で更新されるノイズは圧縮されずらいので気を付けないと、ビットレート制限で動画がぐちゃぐちゃになってしまいます。完全ランダムRGBではなくカラーマップを使うこと、低解像度のノイズを拡大することで、圧縮されやすくしています。
境界は毎フレーム完全に新しいノイズにおきかわり、白と黒の領域はそれぞれ別の速度でゆっくりと更新されます。これで白と黒の違いを表現し、また動画に動きを付けます。動画全体ではゆっくりとした変化なのでビットレート要求値が小さめです。静止したランダムノイズを背景に表示する方法と比べ、解像度の高い静止した領域と解像度の低い動きのある領域という対比ができて停止時にも違いが見えてしまうことを防ぐ効果もあります。
