キーワード ControlNet が含まれる動画 ： 24 件中 1 - 24 件目
種類:
- タグ
- キーワード
対象:
拡散モデルとControlNet：AIがノイズから画像を生成する仕組みを解説
AIはどうやって「ノイズ」から絵を描くのか？
本動画では、画像生成AIの基本技術である「拡散モデル」と、構図やポーズを制御するための「ControlNet」について、できるだけ直感的に理解できるようにまとめています。
拡散モデルは、ざらざらしたノイズから少しずつ画像を復元していく仕組みです。一方、ControlNetは、線画・ポーズ・構図などの手がかりを与えることで、画像生成の方向性をより意図に近づける技術です。動画では、これらを「砂の山から彫刻を掘り出す」「指揮者のタクト」といったたとえを使いながら紹介しています。
なお、本動画は専門的な教材というより、個人の思考整理・理解のためのメモ的な内容です。NotebookLMを使用して作成しているため、発音や説明内容に誤り、不正確な表現が含まれる可能性があります。正確な情報や参考資料については、詳しい解説をまとめた note.com の記事をご確認ください。
https://note.com/science_totoron/n/n28c35b832089
補足・訂正・関連情報などがありましたら、ぜひコメント欄で教えてください。気軽な感想や質問も歓迎です。皆さんのコメントを通じて、内容をより正確で分かりやすいものにしていければと思います。
また、この活動は皆さまからのギフトによって支えられています。応援していただけると、今後の動画作成や学習メモの公開を続ける大きな励みになります。
【AI Music】Winter Summoner 冬将軍、日本に居座る (Suno / AI MV)
【動画紹介】
AI技術を使って作成した、オリジナル楽曲のミュージックビデオです。
【制作に使用した主なツール / Credits】
BGM・歌唱 (Music & Vocals): Suno
元画像 (Base Images): Nano Banana pro
動画生成 (Video Generation): DomoAI、Higgsfield(Klingシリーズ)
動画編集 (Video Editing): DaVinci Resolve
【生成条件について】
本動画の画像生成において、LoRA（追加学習モデル）の使用や、ベース画像の参照（Image-to-Image / ControlNet等）は一切行っておりません。 各AIサービスをデフォルト（バニラ）状態のまま使用し、すべてテキストプロンプトのみで生成しています。
【AI実験室】エクスプロージョン！ムシャクシャしてやった。
ゆる～くAI画像や動画生成の機能を試しています。
ニコニコ本社画像及び爆発音につきましては、ニコニ・コモンズから使用させていただきました。
そのため、ニコニコ本社画像に限ってはベース画像の使用をさせていただいています。
【生成条件について】
本動画のリファレンス画像生成において、LoRA（追加学習モデル）の使用や、ベース画像の参照（Image-to-Image / ControlNet等）は基本行っていません。 各AIサービスをデフォルト（バニラ）状態のまま使用し、テキストプロンプトのみで生成しています。
【AI実験室】AI生成した画像をMeshyで3Dモデルに簡単に変換したいよーって動画
ゆる～くAI画像や動画生成の機能を試しています。
【生成条件について】
本動画のリファレンス画像生成において、LoRA（追加学習モデル）の使用や、ベース画像の参照（Image-to-Image / ControlNet等）は一切行っておりません。 各AIサービスをデフォルト（バニラ）状態のまま使用し、すべてテキストプロンプトのみで生成しています。
【AI実験室】Kling O1のラストフレーム指定機能をためしてみたよーって動画
ゆる～くAI画像や動画生成の機能を試しています。
【生成条件について】
本動画のリファレンス画像生成において、LoRA（追加学習モデル）の使用や、ベース画像の参照（Image-to-Image / ControlNet等）は一切行っておりません。 各AIサービスをデフォルト（バニラ）状態のまま使用し、すべてテキストプロンプトのみで生成しています
【AI実験室】nano banana pro 2回目試してみたよ＆リップシンク試してみたよーって動画
ゆる～くAI画像や動画生成の機能を試しています。
【生成条件について】
本動画のリファレンス画像生成において、LoRA（追加学習モデル）の使用や、ベース画像の参照（Image-to-Image / ControlNet等）は一切行っておりません。 各AIサービスをデフォルト（バニラ）状態のまま使用し、すべてテキストプロンプトのみで生成しています。
【AI実験室】DomoAIのキャラ動画機能を試してみたよーって動画
DomoAIのキャラ動画という機能を試してみたよーって動画
ゆる～くAI画像や動画生成の機能を試しています。
【生成条件について】
本動画のリファレンス画像生成において、LoRA（追加学習モデル）の使用や、ベース画像の参照（Image-to-Image / ControlNet等）は一切行っておりません。 各AIサービスをデフォルト（バニラ）状態のまま使用し、すべてテキストプロンプトのみで生成しています
【AIオリジナル曲】ミートパラダイス
【動画紹介】
AI技術を使って作成した、オリジナル楽曲のミュージックビデオです。
米と肉のパラダイス。
【制作に使用した主なツール / Credits】
歌詞 (Lyrics): Google Gemini
BGM・歌唱 (Music & Vocals): Suno
元画像 (Base Images): Hedra、Google Gemini、HiggsField、Nano Banana Pro、SeaDrream、Wan、FLUX.2
動画生成 (Video Generation): DomoAI、HiggsField、Hedra
動画編集 (Video Editing): DaVinci Resolve
【生成条件について】
本動画の画像生成において、LoRA（追加学習モデル）の使用や、ベース画像の参照（Image-to-Image / ControlNet等）は一切行っておりません。 各AIサービスをデフォルト（バニラ）状態のまま使用し、すべてテキストプロンプトのみで生成しています。
【動画の取り扱いについて】
動画の無断転載や、意図と異なる文脈での切り抜き使用はご遠慮ください。
【AI実験室】FLUX.2ためしてみたよーって動画
2025年11月25日にリリースされた画像生成サービスのFLUX.2を試してみたよーって動画です。
ゆる～くAI画像や動画生成の機能を試しています。
【生成条件について】
本動画のリファレンス画像生成において、LoRA（追加学習モデル）の使用や、ベース画像の参照（Image-to-Image / ControlNet等）は一切行っておりません。 各AIサービスをデフォルト（バニラ）状態のまま使用し、すべてテキストプロンプトのみで生成しています。
【AI実験室・AI動画】未来ぽい謎バイクをAI的な女の子に運転させて都会の道路を走らせたらクールなMVができるって聞いたんですけどー！？って動画 (Suno / AI MV)
AIの道交法どうなっとんねん。
ゆる～くAI画像や動画生成の機能を試しています。
キャラクターは前回の検証動画で作成したAIぽいキャラです。
前回の動画で、Kling 2.5 turboが生成結果が良かったので今回は主にKlingを使っています。
Wanは顔の表現は良かったのだけど、バイクを無駄にアップにしたり爆発したりするので使えませんでした。
画像はNano banana pro
音楽はSunoです。
AIの鮮度は足が早いので明日には優位性が変わっているかもしれません。
そのあたりはご了承を。
【生成条件について】
本動画の画像生成において、LoRA（追加学習モデル）の使用や、ベース画像の参照（Image-to-Image / ControlNet等）は一切行っておりません。 各AIサービスをデフォルト（バニラ）状態のまま使用し、すべてテキストプロンプトのみで生成しています。
(但しAIから生成したリファレンス画像は使用しています、未来ぽい謎のバイクもAI生成です)
実験動画なのでどう扱っていただいても構いません。
でも悲しくなるので、悪意ある拡散などはやめてくださいね。
【AI実験室】いろんな動画生成モデルを試してみたよーって動画
性能とかわからないけどなるべく同じ条件で比較してみたよーって動画
ゆる～くAI画像や動画生成の機能を試しています。
【生成条件について】
本動画のリファレンス画像生成において、LoRA（追加学習モデル）の使用や、ベース画像の参照（Image-to-Image / ControlNet等）は一切行っておりません。 各AIサービスをデフォルト（バニラ）状態のまま使用し、すべてテキストプロンプトのみで生成しています
【AI実験室】nano banana pro試してみたよーって動画
ゆる～くAI画像や動画生成の機能を試しています。
【生成条件について】
本動画のリファレンス画像生成において、LoRA（追加学習モデル）の使用や、ベース画像の参照（Image-to-Image / ControlNet等）は一切行っておりません。 各AIサービスをデフォルト（バニラ）状態のまま使用し、すべてテキストプロンプトのみで生成しています。
【AIオリジナル曲】キスをするのだにょ(Suno / AI MV / 百合)
【動画紹介】
AI技術を使って作成した、オリジナル楽曲のミュージックビデオです。 女性同士の淡い恋愛模様（百合・GL）を描いています。
【制作に使用した主なツール / Credits】
歌詞 (Lyrics): Google Gemini
BGM・歌唱 (Music & Vocals): Suno
元画像 (Base Images): Hedra、Google Gemini、LitVideo、Nano Banana、SeaDream
動画生成 (Video Generation): DomoAI、LitVideo (LitAI 4.5)、Hedra
動画編集 (Video Editing): DaVinci Resolve
【生成条件について】
本動画の画像生成において、LoRA（追加学習モデル）の使用や、ベース画像の参照（Image-to-Image / ControlNet等）は一切行っておりません。 各AIサービスをデフォルト（バニラ）状態のまま使用し、すべてテキストプロンプトのみで生成しています。
【動画の取り扱いについて】
動画の無断転載や、意図と異なる文脈での切り抜き使用はご遠慮ください。
NOMANOMA(AI)
この手のAI動画って普通、動画の登場人物を他人に置き換えるのだが
あえて本人で置き換えてみた
超低画質しかなかった時代の動画を、画像1枚だけでどれだけ修復できるか。
詳しくは↓
https://github.com/Zuntan03/EasyWanVideo/wiki/%E5%8B%95%E7%94%BB%E3%81%A8%E7%94%BB%E5%83%8F%E3%81%8B%E3%82%89%E5%8B%95%E7%94%BB%E7%94%9F%E6%88%90-VI2V-%E3%83%81%E3%83%A5%E3%83%BC%E3%83%88%E3%83%AA%E3%82%A2%E3%83%AB
＞手、足、顔、目、口といった、各パーツの位置が一致しているほど、VI2V 動画生成の精度が高まります。
とのことなんだがControlNetはちょっと理解できなかった。
360度回転系LoRAや、大昔ニコニコが無料配布したAdobe Photoshop Elements14.1の変形合成を駆使して位置合わせ。
lastimage使用は控えて４秒or５秒ずつ参照画像の位置合わせしなおして生成しつづける。
「ガチャ回してから厳選」などは一切無しなので打率得意不得意が少し判ると思う。
もっとたくさん参照画像が用意できる＆高画質の動画は存在しない ペアならやってみる価値はあるかもしれないんで思いついた人は各自頑張って。
自分は疲れたので自己満足のT2V動画(UPLOAD予定無し)でものんびりやってます。
Uploaded by https://x.com/tamazo25
使用技術 EasyWanVideo KijaiFun_Vi2v
Original: Numa Numa (Gary Brolsma)
https://www.youtube.com/watch?v=Cqd1Gvq-RBY
曲：Dragostea Din Tei = 恋のマイアヒ O-Zone
顔と体の画像2枚で服を着てもらう方法 reference only stable diffusion【ゆっくり解説】【VOICEROID解説】
前回の動画では思い通りの服を着せることが出来ませんでしたが、今回はレファレンスオンリーを使用してなんとか服を着てもらおうという試みです。
ただ、完全に同じ服の再現とはいきませんので、似た服を着るとお考え下さい。
「いいね」をしていただけると掛け軸の由来をご紹介！
前回
画像一枚でキャラを半固定！ reference only レファレンスオンリー
https://www.youtube.com/watch?v=gvivdWhlg4k
■Stable diffusion関連
WEB-UI導入編
https://www.youtube.com/watch?v=JumiB0JkNHw&t=248s
Controlnet解説編
https://www.youtube.com/watch?v=VFNoy0BDNhc&t=25s
■お借りした素材
★ＳＤピコピコ結月ゆかりちゃん立ち絵
かみち様
https://seiga.nicovideo.jp/user/illust/3441836
もえそで結月ゆかりちゃん立ち絵
かみち様
https://seiga.nicovideo.jp/seiga/im5726606
★紲星あかり（デフォルメ）Ver001
aikawa_D 様
https://seiga.nicovideo.jp/user/illust/510990
MtU様
紲星あかりさん立ち絵素材 ver1.5
https://seiga.nicovideo.jp/seiga/im8013511
★琴葉姉妹のイラスト
ユメのオワリ様
ユメのオワリ様のツイッター
https://twitter.com/yumeowa
★かわいいいらすと
いやすとや様
https://www.irasutoya.com/
画像一枚でキャラを半固定！ reference only レファレンスオンリー stable diffusion【ゆっくり解説】【VOICEROID解説】
stable diffusionを使用していると、同じキャラを生成するのが大変だと実感します。
５月に追加された機能で、画像一枚でキャラを半固定（完全な固定ではないの意）するレファレンスオンリーを解説します。
これで、イメージしたキャラを生成しやすくなりますね。
ツイッターアカウント
https://twitter.com/bisyoujogimonch
「いいね」をしていただけると掛け軸の由来をご紹介！
■参考データ
■Stable diffusion関連
WEB-UI導入編
https://www.youtube.com/watch?v=JumiB0JkNHw&t=248s
Controlnet解説編
https://www.youtube.com/watch?v=VFNoy0BDNhc&t=25s
■お借りした素材
★ＳＤピコピコ結月ゆかりちゃん立ち絵
かみち様
https://seiga.nicovideo.jp/user/illust/3441836
もえそで結月ゆかりちゃん立ち絵
かみち様
https://seiga.nicovideo.jp/seiga/im5726606
★紲星あかり（デフォルメ）Ver001
aikawa_D 様
https://seiga.nicovideo.jp/user/illust/510990
★琴葉姉妹
ユメのオワリ様
https://twitter.com/yumeowa
美人を無料で無限に作成 BRAV5 stable diffusion WEB-UI【ゆっくり解説】【VOICEROID解説】
美人を生成できるPleaseBanKai様作成のBRA(Beautiful Realistic Asians) V5と操作の解説です。
と言っても解説することはほとんどないのですが…。
全くの写真に見えますので、すごい時代ですね。
解説が文字数制限で全く入らなかったので、youtubeの概要欄を参考にしてみてください。
youtube版
美人を無料で無限に作成 BRAV5 stable diffusion WEB-UI【ゆっくり解説】【VOICEROID解説】 - YouTube
https://www.youtube.com/watch?v=kcMeM6hxI1I
「いいね」をしていただけると掛け軸の由来をご紹介
ツイッターアカウント
https://twitter.com/bisyoujogimonch
■参考データ
BRA(Beautiful Realistic Asians) V5ダウンロードページ
シビタイ版
https://civitai.com/models/25494/brabeautiful-realistic-asians-v5
ハギングフェイス版
https://huggingface.co/BanKaiPls/AsianModel/tree/main
PleaseBanKai様のPixivFanbox
https://pleasebankai.fanbox.cc/posts/5942386
動画編集ロードマップ様
【Stable Diffusion】構図・アングルに関する呪文（プロンプト）
https://freeblog-video.com/stable-diffusion_prompt_angle/
■Stable diffusion関連
WEB-UI導入編
https://www.youtube.com/watch?v=JumiB0JkNHw&t=248s
Controlnet解説編
https://www.youtube.com/watch?v=VFNoy0BDNhc&t=25s
動画をAIイラストのキャラを使った動画に変換する方法！【ゆっくり解説】【VOICEROID解説】
動画をWEB-UIに読み込ませてAIイラスト動画にする方法を解説です。
私のパソコンのスペックが非力なのでいい画質でサンプルを出力できなかったのですみません。
こういう時にいいパソコンが欲しくなりますね。
作業手順は文字数制限で記述できなかったので、youtubeの概要欄からどうぞ。
(2) 動画をAIイラストのキャラを使った動画に変換する方法！【ゆっくり解説】【VOICEROID解説】 - YouTube
ツイッターアカウント
https://twitter.com/bisyoujogimonch
■Stable diffusion関連
☆WEB-UI導入方法はこちらからどうぞ。
https://www.youtube.com/watch?v=JumiB0JkNHw
☆コントロールネットの解説はこちら。
https://www.youtube.com/watch?v=VFNoy0BDNhc
☆動画の切り抜きを解説しているのはこちら
https://www.youtube.com/watch?v=9RWHERWQUjU
☆低スペックのパソコンやインストールでエラーが出て実行できない方向けのWEB-UI導入
https://www.youtube.com/watch?v=9FgpVol3Mr8
☆推しキャライラストをリアルにコスプレしてもらえる ChilloutMix stablediffusion web-ui
https://www.youtube.com/watch?v=r4FvnGFbCYA
■参考データ
オンライン動画編集サイト123APPS様
https://online-video-cutter.com/ja/video-editor
コントロールネットのモデルダウンロードページはこちら
https://huggingface.co/webui/ControlNet-modules-safetensors/tree/main
今回の手法を解説してくださった方の元動画
【ai绘画】AI视频再进化纵享丝滑 手把手教你用mov2mov插件让ai绘画动起来
https://www.youtube.com/watch?v=n5-PXi9UGJk
AIインタビュー先輩.controlnet
初投稿です。
野獣先輩のインタビューをAIでアニメ化しました。
作り方→https://civitai.com/articles/499/multi-controlnet-video-to-video-show-case-ebsynth-controlnets-en
【StableDiffusion】 AIお絵描きでアニメーションしよう（CNref編）【Deforum】
最近流行りのAIお絵描きの世界ですが、この機能を使ったアニメーション拡張機能というのが存在します。
少し前にControlNetで新機能Referenceが追加されました。
この機能、Deforumとの相性がとてもいいので、今回はその紹介です。
いつものように突貫動画ですが、何かの参考になれば。
正直、今週はお休み予定だったんですが、どうしてこうウィークリーで新技術出ますかね？
ずんだもん＆四国めたん 立ち絵：坂本アヒル様
動画サンプル＆背景各種 AIお絵描き使用
icyCheese_v10
icerealistic_v21
flat2
hairdetailer
バックミュージック等：ニコニ・コモンズ（親作品参照）
技術情報元：５ちゃんねる某板の皆様
クリックで簡単起動！google colabでWEB-UI【ゆっくり解説】【VOICEROID解説】
低スペックやエラーが原因でWEB-UIが起動しないという人もいますよね。
そんな方でもWEB-UIが使えるかもしれない方法です。
実際に低スペックのパソコンで検証してないので、この方法でもうまくいかなかったら申し訳ないです。
「いいね」をしていただけると掛け軸の元ネタをご紹介。
ツイッターアカウント
https://twitter.com/bisyoujogimonch
■関連動画
stable diffusion WEB-UI導入方法
sm41982165
controlnetを用いたポーズ指定
sm42044028
WEB-UIの紹介
sm41943468
あかりさんが20倍食って割り勘を提案した動画
sm41745315
■作業手順
1.gogleアカウントを取得して、ログインする。
↓gogleアカウント作成ページ
https://www.google.com/intl/ja/account/about/
2.camenduruさんのページに飛ぶ。
https://github.com/camenduru/stable-diffusion-webui-colab
使用したいモデルを選択
そのモデルの起動の種類のアイコンをクリック
lite → 標準
stable → 標準＋controlnetつき
nightly → 標準＋controlnetつき＋各種機能のアップデートがあれば毎日反映
3.google colabで実行
※WEB-UI実行時はgoogle colabのプログラムは実行したままにしておいてください。
■参考データ
オリジナルゲーム.com様
【AI画像生成】Google ColabでStable Diffusion web UIを動かす方法
https://original-game.com/how-to-try-stable-diffusion-web-ui-on-colab/
camenduruさんのyoutubeチャンネル
https://www.youtube.com/@camenduru/featured
美少女も思いのまま！ポーズを指定して描いてもらえる！stable diffusion WEB-UI controlnet AIイラスト
WEB-UIのcontrolnetの機能を用いて、ポーズを指定する方法を解説しました。
ツイッターアカウント
https://twitter.com/bisyoujogimonch
「いいね」をしていただけると掛け軸の元ネタをご紹介
■作業手順
1.controlnetを導入。
a.WEB-UI操作
extensionのタブを開く
Install from URLのタブを開く
上段の空欄に
https://github.com/Mikubill/sd-webui-controlnet.git
をコピペしたのちに、Installボタンをクリック。
InstalledのタブをクリックしてApply and restart UIをクリック。
b.ファイルのダウンロードと移動
こちらのリンクに移動
https://huggingface.co/webui/ControlNet-modules-safetensors/tree/main
ファイル名に「canny」または「openpose」と書いてあるものをダウンロードする。
ダウンロードしたファイルを
WEB-UIを導入したフォルダ
↓
stable-diffusion-webui
↓
extensions
↓
sd-webui-controlnet
↓
models
このmodelsフォルダに入れる
2.controlnetの操作
controlnetのメニューをクリックで開く
a.enableにチェックを入れる。
b.Preprocessorで使用したい機能を選ぶ
「canny」または「openpose」
c.modelsでPreprocessorで選択した機能に対応したmodelを選ぶ。
d.とらせたいポーズの画像を「ここに画像をドロップ」の枠にポイッとする。
e.プロンプトを入れたのちにジェネレートでイラスト生成。
■参考データ
sumopaint様
https://sumo.app/sumopaint/
posemaniacs様
https://www.posemaniacs.com/ja
デザインドール様
https://terawell.net/ja/index.php
人魚さんがギターを練習中！【3DCG＋AIリペイント・アニメーション】
人魚さんがギターを弾くようです。
CGでアニメ制作＝＞AIリペイントのテストを兼ねた作品です。
人魚モデル/ギターモデル/モーション/曲はオリジナル
ギター下手ですいません。
レコーディングのセッティング中に弾いた物が残っていたので適当に使いました(海の音を重ねました)
■この動画は何？
AIによるリペイント研究作品です。
自分のオリジナルCG作品にイラストっぽい手書き感を出す目的でStable Diffusionを使っています。
※プロンプトのみで自動で書かれる絵は使わないようにi2iベースで作っています。
元となった3DCG動画は需要があればTwitterへアップします。
指はどうせAIだとうまくリペイントできないだろうと一定の動きにしていたんですがControlNetを使ったら想像以上にちゃんと指が書けたので曲と指があんまり同期してないのがバレました