---
title: [ComfyMaster38] LoRAで動画のスタイル変えよう！
description: AnimateDiffとControlNetを組み合わせて簡単に動画をスタイル変換する方法を詳しく解説します。Creativeな動画制作を目指す方に最適です。
image: https://ja.aicu.ai/wp-content/uploads/2024/12/rectangle_large_type_2_fba3599d6a3d835999a886347ca8b682.png
---

[![AICU-LogoWT](https://corp.aicu.ai/hs-fs/hubfs/Logo/AICU-LogoWT.png?width=200&height=512&name=AICU-LogoWT.png "AICU-LogoWT")](https://aicu.ai)

Search toggle

- [AICU](https://aicu.ai/)
  
  AICU 
  
  
  
    - [Blog \[English\]](https://corp.aicu.ai/en)
    - [Blog \[Japanese\]](https://corp.aicu.ai/ja/)
    - [note](https://note.com/aicu)
    - [medium](https://medium.com/@aicu)
- [Products](https://corp.aicu.ai/ja/products)
  
  Products 
  
  
  
    - [AICU media](https://note.com/aicu/)
    - [X(Twitter)@AICUai](https://twitter.com/AICUai)
    - [日本市場向け製品](https://corp.aicu.ai/ja/products)
      
      日本市場向け製品 
      
      
      
          - [特定商取引法](https://corp.aicu.ai/jp-commercial-transactions-act)
    - [AI market dev solutions](https://corp.aicu.ai/products)
    - [LINE Chatbot \[LuC4\] 全力肯定彼氏くん](https://corp.aicu.ai/ja/tag/luc4%E5%85%A8%E5%8A%9B%E8%82%AF%E5%AE%9A%E5%BD%BC%E6%B0%8F%E3%81%8F%E3%82%93)
    - [AICuty](https://corp.aicu.ai/aicuty)
    - [Lecture](https://bit.ly/AICUCEO)
    - [AICU Creator Union Membership](https://note.com/aicu/membership/info)
    - [Pricing](https://corp.aicu.ai/ja/pricing)
- [AICU Japan](https://aicu.jp/)
- [About Us](https://corp.aicu.ai/about)
  
  About Us 
  
  
  
    - [Vision](https://corp.aicu.ai/vision)
    - [Privacy Policy](https://corp.aicu.ai/ja/privacy)
    - [Media Policy](https://corp.aicu.ai/media-policy)
    - [PRTIMES](https://prtimes.jp/main/html/searchrlp/company_id/133647)
    - [Become a partner](https://j.aicu.ai/Creg)
    - [Contact](https://corp.aicu.ai/contact)

[Follow us on Facebook](https://m.me/118997804638852?ref=klE9gy8WjnrE) [Follow us on Twitter](https://www.youtube.com/@AICuty) [Follow us on Instagram](https://twitter.com/AICUai)

[![AICU-LogoWT](https://corp.aicu.ai/hs-fs/hubfs/Logo/AICU-LogoWT.png?width=200&height=512&name=AICU-LogoWT.png "AICU-LogoWT")](https://aicu.ai)

- [AICU](https://aicu.ai/)
  
  AICU 
  
  
  
    - [Blog \[English\]](https://corp.aicu.ai/en)
    - [Blog \[Japanese\]](https://corp.aicu.ai/ja/)
    - [note](https://note.com/aicu)
    - [medium](https://medium.com/@aicu)
- [Products](https://corp.aicu.ai/ja/products)
  
  Products 
  
  
  
    - [AICU media](https://note.com/aicu/)
    - [X(Twitter)@AICUai](https://twitter.com/AICUai)
    - [日本市場向け製品](https://corp.aicu.ai/ja/products)
      
      日本市場向け製品 
      
      
      
          - [特定商取引法](https://corp.aicu.ai/jp-commercial-transactions-act)
    - [AI market dev solutions](https://corp.aicu.ai/products)
    - [LINE Chatbot \[LuC4\] 全力肯定彼氏くん](https://corp.aicu.ai/ja/tag/luc4%E5%85%A8%E5%8A%9B%E8%82%AF%E5%AE%9A%E5%BD%BC%E6%B0%8F%E3%81%8F%E3%82%93)
    - [AICuty](https://corp.aicu.ai/aicuty)
    - [Lecture](https://bit.ly/AICUCEO)
    - [AICU Creator Union Membership](https://note.com/aicu/membership/info)
    - [Pricing](https://corp.aicu.ai/ja/pricing)
- [AICU Japan](https://aicu.jp/)
- [About Us](https://corp.aicu.ai/about)
  
  About Us 
  
  
  
    - [Vision](https://corp.aicu.ai/vision)
    - [Privacy Policy](https://corp.aicu.ai/ja/privacy)
    - [Media Policy](https://corp.aicu.ai/media-policy)
    - [PRTIMES](https://prtimes.jp/main/html/searchrlp/company_id/133647)
    - [Become a partner](https://j.aicu.ai/Creg)
    - [Contact](https://corp.aicu.ai/contact)

Search toggle

[![AICU-LogoWT](https://corp.aicu.ai/hs-fs/hubfs/Logo/AICU-LogoWT.png?width=200&height=512&name=AICU-LogoWT.png "AICU-LogoWT")](https://aicu.ai)

- [AICU](https://aicu.ai/)
  
  AICU 
  
  
  
    - [Blog \[English\]](https://corp.aicu.ai/en)
    - [Blog \[Japanese\]](https://corp.aicu.ai/ja/)
    - [note](https://note.com/aicu)
    - [medium](https://medium.com/@aicu)
- [Products](https://corp.aicu.ai/ja/products)
  
  Products 
  
  
  
    - [AICU media](https://note.com/aicu/)
    - [X(Twitter)@AICUai](https://twitter.com/AICUai)
    - [日本市場向け製品](https://corp.aicu.ai/ja/products)
      
      日本市場向け製品 
      
      
      
          - [特定商取引法](https://corp.aicu.ai/jp-commercial-transactions-act)
    - [AI market dev solutions](https://corp.aicu.ai/products)
    - [LINE Chatbot \[LuC4\] 全力肯定彼氏くん](https://corp.aicu.ai/ja/tag/luc4%E5%85%A8%E5%8A%9B%E8%82%AF%E5%AE%9A%E5%BD%BC%E6%B0%8F%E3%81%8F%E3%82%93)
    - [AICuty](https://corp.aicu.ai/aicuty)
    - [Lecture](https://bit.ly/AICUCEO)
    - [AICU Creator Union Membership](https://note.com/aicu/membership/info)
    - [Pricing](https://corp.aicu.ai/ja/pricing)
- [AICU Japan](https://aicu.jp/)
- [About Us](https://corp.aicu.ai/about)
  
  About Us 
  
  
  
    - [Vision](https://corp.aicu.ai/vision)
    - [Privacy Policy](https://corp.aicu.ai/ja/privacy)
    - [Media Policy](https://corp.aicu.ai/media-policy)
    - [PRTIMES](https://prtimes.jp/main/html/searchrlp/company_id/133647)
    - [Become a partner](https://j.aicu.ai/Creg)
    - [Contact](https://corp.aicu.ai/contact)

[Follow us on Facebook](https://m.me/118997804638852?ref=klE9gy8WjnrE) [Follow us on Twitter](https://www.youtube.com/@AICuty) [Follow us on Instagram](https://twitter.com/AICUai)

Search toggle

What are you looking for?

Search

# \[ComfyMaster38\] LoRAで動画のスタイル変えよう！

 2024/12/7

![Picture of AICU Japan](https://corp.aicu.ai/hs-fs/hubfs/2023-09-20_062230-3.png?width=40&name=2023-09-20_062230-3.png) [AICU Japan](https://corp.aicu.ai/ja/author/aidx-lab) 

![\[ComfyMaster35\] LoRA動画のスタイル変えよう！](https://ja.aicu.ai/wp-content/uploads/2024/12/rectangle_large_type_2_fba3599d6a3d835999a886347ca8b682.png)

**「動画をもっと簡単に、でも個性的に作りたい」**  
そんな願いを持つクリエイターの方々に朗報です。AnimateDiffとControlNetを組み合わせることで、簡単に動画のスタイル変換が可能になります！

こんにちわ、AICU media編集部です。  
「[ComfyUI マスターガイド](https://ja.aicu.ai/comfyui20240731/)」第38回目になります。  
本記事では、前回ご紹介したAnimateDiffとControlNetを組み合わせた「video-to-video (v2v)」を応用して、参照動画のスタイルを変換してする方法を解説します。

本連載の初回は[こちら](https://ja.aicu.ai/comfyui20240731/)。前回は[こちら](https://ja.aicu.ai/comfymaster37-20241202/)、目次は[こちら](https://note.com/aicu/m/md2f2e57c0f3c)です。

**\[ComfyMaster37\] SDXL＋AnimateDiff＋IPAdapterで参照画像から動画を生成しよう！** [**#ComfyUI**](https://note.com/hashtag/ComfyUI)

## 1. 概要

この記事では、ComfyUIを使用した高度な動画生成ワークフローについて解説します。特に、AnimateDiffやControlNetを活用して動画の各フレームをスタイライズし、LoRAを用いたスタイル変換を行う手法に焦点を当てています。ComfyUIのカスタムノードを導入し、Stable Diffusionモデルを活用したスムーズなアニメーション生成や、スタイルの適用による独自の映像表現を作成するための手順を説明します。具体的には、RealVisXL V5.0 LightningモデルやSDXL Paint Splash Style、Dissolve StyleといったLoRAを使用し、参照動画をもとに動画変換を行うプロセスを詳述しています。

## 2. カスタムノードのインストール

以下のカスタムノードを使用するため、ComfyUI Managerからインストールしてください。

### ComfyUI-AnimateDiff-Evolved

ComfyUI-AnimateDiff-Evolvedは、Stable Diffusionモデルを拡張して動画生成を可能にするカスタムノードです。元のAnimateDiffを進化させたバージョンで、動画生成のためのモーションモジュールと高度なサンプリング技術を組み込んでいます。

[https://github.com/Kosinkadink/ComfyUI-AnimateDiff-Evolved](https://github.com/Kosinkadink/ComfyUI-AnimateDiff-Evolved)

### ComfyUI-VideoHelperSuite

ComfyUI-VideoHelperSuiteは、動画生成を支援するためのカスタムノードです。動画の編集や加工を容易にする機能を提供します。今回は、一連の画像を動画にして保存するノードを使用するために必要となります。

[https://github.com/Kosinkadink/ComfyUI-VideoHelperSuite](https://github.com/Kosinkadink/ComfyUI-VideoHelperSuite)

### ComfyUI-Advanced-ControlNet

ComfyUI-Advanced-ControlNetは、ControlNetの機能を強化するカスタムノードです。ControlNetの強度をタイムステップやバッチ化された潜在変数にわたってスケジュールする機能を提供します。

[https://github.com/Kosinkadink/ComfyUI-Advanced-ControlNet](https://github.com/Kosinkadink/ComfyUI-Advanced-ControlNet)

### ComfyUI-KJNodes

動画サイズのリサイズのために**ComfyUI-KJNodes**を導入します。**ComfyUI-KJNodes**は様々な便利なノードを格納しています。

[https://github.com/kijai/ComfyUI-KJNodes](https://github.com/kijai/ComfyUI-KJNodes)

[![ComfyUI 知らないの？](https://no-cache.hubspot.com/cta/default/43845236/interactive-185006873759.png)](https://corp.aicu.ai/hs/cta/wi/redirect?encryptedPayload=AVxigLJcrvz3ikneHFq2wR%2BTWf3G35AUydcpRKQ7%2Fej%2F3cebaQP7h3Nn5I5sSImVhXkLLaHUeW5iHbMk%2F0mMYZ%2FwIdPCEMWoUmS2L5BmIB1D4HyiQPi%2FPubB7CkAzLbCx23bkf1XwBFU53fREo6IiKWS54h1mhRJC9SVNL6GR4M%3D&webInteractiveContentId=185006873759&portalId=43845236&hsLang=ja)

[![画像生成 お困りですか？](https://no-cache.hubspot.com/cta/default/43845236/interactive-185263496576.png)](https://corp.aicu.ai/hs/cta/wi/redirect?encryptedPayload=AVxigLKOTLE%2BZrOeyH4Wfw75nkUDBoqjHjvEKTR1s7ZHZppZ0aXXlYmlMyX2jUajzxWMSHec%2FXdOVVtJ7Fg9Kqj07tVyWt7h61wEDBzg7k7XA9wxvOZNzLV%2BLtj2qJtRz0%2FFtDoSuqSG7oWlxjA%2BfbozQGFyyJXjlcByoAFo2YM%3D&webInteractiveContentId=185263496576&portalId=43845236&hsLang=ja)

## 3. 画像生成モデルのダウンロード

### RealVisXL V5.0 Lightning

今回は、RealVisXLのLightningバージョンを使用します。Lightningバージョンでは、サンプリングのステップ数を4-6回に抑えることができます。生成量の多いAnimateDiffでは、TurboやLightningなどの数ステップで生成完了するモデルを選ぶと良いでしょう。  
以下のリンクよりモデルをダウンロードし、「ComfyUI/models/checkpoints」フォルダに格納してください。

[https://huggingface.co/SG161222/RealVisXL\_V5.0\_Lightning/blob/main/RealVisXL\_V5.0\_Lightning\_fp16.safetensors](https://huggingface.co/SG161222/RealVisXL_V5.0_Lightning/blob/main/RealVisXL_V5.0_Lightning_fp16.safetensors)

## 4. LoRAのダウンロード

今回は、2つのLoRAを使用してスタイル変換を試してみます。

### SDXL Paint Splash Style

カラフルなインクを塗布したような画像を生成するLoRA**「SDXL Paint Splash Style」**を使用します。以下のリンクよりモデルをダウンロードし、「ComfyUI/models/loras」に格納してください。

[https://civitai.com/models/140335/sdxl-paint-splash-style](https://civitai.com/models/140335/sdxl-paint-splash-style)

### Dissolve Style

体や物の一部が崩壊していくような画像を生成するLoRA**「Dissolve Style」**を使用します。以下のリンクよりモデルをダウンロードし、「ComfyUI/models/loras」に格納してください。

[https://civitai.com/models/245889/dissolve-style-lora-15sdxl?modelVersionId=277389](https://civitai.com/models/245889/dissolve-style-lora-15sdxl?modelVersionId=277389)

## 5. ControlNetモデルのダウンロード

### ControlNet AnyTest v4

video-to-video (v2v)にControlNetの「AnyTest v4」を使用します。以下のリンクよりControlNetをダウンロードし、「ComfyUI/models/controlnet」フォルダに格納してください。

[https://huggingface.co/2vXpSwA7/iroiro-lora/blob/main/test\_controlnet2/CN-anytest\_v4-marged.safetensors](https://huggingface.co/2vXpSwA7/iroiro-lora/blob/main/test_controlnet2/CN-anytest_v4-marged.safetensors)

## 6. AnimateDiffのモーションモジュールのダウンロード

### SDXL Motion Module

今回は、SDXLのモデルで動画生成するため、SDXLのモーションモジュールをダウンロードします。使用するモデルは**「Hotshot-XL」**です。以下のリンクからモデルをダウンロードし、「ComfyUI/custom\_nodes/ComfyUI-AnimateDiff-Evolved/models」フォルダに格納してください。

[https://huggingface.co/hotshotco/Hotshot-XL/blob/main/hsxl\_temporal\_layers.f16.safetensors](https://huggingface.co/hotshotco/Hotshot-XL/blob/main/hsxl_temporal_layers.f16.safetensors)

## 7. 素材のダウンロード

v2vで使用する参照元動画を用意します。以下のダンス動画をControlNetで参照します。

[![画像](https://ja.aicu.ai/wp-content/uploads/2024/12/picture_pc_28a0b49098bdc14d55b04fc601b97fe4.gif)](https://assets.st-note.com/production/uploads/images/159730394/picture_pc_28a0b49098bdc14d55b04fc601b97fe4.gif?width=2000&height=2000&fit=bounds&quality=85)

この動画は、以下のリンクより無料でダウンロードできます。

[https://www.pexels.com/ja-jp/video/2795746](https://www.pexels.com/ja-jp/video/2795746)

## 8. ワークフローの解説

このワークフローは、入力ビデオの各フレームを変換し、スタイライズされたアニメーション動画を生成する高度な例です。ControlNetを使用して入力フレームの構造を保持しつつ、AnimateDiffで滑らかなアニメーションを生成し、LoRAでPaintSplashスタイルを適用しています。

[![画像](https://ja.aicu.ai/wp-content/uploads/2024/12/1730156181-8clWfmAeUdaS596iMxgHGu2s.png)](https://assets.st-note.com/img/1730156181-8clWfmAeUdaS596iMxgHGu2s.png?width=2000&height=2000&fit=bounds&quality=85)

文末のリンクからワークフローをダウンロードしてください。

ワークフローをフローチャート形式で表示したものが以下になります。

[![画像](https://ja.aicu.ai/wp-content/uploads/2024/12/1730156181-laDoiyGb4sS0e7QFcRd6YVHT.png)](https://assets.st-note.com/img/1730156181-laDoiyGb4sS0e7QFcRd6YVHT.png?width=2000&height=2000&fit=bounds&quality=85)

以下に、このワークフローの主要な部分とその機能を詳細に説明します。

---

[![最新情報はメールニュース  ](https://no-cache.hubspot.com/cta/default/43845236/interactive-185006873894.png)](https://corp.aicu.ai/hs/cta/wi/redirect?encryptedPayload=AVxigLKRfon2kBqCSvP%2FRhoJCDt8SOdjUi9RwliKqDoLcW82vV9cDGJtWLJlrvP9smiXcexhSqwG4WJ%2FvafprfDVMjzGSiGFFwfC5UKdsqaTUzM66Ioj0oqxOVim6tC1h8OdULmjF4CzarfU5UbwI%2B7VdRTs3ZqMVTf%2B&webInteractiveContentId=185006873894&portalId=43845236&hsLang=ja)

この記事の続きはこちらから [https://note.com/aicu/n/n8f000f1b4be2](https://note.com/aicu/n/n8f000f1b4be2)

Originally published at [https://note.com](https://note.com/aicu/n/n8f000f1b4be2) on Dec 7, 2024.

### Share:

[Share on Facebook](http://www.facebook.com/share.php?u=https://corp.aicu.ai/ja/comfymaster35-lora-20241207&utm_medium=social&utm_source=facebook) [Share on LinkedIn](http://www.linkedin.com/shareArticle?mini=true&url=https://corp.aicu.ai/ja/comfymaster35-lora-20241207&utm_medium=social&utm_source=linkedin) [Share on X](https://twitter.com/intent/tweet?original_referer=https://corp.aicu.ai/ja/comfymaster35-lora-20241207&utm_medium=social&utm_source=twitter&url=https://corp.aicu.ai/ja/comfymaster35-lora-20241207&utm_medium=social&utm_source=twitter&source=tweetbutton&text=[ComfyMaster38]%20LoRAで動画のスタイル変えよう！)

[LoRA](https://corp.aicu.ai/ja/tag/lora), [ComfyUI](https://corp.aicu.ai/ja/tag/comfyui), [AnimateDiff](https://corp.aicu.ai/ja/tag/animatediff)

## AICU Japan

AICU Inc. AIDX Lab - Koto

[info@aicu.ai](mailto:info@aicu.ai)

## Comments

## Related posts

Search [Houdini使いが気になる研究7選！植物の種子を飛ばしたり粉と水を混ぜたり！](https://corp.aicu.ai/ja/houdini-20241205?hsLang=ja)

[国際Creative AIビジネスコンソーシアム – 開発者交流フォーラム開催レポート！](https://corp.aicu.ai/ja/creative-ai-report-20241208?hsLang=ja) Search

![AICU-LogoWT](https://corp.aicu.ai/hs-fs/hubfs/Logo/AICU-LogoWT.png?width=210&name=AICU-LogoWT.png "AICU-LogoWT")

AICU Inc. is AIDX company.

[Follow us on Facebook](https://m.me/118997804638852?ref=klE9gy8WjnrE) [Follow us on Twitter](https://twitter.com/AICUai) [Follow us on Instagram](https://www.youtube.com/@AICuty)

Main Office: 830 STWART DR STE277 SUNNYVALE, CA 94085-4513

```json
{
  "@context" : "https://schema.org",
  "@type" : "BlogPosting",
  "author" : {
    "@type" : "Person",
    "name" : "AICU Japan",
    "url" : "https://corp.aicu.ai/ja/author/aidx-lab"
  },
  "dateModified" : "2025-03-14T00:43:27.513Z",
  "datePublished" : "2024-12-07T23:42:10.000Z",
  "headline" : "[ComfyMaster38] LoRAで動画のスタイル変えよう！",
  "image" : [ "https://ja.aicu.ai/wp-content/uploads/2024/12/rectangle_large_type_2_fba3599d6a3d835999a886347ca8b682.png" ],
  "mainEntityOfPage" : {
    "@id" : "https://corp.aicu.ai/ja/comfymaster35-lora-20241207",
    "@type" : "WebPage"
  },
  "publisher" : {
    "@type" : "Organization",
    "logo" : {
      "@type" : "ImageObject",
      "url" : "https://corp.aicu.ai/hubfs/android-chrome-512x512.png"
    },
    "name" : "AICU Inc."
  }
}
```