見出し画像

LTX-2.3のColorizer LoRAとその他追加モデル(upscaler-x2 ver1.1 / gemma-3-12b-it-abliterated heretic lora)

白黒の動画と色付けされた1フレーム目の画像をインプットに、白黒動画を色付けするためのLTX-2.3向けLoRAがリリースされました。

upscalerもバージョンが1.0から1.1に上がったので、ついでに使ってみます。

あと、text encoderの安全調整性能を下げて、プロンプトの追従度をあげるためのLoRAがリリースされているので、これもついでに使ってみます。

今見たら情報源、全部Wildminderさんですね。

一応、これまでのLTX-2.3関連の記事も載せておきます。

I2V

FLF2V

I+A2V

V2V(ControlNet LoRA)

動画でも解説してます。


環境

OS:Windows 11
GPU:GeForce RTX 4090
CPU:i9-13900KF
memory:128G


構築手順

以下のカスタムノードをインストールして、ComfyUIを最新化してください。


モデル

ltx-2.3-22b-dev.safetensorsをダウンロードして「ComfyUI\models\checkpoints」に配置
ltx-2.3-spatial-upscaler-x2-1.1.safetensorsをダウンロードして「ComfyUI\models\latent_upscale_models」に配置
ltx-2.3-22b-distilled-lora-384.safetensorsをダウンロードして「ComfyUI\models\loras」に配置

gemma_3_12B_it_fp4_mixed.safetensorsをダウンロードして「ComfyUI\models\text_encoders」に配置

LTX-2.3-22b-IC-LoRA-Colorizer-0.9.safetensorsをダウンロードして「ComfyUI\models\loras」に配置

gemma-3-12b-it-abliterated_heretic_lora_rank64_bf16.safetensorsをダウンロードして「ComfyUI\models\loras」に配置


ワークフロー

ワークフローは以下です。

ワークフローは以下をベースにしています。

↑でも触れてますが、「🅛🅣🅧 Add Video IC-LoRA Guide」ノードが解像度について指定が厳しいため、アウトプットの解像度は以下のノードで指定します。
shorter_sizeを512にして、9:16のアスペクト比の動画をインプットにすると、1024×1792の動画生成されます。


生成結果

生成結果は以下です。
生成時間は192秒。
CPUメモリ:80GB
GPUメモリ:45.5GB(VRAM22.1GB+共有メモリ23.4GB)

一応、色付けはうまくいってますね。

upscalerのバージョン1.0に戻して生成してみましたが、今回の場合はあまり効果はなさそうですね。text encoderの方も、I2Vとかの方が効果があると思います。


感想

白黒に色付けできるのは、何かしら使い道があるかもですね。
他のモデルについての調査は妥協してしまいました、興味があれば以下の記事のワークフローにつないでみて、試してみてください。


いいなと思ったら応援しよう!