ComfyUIの複数のControlNetの併用｜Union ControlNet

この記事では、ControlNet を2つ重ねてかけ、深度で部屋の奥行きを、写真から取った輪郭の線で窓の桟や梁の位置を決めて、洋室の居間を和室に作り替えます。

画像の左と右で別の物を決める使い方と、1つのモデルで複数の種類を扱う Union ControlNet も扱います。

画面：ComfyUI v0.37.0 ポータブル版（Windows・2026年9月）

ComfyUIの複数のControlNetとUnion ControlNetとは

ControlNet は、形の手がかりになる画像をモデルに渡して、形を決めたまま画像を作る仕組みです。
その ControlNet を2つ以上同時に使うことを、この記事では併用と呼びます。

1つの手がかりでは、込み入った場面の形を決めきれないことがあります。
複数の ControlNet を重ねれば、画像の左と右のような別々の所や、同じ物の奥行きと輪郭を、同時に決められるでしょう。

重ねると、次のようなことができます。

Union ControlNet は、1つのモデルで線・深度・姿勢など複数の種類を扱える ControlNet です。
重ねずに、1つのモデルの種類を切り替えて使います。

複数のControlNetを使う前に｜ComfyUIの言葉と用意するもの

手順を読む前に、ComfyUI の言葉の意味を表で確かめてください。

ダブルクリックした場所が、ノード検索で選んだノードの置き場所になります。
画面の右上の「実行する」でワークフローを動かすと、作った画像が「画像を保存」に出ます。

作った画像の保存先は、ComfyUI/output のフォルダです。

この記事の手順は、ControlNet を1つ足したワークフローから始めます。

深度と線の画像は前処理のノードで元の画像から作り、姿勢の画像は写真から SDPose（写真から人の姿勢を取るモデル）で取ってください。
作り方は、ComfyUIの前処理｜プリプロセッサ・comfyui_controlnet_auxとComfyUIのPose ControlNet｜添景の人物の姿勢で解説しています。

元の居間の写真は、深度と線の画像を作るのに使うだけです。
画像を作るワークフローには、元の写真を直接は入れません。

ControlNet のモデルと、チェックポイント（dreamshaper_8）は、どちらも SD1.5（2022年に公開された、文章から画像を作るモデル Stable Diffusion の 1.5 版）用のものにそろえましょう。

ControlNet を1つ足す組み方は、ComfyUIのControlNetの基本｜Load ControlNet Model・Apply ControlNet・強さと効く範囲で解説しています。

ComfyUIで複数のControlNetを使う方法｜Apply ControlNetをつなぐ

重ねるときは、「ControlNetを適用」を2つ置き、1つめの出力を2つめの入力につなぎます。
ここでは、深度（Depth）と線（Canny）の2つを重ねました。

2組目の ControlNet を足す

この記事では、「ControlNetモデルを読み込む」「画像を読み込む」「ControlNetを適用」の3つのノードを、ControlNet の1組と呼びます。

12つめの「ControlNetモデルを読み込む」を置く

キャンバスの空いている所をダブルクリックし、「Load ControlNet」と打って「ControlNetモデルを読み込む」を押します。
2つめの「ControlNetモデルを読み込む」が置かれます。

2Canny のモデルを選ぶ

置いたノードの「コントロールネット名」の欄（画面では「コント …」と縮めて出る）を押し、control_v11p_sd15_canny_fp16.safetensors を押します。
欄にモデルの名前が入ります。

3線の画像を読み込む

キャンバスの空いている所をダブルクリックして「画像を読み込む」を置き、「アップロードするファイルを選択」で線の画像を選びます。
ノードの下に、線の画像が出ます。

42つめの「ControlNetを適用」を置く

キャンバスの空いている所をダブルクリックし、「Apply ControlNet」と打って「ControlNetを適用」を押します（「ControlNetを適用（旧）」ではない方）。
2つめの「ControlNetを適用」が置かれます。

5モデルと画像と VAE をつなぐ

2つめの「ControlNetを適用」の左の入力に、2つめの「ControlNetモデルを読み込む」の出力、線の画像の「画像」、チェックポイントの「VAE」をドラッグしてつなぎます。
左の「コントロールネット」「画像」「vae」の3つに、接続線がつながります。

2つの「ControlNetを適用」を鎖のようにつなぐ

11つめの出力を2つめの入力につなぐ

1つめの「ControlNetを適用」の右の「ポジティブ」を2つめの左の「ポジティブ」へ、右の「ネガティブ」を左の「ネガティブ」へドラッグします。
条件付けが、1つめから2つめへ渡るようになります。

22つめの出力をKサンプラーにつなぐ

2つめの「ControlNetを適用」の右の「ポジティブ」と「ネガティブ」を、Kサンプラーの「ポジティブ」と「ネガティブ」へドラッグします。
1つめからKサンプラーへつながっていた接続線は、新しい接続線に替わります。

32つの「強度」を決める

1つめ（深度）の「強度」の欄を押して 0.8、2つめ（線）の「強度」の欄を押して 0.6 と打ち、それぞれ Enter を押します。
欄が 0.80 と 0.60 になります。

4「実行する」を押す

画面の右上の「実行する」を押します。
「画像を保存」に、2つの手がかりに沿った画像が出ます。

2つを重ねて作った和室です。

編集部の PC（NVIDIA GeForce RTX 4060）で 768×512 の1枚を作ると、約7秒かかりました。
ControlNet が1つのときは約6秒です。

手順の中のノードの名前は、日本語の表示に合わせています。
英語の表示のままなら、左下の歯車で設定を開き、検索に Language と打って日本語を選びます。

3つのモデルの置き場所 ComfyUI/models/controlnet は、ポータブル版なら ComfyUI_windows_portable\ComfyUI\models\controlnet です。

作例の画像は、次の設定で作りました。
和室の作例の1つめのプロンプトには、「a japanese style living room, wooden walls, tatami floor, low table, warm evening light, architectural photo」と書きました。

最初に実行する前に、表のノードの欄を表の値に合わせておきましょう。
記事と同じ条件で作れます。

場所ごとにかける作例では、ネガティブの最後に bad anatomy（崩れた体）を足しています。

手がかりの画像は、手元にある写真やパースから作って進めてください。
できる画像は、元の画像によって記事と変わります。

複数のControlNetを画像の場所ごとにかける

画像の左と右で、別の物を別の手がかりで決める使い方です。
公式ドキュメントの例は、左の人物を姿勢で、右のスクーターに乗った猫を手描きの線で決めています。

この記事では、左の人物を姿勢で、右の椅子を線で決めました。
手がかりの画像は、どちらも同じ 768×512 の大きさにし、姿勢の画像は人物を左に、線の画像は椅子を右に寄せて作っておきます。

11組目を姿勢にする

1組目の「画像を読み込む」で姿勢の画像を選び、「コントロールネット名」で control_v11p_sd15_openpose_fp16.safetensors を押します。
1組目が、人物の姿勢の手がかりになります。

22組目を椅子の線にする

2組目の「画像を読み込む」で椅子の線の画像を選び、「コントロールネット名」で control_v11p_sd15_canny_fp16.safetensors を押します。
2組目が、椅子の形の手がかりになります。

32つの「強度」を 1.00 にする

2つの「ControlNetを適用」の「強度」の欄を押し、どちらも 1 と打って Enter を押します。
2つの欄が 1.00 になります。

4両方の物をプロンプトに書く

1つめの「CLIPテキストエンコード（プロンプト）」の文の欄に、左の物と右の物を両方書きます。
ここでは「a woman standing on the left, a lounge chair on the right, bright living room, photo」と書きました。

5「実行する」を押して結果を見る

右上の「実行する」を押します。
「画像を保存」に、左に人物、右に椅子の描かれた画像が出ます。

姿勢の画像は正面を向いた人でしたが、作った人物は窓の方を向きました。
向きまで決めたいときは、プロンプトに向き（例「facing the camera」）を書くか、顔の点（目・鼻・耳）が取れた姿勢の画像を使ってください。

複数のControlNetを同じ物にかける｜深度と線

同じ被写体に、別の種類の手がかりを重ねる使い方です。
手がかりの画像は、同じ元の画像から作り、位置をそろえます。

居間の画像から作った深度と線を重ね、和室に作り替えて比べました。
組み方は「2組目の ControlNet を足す」の節と同じで、1組目に深度、2組目に線を入れています。

場所ごとにかける作例で入れ替えた画像・モデル・強度・プロンプト・ネガティブは、和室の作例の値に戻してから作ります。

深度だけ・線だけの画像は、使わない方の「ControlNetを適用」を削除し、条件付けがもう片方だけを通って Kサンプラーへ行くように、接続線をつなぎ直して作りました。

複数のControlNetの強度の釣り合い

重ねた ControlNet は、強度の釣り合いで結果が変わります。
1つだけ強度を高くすると、その手がかりばかりが効いて、ほかの手がかりが負けます。

場所ごとに別の ControlNet をかけるときは、強度を同じくらい（たとえば両方 1.0）にしてください。

同じ物に重ねるときは、主にしたい手がかりを強く、補う手がかりを弱くしました。
この記事の和室では、深度を 0.80、線を 0.60 にしています。

プロンプトには、手がかりで決めた物を両方とも書きましょう。

Union ControlNetの使い方｜Set Union ControlNet Type

Union ControlNet は、1つのモデルで、線・深度・姿勢など複数の種類を扱える ControlNet です。
種類ごとにモデルを入れ替えずに済みます。

ComfyUI では、組み込みの「Union ControlNetタイプを設定」で、どの種類として使うかを選びます。
このノードを入れる所は、「ControlNetモデルを読み込む」と「ControlNetを適用」の間です。

1「Union ControlNetタイプを設定」を置く

キャンバスの空いている所をダブルクリックし、「Union」と打ちます。
一覧の「Union ControlNetタイプを設定」を押すと、キャンバスにノードが置かれます。

2モデルの出力をつなぐ

「ControlNetモデルを読み込む」の右の「コントロールネット」の点から、「Union ControlNetタイプを設定」の左の「control_net」の点までドラッグします。
2つのノードが接続線でつながります。

3「ControlNetを適用」につなぐ

「Union ControlNetタイプを設定」の右の「コントロールネット」の点から、「ControlNetを適用」の左の「コントロールネット」の点までドラッグします。
モデルが、種類を決めてから「ControlNetを適用」に渡るようになります。

4「タイプ」で種類を選ぶ

「タイプ」の欄を押し、出てきた一覧で、手がかりの画像に合う種類を押します。
欄に、選んだ種類の名前が入ります。

「タイプ」で選べる種類は、次の9つです。

ControlNet のモデルは、チェックポイントと同じ系統（SD1.5 なら SD1.5 用）のものを使います。
Union を使うときも、チェックポイントに合う系統の Union のモデルを選んでください。

Union のモデルには、SDXL（Stability AI が2023年に公開した、SD1.5 より大きな画像向けのモデル）用や、Flux.1（Black Forest Labs が2024年に公開した、文章から画像を作るモデル）用などがあります。
Flux.1 用のものを知りたいときは、ComfyUIのFluxのControlNet｜Flux.1のワークフローを読んでください。

なお、ほかの画像を作るモデル Z-Image と Qwen-Image の ControlNet は、「ComfyUIのZ-Imageのワークフロー｜Z-Image・Turbo」（準備中）と「ComfyUIのQwen-Imageのワークフロー｜Qwen-Image・2512・2.1」（準備中）の記事で解説します。

複数のControlNetが効かないとき

参考にしたのは、ComfyUI の公式ドキュメントのControlNet の混合のページと内蔵ノードのSetUnionControlNetTypeのページです（2026年9月29日に確認）。