Intrinsic Lora Sampling(Intrinsic_lora_sampling)
このノードの技術的核心は、「Intrinsic LoRA」シリーズの軽量モデルを統合し適用したことです
Intrinsic lora sampling
Intrinsic Lora Sampling ノードは、「Intrinsic LoRA」シリーズの軽量モデルを統合・適用する技術を中核としています。
Intrinsic Lora Sampling は、画像の固有属性を処理するための専用サンプリングノードです。特定のLoRAモデルをロードし、入力された通常の画像を深度マップ、法線マップなどの固有属性マップに変換します。このノードは、複雑な多段階ワークフローを必要とせずに、画像から物理的属性を抽出するプロセスを簡素化します。
ノード機能
このノードの技術的中核は、「Intrinsic LoRA」シリーズの軽量モデルを統合・適用することです。画像または潜在変数を受け取り、指定されたタスクタイプ(深度推定など)とテキストプロンプトを組み合わせ、1回のサンプリングステップで対応する固有属性画像を生成します。ノードは効率化のためのバッチ処理をサポートし、エンコードステップをスキップするための潜在変数の直接入力を可能にします。
ノードパラメータ説明 - Intrinsic Lora Sampling
接続入力 (Inputs)
| パラメータ名 | データ型 | 必須 | デフォルト値 | 範囲/オプション | 説明 |
|---|---|---|---|---|---|
model | MODEL | はい | - | - | ノイズ除去とサンプリングに使用するベース拡散モデルに接続します。 |
lora_name | FOLDER_PATHS | はい | - | - | 組み込みリストから、ロードして適用するIntrinsic LoRAモデルファイルを指定します。 |
clip | CLIP | はい | - | - | テキストプロンプトを処理するためのCLIPテキストエンコーダに接続します。 |
vae | VAE | はい | - | - | 入力画像を潜在空間表現にエンコードするための変分オートエンコーダに接続します。 |
image | IMAGE | いいえ | - | - | 処理対象の元画像を入力します。このパラメータが空の場合、optional_latentが使用されます。 |
optional_latent | LATENT | いいえ | - | - | 画像エンコードステップをスキップするためのオプションの潜在変数入力を提供します。 |
コントロールパラメータ (Parameters)
| パラメータ名 | データ型 | 必須 | デフォルト値 | 範囲/オプション | 説明 |
|---|---|---|---|---|---|
task | COMBO | はい | depth map | "depth map", "surface normals", "albedo", "shad... | 生成する固有属性のタイプを選択します。オプションは depth map(深度マップ)、surface normals(表面法線)、albedo(アルベド)、shading(シェーディング)です。 |
text | STRING | はい | - | - | 属性生成プロセスを補助的に導くための追加テキストプロンプトを提供します。 |
per_batch | INT | はい | 16 | 1 - 4096 (ステップ: 1) | メモリ使用量を制御するための、バッチあたりの処理画像数を設定します。範囲は1から4096、ステップは1です。 |
出力 (Output)
| パラメータ名 | データ型 | 説明 |
|---|---|---|
| IMAGE | IMAGE | 生成された固有属性画像を出力します。 |
| LATENT | LATENT | サンプリング後に得られた潜在変数表現を出力します。 |
使用シナリオ
マテリアル分析や3D再構築のワークフローにおいて、実写写真をこのノードに接続し、「depth map」タスクを選択することで、そのシーンの深度情報マップを迅速に取得できます。生成された深度マップは、新たな視点の合成、被写界深度の調整、または他の3Dソフトウェアへの入力としてさらに使用することができます。
注意事項
このノードは特定の組み込みLoRAモデルライブラリに依存しており、その効果はこれらの事前学習済みモデルの能力に制限されます。入力画像とタスクタイプが一致しない場合(例:単色画像に対して法線マップを生成する)、意味のある結果が得られない可能性があります。
Intrinsic Lora Sampling ノードソースコードリンク
Intrinsic Lora Sampling ノードは ComfyUI-KJNodes ノードパッケージに含まれています。
コメント
GitHubでサインインしてディスカッションに参加しましょう。