ControlNet を活用した Stable Diffusion の精密画像制御技術

ControlNet の制御原理とアーキテクチャ ControlNet は、拡散モデルの生成過程に空間的条件情報を付与し、出力画像の構造的制約を実現する拡張モジュールです。基盤となる Stable Diffusion の重みを凍結した状態で、並列接続されたトレーニング可能な「ゼロコンボリューション(Zero Convolution)」レイヤーを介して、エッジ、深度マップ、人体姿勢などの制御信号を特徴 ...

6月7日 23:06 投稿

GPUStack v0.4:マルチモーダルモデル対応と柔軟なローカルデプロイ機能の強化

GPUStack は、異種 GPU(NVIDIA、Apple Metal、昇騰 NPU、摩尔线程など)を統合的に管理するオープンソースのクラスタ管理ツールであり、Mac、Windows、Linux 上のリソースを一元的に利用可能にする。開発者は OpenAI 互換 API を通じてプライベートにホストされた AI モデルを利用でき、管理者は Hugging Face や ModelScope などのレジストリから簡単にモデルをデプロイ ...

6月5日 18:30 投稿

ControlNetのConda仮想環境を別マシンへシームレスに移行する手法

Stable Diffusionの制御フレームワークであるControlNetは強力だが、依存関係の解決に多大な労力を要する。構築済みのConda環境を他の計算機へ直接転送する手段を用いることで、このセットアップの複雑さを回避できる。 リポジトリの取得 移行作業の前提として、対象のソースコードをローカルにダウンロードする。 git clone https://github.com/lllyasviel/ControlNet.gi ...

5月27日 12:57 投稿