2月10日に、人物のポーズを指定してAIイラストの生成ができるControlNetの論文が発表され、すぐにStable Diffusion用のモデルがGitHubで公開されて、ネットで話題になっています。 今回、このControlNetをWebUIに導入して使用する方法を紹介します。 (2023/03/09追記)WD 1. ...
こんにちは。だだっこぱんだです。 今回は、AIイラスト界隈で最近話題のControlNetについて使い方をざっくり紹介していきます。 モチベが続けば随時更新します。 StableDiffusionWebUIのインストール 今回はStableDiffusionWebUIの拡張機能のControlNetを使います。
NVIDIAの研究チームが、ベクトル的な潜在表現を高解像度画像へ直接変換する「PiD(Pixel diffusion ...
“棒人間”姿のVRアバターで取ったポーズを基に、画像生成AIで出力する美少女イラストの姿勢を指定する――こんなチャレンジをした人がいる。生成するキャラクターのポーズを制御できる技術を活用したもので、VR空間でアバターを動かせばいいので ...
こんにちは。この連載では、AI生成技術と進化、3DCG制作現場への活用の可能性を探索していきます。今回取り上げるのは、オープンソースの画像生成AI StableDiffusionとControlNet、3Dレンダラの連携についてです。 AI関連の研究は日々驚くほどのスピードで進化し ...
1962年生まれ。プログラマー、IT系ライター、カメラマン(主にグラビア)と、三足の草鞋になってもう四半世紀。 ComfyUI使って ...
前回は「FLUX.1 [dev] fp8」の画像を中心に、その凄さをご紹介した。今回は「ではどうやって作れば?」ということで、「ComfyUI」を使ったWorkflowをご紹介したい。 ComfyUIとは? ComfyUIとは「AUTOMATIC1111」と同様、Stable Diffusionを中心とした画像生成AIに対応した ...
英Stability AIは11月26日(現地時間)、「Stable Diffusion 3.5 Large」の新たな3つのControlNet、「Blur」「Canny」「Depth」を発表した。「Stability AI Community License」のもと、商用(年間総収益が100万ドル未満の組織に限る)・非商用問わず、無料で利用できる。
ControlNetの開発者として知られるLvmin Zhang氏が、画像の光源の位置や光源の種類を自由に指定できる画像編集AIツール「IC-Light ...
5月15日にComfyUIが共同開発している画像生成AIモデル「Anima Base v1.0」が公開されました。特にキャラクターの一貫性保持において、これまでのローカルモデルの限界を突破する存在になりそうです。
This is the official release of ControlNet 1.1. ControlNet 1.1 has the exactly same architecture with ControlNet 1.0. We promise that we will not change the neural network architecture before ...
近年はテキストから音楽を生成するAIツールが進歩を遂げ、さまざまなスタイルで高品質の音楽を生成できるようになっていますが、従来のテキストによる生成ではビートの位置や音楽のダイナミクス(強弱)など、時間と共に変化する属性を制御するのが ...