Stable Diffusionで LoRAを使ってみたりして AIイラスト三昧

2023年 9月10日（水） 晴れ
ChatGPT	-
朝	ブリトーと午後の紅茶ミルクティー。
午前	こんまりモードで必死で片づけるのをやめたので、きのう（金曜）の朝から、睡眠導入剤を飲んでいても、夜中に目覚める激痛が、影も形もなくなり、きょうも、痛くも痒くもありませんでした。 身体表現性障害は脳が錯覚して、あちこちに痛みを感じる精神疾患です。　痛いときは、何もせずに寝ていれば、すぐに治ります。
昼	ドトールでシナモンロール、アイスコーヒー(S)。
午後	きのうは自宅Win 11 PCにPythonが動くようにして、Stablle Diffusionで テスト的な AIイラストを生成して、生成時間を計ったら、1枚の生成に 1秒ちょっとでした。 AIイラストは、いろんなジャンルの絵を学習させた学習モデルを指定して、描きたい絵を生成します。　世の中には、膨大な数の写真や漫画や絵画などがあり、それら全部を学習するなど不可能だから、車なら、車ばかりを学習させた学習モデルを作り、それを指定するわけです。　全方位的に、ネットに転がっている画像データを片っ端から拾って学習させると、人口が多い国ほど多くの画像データがある傾向があるので、人物だと、欧米人や中国人の画像が多数派になった学習モデルができます。　でも、日本人は、日本人を描きたいですよね。　アジア系、日本人、などのローカルな学習モデルができていますので、それらをえらべばいいわけです。 でも、「日本人のきれいなおねえさん」の学習モデルを使ったとしても、「推しのおねえさんに似た日本人のきれいなおねえさん」というのがあれば、コミケのお宝モノです。　Stable Diffusionでは、推しの画像を追加学習させて、推しに似た画像を生成するしかけがあり、LoRA（Low-Rank Adaptation）と呼ばれていて 100種類以上あります。 例えば、学習モデルに「chilledReGenericV3_v10」を使って、きれいなお姉さんを生成すると、こういう絵が出ます。 ここで、LoRA(Cute Asian Face)をインストールしてプロンプトで指定すると、同じSEED値で、こんなふうに変化します。 同じく、LoRA(JapaneseDollLikeness_v15)を適用すると、このように変化します。 AIイラストはプロンプトが肝なんですが、そのプロンプトで指定する学習モデルを、たーくさん、PCの中にインストールしておかねば、プロンプトだけでは思うようなAIイラストになりません。
夜	ファミマの、竜田揚げ弁当でした。
追伸	ところで、数年前にトランプ大統領のフェイク画像がSNSで拡散しましたが、元ネタ画像があれば、AIイラストで簡単にフェイク画像を作れます。　例として、SSブロガーさんの飼い猫ちゃんが空中を飛んでいるフェイク画像を生成してみたら、こうなりました。 あしたは、ピクミンブルームのコミュデイ（2日目）に参加して、1万歩歩いてきます。　最近、1日 2,000歩ぐらいしかあるいていません。

タグ：AIイラスト StableDiffusion 学習モデル LoRA ドトール シナモンロール

コメント 19

おへそもリアルでいいなー^^
by HOTCOOL (2023-09-17 05:04) 

データを蓄積する作業が大変そうですね＾＾
by ぽちの輔 (2023-09-17 07:00) 

ジャンプの猫か゛面白い。
「痛みと脳」。仕組みが不思議と思いました。
by 夏炉冬扇 (2023-09-17 07:35) 

> HOTCOOL さん
AIは無から有を作れないので、何かで学習した画像の一部なんでしょうね。
by とし＠黒猫 (2023-09-17 10:41) 

> ぽちの輔 さん
データというか、AIの学習モデルです。　モデルといっても、方式によって、今回のLoRAの他、VAEとか色々あって、フォルダを分けて管理しないと、とにかくファイルの数が
多いです。
by とし＠黒猫 (2023-09-17 10:43) 

> 夏炉冬扇 さん
「飛ぶねこ」は、生成AIでも破綻した画像を生成することが大半なので、20枚ぐらいバッチ生成したうちの1枚です。

by とし＠黒猫 (2023-09-17 10:46) 

空を飛ぶ猫
毛並みも眼の光も、リアルですね(*'▽')
by mayu (2023-09-17 11:17) 

AI女の子、顔がデカいね。。(^▽^)
by 横　濱男 (2023-09-17 11:18) 

個人的には復帰がパキッと割れている女子が好きです。
出来たらそういう女子をAIさんに描いて貰いたいです。
なんてね。
と、さて、猫さんはどこを翔んでらっしゃるのでしょうか。
室内、新幹線の客車内かしら。

by tommy88 (2023-09-17 11:43) 

ワンコのジャンプはよくみますが猫ちゃんはなかなかないですね～珍しい～
by みぃにゃん (2023-09-17 16:45) 

トルティーヤは、ボリュームがあって、腹持ちしますね。
by ヨッシーパパ (2023-09-17 18:41) 

> mayu さん
猫は空を飛ばないので、この絵を出すのに苦労しました。
ガチャ的な要素が大きいので、「まあ、これならいいっかー」という画像が出るまで、100回ぐらい生成する覚悟が入ります。
わたしは自宅PCにAIイラスト生成環境を作っているので、生成回数はノーリミットです。サイコロで ６が続けて3回出るまで投げ続ける、とか、そのぐらいの確率です。
by とし＠黒猫 (2023-09-17 20:46) 

> 横　濱男 さん
LoRAの追加学習をした人が、日本人のグラビア写真集を学習しまくったんだと思います。
なのでLoRAを使った生成画像には著作権がないし、商用利用もできません。
by とし＠黒猫 (2023-09-17 20:49) 

> tommy88 さん
生成AIは、学習モデルを元に近いものを確率で選んでいくので、そもそも学習していない「猫が空を飛ぶ」というプロンプトは生成AI的には破綻しています。
なので、宇宙ステーションなどの重力が地球より小さい環境でジャンプしている絵で妥協しました。
by とし＠黒猫 (2023-09-17 20:56) 

> みぃにゃん さん
猫が長距離ジャンプする画像をAIが学習しているとは考えにくいので、犬がドッグランで長距離ジャンプしているシーンを猫に置き換えたのかもしれません。
生成AIは、「飛ぶ」というプロンプトから大雑把に構図を作り、最後のディテールを犬ではなく「猫」にしたのではないかと思います。
by とし＠黒猫 (2023-09-17 21:00) 

> ヨッシーパパ さん
ブリトーは、セブンイレブンでした。ファミマは、トルティーヤですね。
by とし＠黒猫 (2023-09-17 21:02) 

空飛ぶネコ、なんか新宿の３Dネコを
思い出しました(^^♪
by みずき (2023-09-17 22:59) 

> みずきさん
新宿の3Dモニターのねこはインパクトがありますよね。
by とし＠黒猫 (2023-09-17 23:46) 

＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊
Stable Diffusionで LoRAを使ってみたりして AIイラスト三昧 の
ブログ記事に、たくさんのコメントをいただきまして、
ありがとうございました。
＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊

by とし＠黒猫 (2023-09-18 11:44)