Stable Diffusionで手描き感のあるイラストを生成するプロンプト

ガッタオ
質問: 荒れた感じを出したいです。
画像生成で生成された画像はきれいで滑らかな線ですが、ちょっと線の強弱が弱い気がしています。 線の強弱をもっとつけたり、線が若干歪ませたりしたいのですが、良い方法はありますでしょうか?
いわゆる手で線を引いたような手描き感が欲しいです。

プロンプト

線の強弱をつけたり、線を強く表現したり、線に手描き感を出す画像を生成するプロンプトの紹介です。

メモ
漫画的な絵を出力する場合のモデル比較はこちらの記事を参照してください。

モデルによって画像の出力に違いがありますが、以下のプロンプトを組み合わせると線が強く出る画像が生成できます。

タグ 意味 補足
lineart 線画 主線(実線)がはっきり描画されやすいです
sketch スケッチ スケッチ画の傾向になりやすいです
outline 外枠 キャラクターの外側に輪郭線が描画されます
black lineart 実線が黒になりやすいです
black outline 外枠線が黒になりやすいです
rough 粗い/ラフ スケッチと似た効果
pen \(medium\) ペン (技法) ペン画になりやすいです
jaggy lines ギザギザの線 線が荒れます

プロンプト(参考)

タグ 意味 補足
color trace カラートレース 主線(実線)に色が付きます
white background 白背景 手描きの場合は白背景が多いためらしさを出すために有効です。
thick outlines 太い輪郭 outline よりも太い囲み線の表現になります。

プロンプト(補足)

効果が弱い、あまり効果がないタグです。

タグ 意味 補足
bold line 太線 線が太くなるかもしれません
Handwrite 手書き
Handwritten 手書き
Handwritten feeling 手書き感
distorted lines ゆがんだ線 効果がある場合があります。
manga style 効果は微妙
g pen style 効果は微妙
extra lines 効果は微妙


モデル

Animagine 系の場合

オリジナルのAnimagine XLモデルが比較的ラフ感のある出力になりやすいです。追加学習したモデルやクオリティアップを目指して、 フォトリアリスティック系のモデルとマージしたモデルの場合は、ラフ感のある出力にはなりにくいです。

Pony Diffusion 系の場合

Pony Diffusion XLとマージしたモデルを利用すると手描き感の荒さやゆがみのある線が出やすいです。 (詳しくはこちらの記事を参照してください)
追加学習やマージが進み、写真画像やフォトリアリスティック画像を集中的に学習したモデルの場合、ラフ感のある画像ではなく、 グレースケールの画像や通常の出力とほとんど変わらない画像が生成される場合もあります。

Illustrious XL 系の場合

学習が進んでいないオリジナルに近いモデルはラフ感の強い画像が生成される傾向にあります。 線も荒れるケースが多いです。一方で、色があまり乗らず、モノクロまたはモノトーンに近い画像が生成される場合もあります。
マージが進んだモデルの場合は、ラフ感がやや落ちる傾向にありますが、色の乗りは良くなります。

線が荒れるモデル

sketchやroughを指定しても線がきれいに出力されるモデルが多く、線が激しく荒れるモデルは少数派です。線が荒れるモデルをいくつか紹介します。

  • Defacta 系モデル
  • Cocoamix 系モデル
  • Holodayo
  • Comradeship 系モデル
  • dBox
  • Illustrious
  • Leek AI
  • Aing系モデル (urang)
  • caulkinum系モデル (Pony系は線が整理される傾向にあります)
  • lizmix
  • (特定の作家学習モデル)


以下のモデルは線が少しだけ荒れます

  • Animagine 系モデル
  • 7th Anime系モデル
  • Himawarimix 系モデル
  • bulanime
  • EbaraPony 系モデル
  • CopyCat 系モデル
  • NovaAnime 系モデル
  • tPonynai 系モデル
  • White Unicorn 系モデル
  • SilverMoonMix
  • DewyskinAnime
  • jitq
  • Takio


逆にHyper系モデルはほとんど線が荒れない傾向にあります。また、Pony系モデルはフォトリアリスティック画像の学習量が多いためか、 線が整理されたグレースケール的な画像出力になるケースが多いです。

例1: Animagine XL v3.0

以下のプロンプトで画像を生成します。

Prompt and settings
Prompt: 1girl, blue hair, upper chest, white jacket, yellow choker, white background, (bold line:1.2), (black outline:0.5), (rough:1.3), Handwritten feeling, (distorted lines:0.5)
Negative prompt: worst quality, low quality, blush
Model: Animagine XL v3
Steps: 20, Sampler: Euler a, CFG scale: 7


画像の生成結果は下図です。手書き感のある画像が出力できています。
Stable Diffusionで手描き感のあるイラストを生成するプロンプト:画像1

例2: Animagine XL v3.0

以下のプロンプトで画像を生成します。

Prompt and settings
Prompt: 1girl, blue hair, upper chest, white jacket, yellow choker, (white background:1.4), (bold line:1.2), (black outline:0.5), (rough:1.3), Handwritten feeling, (distorted lines:0.5), black extra lines, g pen style
Negative prompt: worst quality, blush
Model: Animagine XL v3
Steps: 20, Sampler: Euler a, CFG scale: 7


画像の生成結果は下図です。より荒い感じの手書き感のある画像が出力できています。

Stable Diffusionで手描き感のあるイラストを生成するプロンプト:画像2

例3: Pony Diffusion for Anime v1.0

Pony Diffusion XLをマージしたモデルを利用した例です。

Prompt and settings
Prompt: score_9, score_8_up, score_7_up, source_anime, 1girl, upper chest, blue hair, wearing white jacket well, yellow choker, white background, (bold line:1.2), (black outline:0.5), (sketch:1.2), rough drawing, flat color, light color
Negative prompt: source_furry, source_pony, source_cartoon, score_4, score_3, score_2, 3d, photo, worst quality, low quality
Model: Pony Diffusion for Anime v1.0
Steps: 20, Sampler: Euler a, CFG scale: 7

線は太めですが、そこそこきれいな線のため、手描き感は少し弱めです。
Stable Diffusionで手描き感のあるイラストを生成するプロンプト:画像3

例4: Cocoa Mix Pony v7.72

Prompt and settings
Prompt: sketch, rough, lineart, 1girl, upper chest, blue hair, wearing white jacket well, yellow choker, white background, flat color, light color, score_9, score_8_up, score_7_up, source_anime
Negative prompt: source_furry, source_pony, source_cartoon, score_4, score_3, score_2, 3d, photo, worst quality, low quality
Model: cocoamixpony_v772
Steps: 30, Sampler: DDIM, CFG scale: 7

線の荒れた感が出る出力結果になり、手描き感がややあります。
Stable Diffusionで手描き感のあるイラストを生成するプロンプト:画像4

AuthorPortraitAlt
著者
iPentecのメインデザイナー
Webページ、Webクリエイティブのデザインを担当。PhotoshopやIllustratorの作業もする。 最近は生成AIの画像生成の沼に沈んでいる。
作成日: 2024-03-06