
手書きラフから生成AIでどこまで遊べる?第2弾
前回は、1枚の手描きラフをChatGPTとComfyUIで行ったり来たりさせながら、アニメイラストや「朝のAIポートレイト」へ変化させてみました。
今回は、今までに描きためたラフ絵を「素材のフォルダー」として使ってみます。そこから1枚を選び、ポーズ用の画像、キャラクター用の画像、さらにChatGPTでの仕上げへと進めると、同じラフからいくつもの表情を引き出せます。
完成形を一発で狙うというより、途中で生まれる画像も楽しみながら遊ぶ流れです。
1.ラフ絵フォルダーを用意する
これまでに描いてきたラフ絵が、たくさんたまってきました。今回はこのラフ絵フォルダーから、毎回ランダムに選んで使います。

同じ手順でも、選ばれるラフが変わればポーズや衣装の印象が変わります。思いがけない画像が出てくるのも、この方法の面白いところです。
今回の流れは次の6段階です。
ラフ絵が詰まったフォルダーを用意します。
ランダムに選らばれたラフ絵をもとに、ポーズ読み取り用のリアル画像を作る
別にランダムに選ばれたラフ絵から、キャラクター固定用のアニメ画像を作る
ControlNetでポーズ画像とキャラ画像を組み合わせる
ChatGPTでファッションイラスト風に仕上げる
ChatGPTで「朝のAIポートレイト」に仕上げる
2.まずはポーズ用のリアル画像を作る
最初に、ランダムに選ばれたラフ絵をComfyUIの Z-Image-Turbo モデルでリアル画像へ変換します。

目的は、写真のような画像を完成させることではありません。次の工程でControlNetにポーズを読み取らせるためです。ラフ絵そのものより、リアル画像のほうが姿勢や手足の位置を安定して拾ってくれることがあります。

今回選ばれたラフは、メッセージボードを持った女性です。線だけの絵だったものが、立ち姿やワンピースの雰囲気を保ちながら、ポーズ用のリアル画像になりました。

3.別のラフから、キャラクター用のアニメ画像を作る
次に、ランダムに選ばれたラフ絵をComfyUIの Anima モデルでアニメ画像にします。こちらは、ポーズを正確に取るためではなく、キャラクターの顔立ち、髪型、色合いなどの「キャラらしさ」を作る工程です。


ラフの雰囲気を残しつつ、眼鏡や髪型、服の色がはっきりしたアニメキャラクターへ変わります。

4.ポーズとキャラクターを合成する
ここでControlNetを使います。
先ほど作ったリアル画像からは「ポーズ」を、アニメ画像からは「キャラクターの雰囲気」を受け取ります。これで、ラフのポーズを活かしながら、アニメキャラとしてまとまりのある全身画像を作ることができます。

ここまでの工程では、ラフ絵を「完成原画」として扱うのではなく、ポーズ、構図、キャラのイメージを伝えるための出発点として使っています。

5.ChatGPTでファッションイラスト風に仕上げる
次は、生成したキャラクター画像をChatGPTに渡して、ファッションイラスト風に仕上げます。

今回使ったプロンプトは、とても短いものです。
このラフ絵を使ってファッションイラストを作って
柔らかな色面や、少しラフな線、縦長のスタイルが加わると、同じキャラクターでもぐっと雑誌の挿絵のような雰囲気になります。

最初から思いどおりの結果にならない場合もあります。そのときは「服を水色に」「両足を地面につけて」「髪を整えて」など、気になったところを短く追加していくと、だんだん自分の好みに近づけられます。
6.「朝のAIポートレイト」へ仕上げる
最後に、同じ画像をChatGPTで「朝のAIポートレイト」にしてみます。

使用したプロンプトは、こちらです。
この画像の構図とポーズを保ったままでキャッチーな朝のAIポートレイトを作って
ラフにあった立ち姿や、女性の構図を保ちながら、朝の光、青空、街並み、タイトル文字などが加わりました。ラフの1本の線から始まったものが、毎朝の投稿に使えるような1枚まで育っていきます。

生成AIを使い回せば、色々と遊べます
今回あらためて感じたのは、ラフ絵は上手に描き込まれていなくても、生成AIと組み合わせることで十分に楽しめるということです。
ポーズだけを使う。キャラクターだけを使う。ChatGPTで雰囲気を変える。そんなふうに工程を分けると、途中でできた画像にも新しい発見があります。
毎日少しずつラフを描きためておけば、あとからそれを素材にして、何度でも遊べます。スケッチを描く練習にもなりますし、自分らしいポーズや構図のストックも増えていきます。
「手描き」と「生成AI」を行ったり来たりしながら、これからもいろいろ試していこうと思います。
出来上がった 「朝のAIポートレイト」は毎朝Substackに投稿しています。
(補足)以下 同じようにして作成した画像です。参考にしてください






お疲れ様でした。では、また。
タグ:#AIイラスト #生成AI #ChatGPT #ComfyUI #ControlNet #Anima #ZImageTurbo