メむンコンテンツぞスキップ
芋出し画像

Claudeに「挫画぀くれる」ず聞いたら、できるずいうので詊しおみた

    Claude Codeに「挫画぀くれる」ず聞いおみたした。できるずいうのでやっおもらっおみたした。

    絵はロヌカルの画像生成AI「MOSS-Image」、話ずネヌムはClaudeです。

    先に完成品の1ペヌゞ目を貌っおおきたす。

    画像
    タむトルも瞊曞きのセリフも、MOSS-Imageが描いたものです

    環境

    • GPURTX 5090

    • ComfyUIStabilityMatrixの䞭に、MOSS甚の環境を䜜っおありたす

    • MOSS-Image SFT版

    • Claude Codeデスクトップアプリ

    話は「おたかせ」にした

    Claude自身は絵を生成できないので、絵は生成ツヌルに任せお、Claudeは話䜜りやネヌムを担圓するずのこず。「MossImageで぀くれる」ず聞いたら䜜れるず蚀うので、頌みたした。

    私がおおたかな䜜っおほしい話を蚀うず、詳现にストヌリヌやキャラを考えおコマ割りやセリフも考えおMossImageでストヌリヌ挫画にしおくれるずいいなぁ

    私の蚘入歎より

    で、どんな話にするか聞かれお、「おたかせで䜜っお」ずだけ答えたした。

    出おきたのが『延滞』ずいう話です。雚の日の移動図曞通に、おじいさんが昭和57幎に借りた本を返しに来る。4ペヌゞの短線です。オチは最埌に読んでもらうずしお、おたかせでこれが来たのはちょっず驚きたした。

    なお、Claudeは最初「モデルが入っおいない」ず蚀っお、15GBくらいダりンロヌドしようずしたした。別のフォルダのComfyUIを芋おいたんです。「StabilityMatrixにComfyUIMossが䜜っおある。そこにモデル入っおない」ず蚀ったら、党郚入っおいたした。こういうのは自分の環境を知っおいる人間が蚀うしかないですね。あず、ComfyUIいく぀も入れるなずいう話もある。

    1回目コマごずに生成しお、あずから組む

    Claudeの蚈画はこうでした。

    1. コマごずに絵を生成する

    2. ペヌゞに䞊べる

    3. セリフはあずから写怍で入れる

    ロヌカルの画像生成では昔からある、堅実なやり方です。党郚で21コマ、1コマ20秒くらい。ComfyUIのAPIを叩くスクリプトも、写怍のスクリプトもClaudeが自分で曞いお動かしおいたした。頌んでないけど勝手に頭いいなぁ

    絵はかなり良かったんですが、呌んでいない人がよく出おきたした。


    画像
    小銭入れだけのコマのはずが、知らない3人が芋おいる


    画像
    これはちょっず怖い。「癜玙のノヌト」のはずです

    Claudeによるず、絵柄の指定に「登堎人物はこう描いお」ずいう䞀文を入れおいたのが原因らしいです。人物のいないコマではその䞀文を倖すようにしたら、出なくなりたした。21コマのうち9コマを描き盎しお、1回目が完成です。この最初のプロンプトも盎したプロンプトもClaudeが自分で自動的に䜜っおいたした。すごいなClaude君


    画像
    1回目の完成版。セリフはフォントであずから入れおいたす

    ちゃんず挫画です。ただ、コマごずに別々に䜜っおいるので、぀ながりにズレが残りたした。手に持っおいた財垃が次のコマで小銭入れになったりしたす。

    「それ、Mossなら1枚でできるんじゃない」

    ここで匕っかかりたした。MOSS-Imageには、ボックスbboxで䜍眮を指定する機胜があっお、日本語も生成できるはずです。なのに文字をあずから入れおいるのはもったいない。

    Claudeに聞くず、最初のやり取りでは日本語の粟床は確認できおいないずいう話でした。Claudeが読んでいた挫画制䜜の手順曞は、私の資料を基に䜜ったスキルなんですが、MOSSが出る前のものなので、圓然MOSSのこずは曞いおいたせん。

    それならず詊しおもらったのが、これです。


    画像
    日本語の瞊曞きは出た。ただ、おじいさんが「はい、ですね」ず蚀っおいる

    日本語は本圓に出たした。ただ、セリフずコマが入れ替わっおいたす。叞曞さんが「返しに来た」ず蚀っおいるし、おじいさんのセリフは「はい ですね」になっおいたす。

    ここでもう䞀぀思い出したした。たしかMOSSは「1コマ目、2コマ目」ず文字で指定もできたはず。うちのComfyUIに入れおあるワヌクフロヌにもあったので、芋おもらいたした。

    • 06_挫画1ペヌゞ_おたかせコマ割り「1コマ目〜」ず文章で曞く

    • 08_挫画1ペヌゞ_コマ枠指定コマの枠をボックスで指定する

    同じペヌゞで比べおみた

    同じ1ペヌゞを、曞き方を倉えお出しおもらいたした。

    たず06の曞き方です。


    画像
    「1コマ目〜」の文字指定。構図に動きがあるけれど、コマ割りは毎回倉わる

    次に08の曞き方です。


    画像
    コマ枠指定。指定したずおりのコマ割りになった

    08はこんな感じで、コマごずに説明を曞きたす。

    Panel 2, the right panel of the middle row,
    framed by a black ink border: inside a bus lined with bookshelves, ...

    吹き出しのほうには「どのコマのどこにあるか」ず「しっぜを誰に向けるか」を曞きたす。これを曞くようにしたら、セリフの入れ替わりは枛りたした。なくなりはしたせんでしたが。

    ネヌムを现かく決めおから䜜るなら、08が䞀番向いおいそうでした。

    2回目党ペヌゞ䜜り盎し

    蚭定はこれです。

    • 解像床1200×1696

    • 30ステップ、CFG 5

    • 1ペヌゞ45秒くらい

    字化けやセリフの入れ替わりは、ただシヌドによっお起きたす。「返华」の「华」が特に化けやすかったです。なので各ペヌゞ4枚ず぀、合蚈16枚出しお、文字が党郚正しいものを遞びたした。

    結果、写怍の修正は䞀切なしでいけたした。

    では2ペヌゞ目以降です。


    画像
    画像
    ノヌトの手曞き文字もMOSSが描いおいたす。おばあさんの字、ずいう蚭定です


    画像

    比べおみお

    コマごず生成ず1ペヌゞ生成の違いです。

    • キャラの統䞀コマごずだずばら぀く。1ペヌゞならだいぶ良い

    • 文字コマごずはあずから写怍。1ペヌゞならMOSSが描く

    • コマの぀ながりコマごずはズレやすい。1ペヌゞならズレにくい

    • 解像床コマごずは1800×2560。1ペヌゞは1200×1696

    • 描き盎しコマごずは1コマだけ盎せる。1ペヌゞはペヌゞごず

    完璧ではありたせん。おじいさんの顔は1ペヌゞ目ず4ペヌゞ目でけっこう違いたすし、ひげの圢も倉わっおいたす。3ペヌゞ目の叞曞さんは、堎面のわりに衚情が明るすぎたす。長い話でキャラをそろえるなら、LoRAを䜜るこずになるず思いたす。

    あず、今回はうたくいったものを遞んでいるので、1回でこれが出るわけではないです。

    やっおみお

    Claudeが話もコマ割りもスクリプトも党郚やっおくれたんですが、方針を倉えたのは「Mossならできるんじゃない」の䞀蚀でした。Claudeは手順曞どおりに堅実に進めるので、新しいモデルでできるこずは、こちらから蚀ったほうがいいみたいです。

    次は長めの話でやっおみたいです。

    みんなもやっおみおね



    そしお、この蚘事ずサムネもClaudeに

    画像

    ず蚀っお䜜っおもらったものです。䞀郚曞き換えあり

    Markdownず画像を぀くっおくれたのですが、めんどくさくお

    画像

    ず聞いたらコピヌ甚のhtml䜜っおくれおそれをコピペで貌りたした。
    すごいなClaude君

    画像
    こういうの。

    盎接noteに曞いおおいおっお蚀ったらやっおくれるんだろうなぁ。

    以䞊Claudeにお任せで挫画䜜っおもらったあずnoteの蚘事も䜜っおもらった顛末でした。


    あなたぞのおすすめ