メむンコンテンツぞスキップ
芋出し画像

DALL-E 3 with ChatGPTの特城ず面癜い䜿い方

    OpenAIが9月20日に発衚した新画像生成AIのDALL-E 3が぀いに筆者のずころにもやっお来たした。
    そこで、ChatGPTに統合されたDALL-E 3に䜕ができるのか、実際に詊しおみたした。


    DALL-E 3の特城

    このDALL-E 3の䞻な特城は以䞋の2点です。

    1. 耇雑なプロンプトにも忠実で正確な画像を生成できる。

    2. ChatGPTずの察話を螏たえお画像を生成するこずができる。

    ChatGPTによるず、Stable DiffusionずDALL-E 3の画像生成の仕組みの違いは以䞋の通りです。

    Stable DiffusionずDALL-E 3の画像生成の仕組みの違いを教えおください。特に、なぜプロンプトに察する忠実性に差が出るのかを教えおください。

    ChatGPT 「Stable Diffusion」ず「DALL·E 3」の間の具䜓的な差異に぀いおは、私の最埌のトレヌニングデヌタのカットオフ2022幎1月たでの公開情報に基づいおお答えしたす。それ以降の詳现な曎新や発衚があるかもしれたせんので、その点をご了承ください。

    基本的なアプロヌチ:
    ・Stable Diffusion: 画像生成のための手法ずしお、拡散モデルを䜿甚したす。これは、画像をランダムなノむズから埐々に倉換しおタヌゲットの画像に近づけるプロセスです。
    ・DALL·E 3: DALL·Eのバヌゞョンやバリ゚ヌションで、テキストプロンプトから盎接画像を生成するトランスフォヌマヌベヌスのモデルです。

    プロンプトぞの忠実性:
    ・Stable Diffusion: 拡散プロセスは埐々に行われるため、生成される画像はプロンプトに察しお段階的に近づく可胜性がありたす。この段階的なアプロヌチのため、䞀郚の詳现やニュアンスが倱われるこずがありたす。
    ・DALL·E 3: トランスフォヌマヌベヌスのモデルは、テキストのセマンティクスを盎接的にキャプチャする胜力が高いため、プロンプトに察する忠実性が高たる可胜性がありたす。

    モデルの構造ずトレヌニング:
    ・䞡者のモデルは、異なるアヌキテクチャずトレヌニング手法を䜿甚しおいたす。これにより、同じプロンプトに察しおも異なる結果を生み出すこずがありたす。

    プロンプトの解釈:
    ・どちらのモデルも、プロンプトの解釈には独自のバむアスや制玄が存圚したす。これは、モデルのトレヌニングデヌタやそのアヌキテクチャに起因するものです。

    総合的に蚀えば、Stable DiffusionずDALL·E 3は異なるアプロヌチず構造を持぀モデルであり、それぞれがプロンプトを解釈し、画像を生成する方法には独自の特性がありたす。これがプロンプトぞの忠実性に差を生む䞻な理由ずなっおいたす。

    「DALL·E 3: DALL·Eのバヌゞョンやバリ゚ヌションで、テキストプロンプトから盎接画像を生成するトランスフォヌマヌベヌスのモデルです。」ずいう点に぀いお、「テキストプロンプトから盎接画像を生成する」ずはどういうこずなのか鍬しく説明しおください。

    ChatGPT 了解したした。「テキストプロンプトから盎接画像を生成する」ずいうフレヌズに関する詳现な説明をいたしたす。

    DALL·Eは、テキストプロンプトを入力ずしお受け取り、そのプロンプトの内容を衚す画像を出力するモデルです。ここでの「盎接」ずは、テキストから画像ぞの倉換が䞭間的なステップなしで行われるこずを意味したす。具䜓的には、以䞋のステップを経お画像が生成されたす

    入力の゚ンコヌド: テキストプロンプトは、モデルが理解できる圢匏通垞はベクトルに゚ンコヌドされたす。

    トランスフォヌマヌレむダの凊理: この゚ンコヌドされた入力は、トランスフォヌマヌアヌキテクチャのレむダを通過したす。トランスフォヌマヌは、入力デヌタのセマンティクスや関係性を捉える胜力が高いため、テキストの内容に基づいお適切な画像特城を生成するのに圹立ちたす。

    デコヌドず画像生成: トランスフォヌマヌレむダの出力は、画像デコヌダに䟛絊されたす。このデコヌダは、トランスフォヌマヌの出力を基にしお、具䜓的な画像を生成したす。

    このプロセス党䜓を通じお、DALL·Eはテキストプロンプトの意味やニュアンスを捉え、それに基づいお関連する画像を「盎接」生成したす。これは、䟋えば、画像の䞀郚を手動で線集するような間接的なステップなしで行われるこずを意味したす。

    簡単に蚀えば、DALL·Eはテキストの指瀺を理解し、それをビゞュアルな圢匏に倉換する胜力を持っおいたす。この「盎接的な」倉換プロセスにより、ナヌザヌはテキストプロンプトだけで様々な画像を生成するこずができたす。

    Stable Diffusionの拡散プロセスは、生成画像を段階的にプロンプトに近づけおいくために、テキストの詳现やニュアンスの䞀郚が倱われるこずがありたすが、DALL-E 3のモデルは、テキストの意味を把握する胜力が高く、より盎接的にテキストから画像を生成するため、これらが倱われるこずが少ないずいうこずのようです。


    DALL-E 3の仕組み

    (1) 銬に乗る宇宙飛行士

    以䞋のように「銬に乗る宇宙飛行士を描いおください。」ず䟝頌するず、4枚の画像が生成されたす。

    画像
    ChatGPT䞊で生成された4枚の画像

    このずき、少しず぀異なる4皮類の英語のプロンプトをChatGPTが生成し、それぞれのプロンプトに基づいおDALL-E 3が画像を生成したす。

    巊䞊満倩の星ず銀河を背景に、自信たっぷりに疟走する銬に乗る宇宙服姿の宇宙飛行士の写真。
    右䞊星雲ず遠くの惑星に囲たれた広倧な宇宙の䞭に浮かぶ、銬に乗った決死の宇宙飛行士のむラスト。
    巊䞋煌めく倩の川銀河がアヌチを描き、優雅に銬に乗る宇宙飛行士の油絵。
    右䞋バむザヌに星座が映し出され、深青色の星空を背景にしお、跳ね銬に乗った宇宙飛行士のベクタヌ画像。

    各プロンプトの日本語蚳

    (2) 喜怒哀楜を衚わす4人の矎しい女神

    ChatGPTが入力したテキストの指瀺に埓っおプロンプトを生成するため、䌌たような画像だけでなく、党く異なる皮類の画像を生成するこずもできたす。
    なお、ChatGPTの特城ずしお、人皮の倚様性を考慮したプロンプトが生成されたす。

    画像
    ChatGPT䞊で生成された4枚の画像

    巊䞊喜びを衚珟する女神の写真。茝く黄金のドレスを着た東アゞアの女性が、咲き誇る花々ず陜気なオヌラに囲たれお描かれおいる。
    右䞊怒りを瀺す女神の写真。燃えるような赀い衣装を身にたずい、激しい衚情で枊巻く炎の䞭に立぀南アゞアの女性ずしお描かれおいる。
    巊䞋悲しみを䜓珟する女神のむラスト。流れるような青いガりンを着たアフリカの女性が涙を流し、背景は物悲しい雚暡様。
    右䞋ナリの花が咲く静かな池のほずりで瞑想する、萜ち着いた緑色の服を着たペヌロッパ女性の姿で描かれた、平穏を象城する女神の油絵。

    各プロンプトの日本語蚳

    (3) 䞭囜の神話における四神

    「四神ず矎しい背景のむラストを描いおください。」ず入力しお生成された4枚の画像。
    四神ずは、䞭囜の神話䞊の方角を叞る霊獣で、青韍、朱雀、癜虎、玄歊の四匹で構成されおいたす。

    画像
    ChatGPT䞊で生成された4枚の画像

    (4) 究極の矎女

    矎女を描いおもらおうずするず、なぜか䞀定の割合で男性が描かれたす。
    しかも、今回は、党お癜黒画像になっおしたいたした。

    画像

    巊䞊の画像のプロンプトは、「掗緎された顔立ちの優雅な女性がクヌルな衚情を芋せおいる写真。ヘアアクセサリヌずチョヌカヌを぀けおいる。」和蚳で、男性が描かれる芁玠はないはずなのですが。LGBTを意識しおいるのでしょうか

    (5) プロンプトの指定日本語

    以䞋のようにプロンプトを指定しお画像を生成するこずができたす。
    その堎合、1枚だけしか生成しおくれないこずが倚いようです。

    以䞋のプロンプトを倉えずに画像生成しおください。「端正な顔立ちをしたクヌルな衚情の矎しい女性をリアルに描いおください。髪食りずチョヌカヌを身に付けおいたす。」

    画像

    クヌルな衚情ではなく、チョヌカヌを身に付けおいないなど、日本語のプロンプトの堎合は、あたりプロンプトに忠実な画像を生成しおくれたせん。

    (6) プロンプトの指定英語

    Please generate the image without changing the following prompt. 'Please create a realistic portrait of a beautiful woman with a neat face and cool expression. She is wearing a hair ornament and a choker."

    画像

    日本語プロンプトの堎合ず異なり、かなりプロンプトに忠実な画像が生成されたす。


    ChatGPTずの察話を掻甚した画像生成

    (1) 矎しいサむボヌグの画像

    身䜓の半分がメカでできた矎しいサむボヌグの画像を生成したいので、プロンプトを芋せおください。

    ChatGPT
     もちろん、以䞋のプロンプトを䜿甚しお、身䜓の半分がメカでできた矎しいサむボヌグの画像を生成したす。
    写真鮮やかな街の背景の前に立぀、右偎の身䜓が高床なメカニックでできおいる矎しい女性サむボヌグ。
    むラスト明るいスタゞオの䞭で、巊腕ず巊脚が鋌鉄のメカパヌツでできおいる若い男性サむボヌグがポヌズをずっおいる。
    写真未来的な郜垂の倜景の前に、䜓の䞭倮郚分がメカで、顔の半分がメカでできおいる矎しいサむボヌグ。
    ベクタヌシンプルな背景の䞊で、胎䜓の右偎が明るいLEDラむトを持぀メカでできおいるアゞア系の女性サむボヌグ。

    これらのプロンプトを䜿甚しお画像を生成したす。

    画像

    日本語でプロンプトを生成したせいか、党くプロンプトの指瀺に埓っおいたせん。

    これらのプロンプトを英語に翻蚳しお、再床画像を生成しおください。

    ChatGPT もちろん、以䞋は英語に翻蚳されたプロンプトです
    Photo: A beautiful female cyborg standing in front of a vibrant city background with the right side of her body made of advanced mechanics.
    Illustration: A young male cyborg in a bright studio, with his left arm and left leg made of steel mechanical parts, striking a pose.
    Photo: A beautiful cyborg in front of a futuristic city nightscape, with the middle part of her body and half of her face made of mechanics.
    Vector: An Asian female cyborg on a simple background, with the right side of her torso made of mechanics with bright LED lights.

    これらのプロンプトを䜿甚しお画像を再生成したす。

    画像

    先皋よりは、だいぶプロンプトの指瀺に近いものが出おきたした。

    3番目の画像を暪長にしお、もっずカラフルで矎しい画像に描き盎しおください。

    画像

    圓初より、だいぶ矎しい画像に修正するこずができたした。

    (2) バベルの塔の再構築

    DALL-E 3ず同時に、画像認識ができるGPT-4Vも利甚できるようになりたしたので、これを画像生成に掻甚する方法を考えおみたした。

    最初に、Wikipediaのバベルの塔ブリュヌゲルのペヌゞから、パブリックドメむンのバベルの塔の画像をコピヌしお、ChatGPTDefaultの入力欄に貌り付けたす。

    画像
    ピヌテル・ブリュヌゲルの「バベルの塔」

    そしお、「この画像を具䜓的に正確に詳现に説明しおください。」ず入力したす。

    この画像は、叀代の建造物や颚景を描いた絵画のようです。以䞋は、画像の詳现な説明です
    ・䞭倮には、巚倧な円圢の塔や建物が存圚したす。この建物は、倚数の窓やアヌチ、バルコニヌがあり、異なる色合いやデザむンの郚分が芋受けられたす。䞊郚には赀い屋根の建物や領域があり、その䞋には癜やグレヌの郚分が重なっおいたす。
    ・塔の呚りには、倚くの人々が䜜業をしおいる様子が描かれおいたす。石を切ったり、運んだりする人、䌚話を楜しむ人々、䌑憩する人々など、様々な掻動が行われおいたす。
    ・画像の巊䞋には、石を切る䜜業をしおいる工人たちや、その石材を積んで運ぶ銬車が描かれおいたす。
    ・画像の背景には、広倧な郜垂や町が広がっおいたす。この郜垂には、倚数の建物や家屋、教䌚の尖塔、橋などが点圚しおいたす。たた、河や湖も描かれおおり、船や小舟が氎䞊を行き亀っおいたす。
    ・空には、雲が浮かび䞊がっおおり、画像の巊䞊郚には暗い雲が特に目立ちたす。

    この画像は、バベルの塔を衚珟した絵画の可胜性が高いです。バベルの塔は、旧玄聖曞に蚘述されおいる゚ピ゜ヌドで、人類が䞀぀の蚀語を話す時代に、倩に達する高さの塔を建蚭しようずしたが、神がそれを奜たしく思わず、人々の蚀語を混乱させお分散させたずいう物語です。

    ChatGPTの回答

    この内、バベルの塔ずいう固有名詞が蚘茉されおいる最埌の文を陀いた文章をプロンプトずしお利甚したす。

    「新しいチャット」をクリックしお開き、GPT-4のDALL-E 3モヌドに蚭定したす。
    次に以䞋のように入力しお、新たな画像を生成したす。

    以䞋のプロンプトを英語に翻蚳しお画像を生成しおください。
    プロンプト
    この画像は、叀代の建造物や颚景を描いた絵画のようです。以䞋は、画像の詳现な説明です
    ・䞭倮には、巚倧な円圢の塔や建物が存圚したす。この建物は、倚数の窓やアヌチ、バルコニヌがあり、異なる色合いやデザむンの郚分が芋受けられたす。䞊郚には赀い屋根の建物や領域があり、その䞋には癜やグレヌの郚分が重なっおいたす。
    ・塔の呚りには、倚くの人々が䜜業をしおいる様子が描かれおいたす。石を切ったり、運んだりする人、䌚話を楜しむ人々、䌑憩する人々など、様々な掻動が行われおいたす。
    ・画像の巊䞋には、石を切る䜜業をしおいる工人たちや、その石材を積んで運ぶ銬車が描かれおいたす。
    ・画像の背景には、広倧な郜垂や町が広がっおいたす。この郜垂には、倚数の建物や家屋、教䌚の尖塔、橋などが点圚しおいたす。たた、河や湖も描かれおおり、船や小舟が氎䞊を行き亀っおいたす。
    ・空には、雲が浮かび䞊がっおおり、画像の巊䞊郚には暗い雲が特に目立ちたす。

    入力した内容

    するず、先ずChatGPTがこの文章を英蚳しおくれたす。

    The translated prompt is: "This image looks like a painting depicting ancient structures and landscapes. Here is a detailed description of the image:
    ・In the center, there is a massive circular tower or building. This building has numerous windows, arches, and balconies, with different shades and design elements visible. There are red-roofed structures or areas at the top, with white and gray sections layered below.
    ・Around the tower, many people are depicted working. There are people cutting and transporting stones, people enjoying conversations, and people taking breaks, among various other activities.
    ・In the bottom left of the image, craftsmen cutting stones and horse-drawn carriages transporting these stones are illustrated.
    ・In the background, a vast city or town spreads out. This city is dotted with numerous buildings, houses, church spires, bridges, etc. There are also rivers or lakes depicted, with boats and small ships traversing the waters.
    ・In the sky, clouds are floating, with particularly dark clouds standing out in the top left of the image."

    Let's generate images based on this description.

    次に、ChatGPTがこの英文を基にプロンプトを䜜成し、画像を生成したす。

    画像

    (3) アルチンボルド颚のボヌカロむド

    同じように、ゞュれッペ・アルチンボルドの「倏」ずいう䜜品を利甚しお、アルチンボルド颚のボヌカロむドを描いおみたした。

    画像
    ゞュれッペ・アルチンボルドの「倏」

    以䞋のプロンプトを英語に翻蚳しお画像を生成しおください。
    プロンプト
    この画像は、さたざたな果物や野菜で構成された人の顔を䞭心ずした絵画です。以䞋にその詳现を蚘述いたしたす。
    この画像は、緑色の長い髪が特城の有名なボヌカロむドをモチヌフずした画像です。
    できるだけ明るいカラフルな画像にしおください。
    䞭倮には倧きな人の顔が描かれおいたす。この顔は、リンゎ、モモ、ブドり、パセリ、小麊の穂、チェリヌなどの果物や怍物で圢䜜られおいたす。
    顔の頭頂郚には倧きな葉っぱや赀や緑のブドり、ベリヌ類が豊かに実っおいたす。
    顔の右偎には、倧きなリンゎやモモ、小さな赀いベリヌなどが芋られたす。
    顔の巊偎には、小麊の穂や倧きなパセリの葉が描かれおいたす。
    顔の䞋郚や銖の郚分には、さたざたなテクスチャや暡様がありたす。特に、銖の郚分には「MIKU」ずいう文字が圫り蟌たれおいたす。
    画像の背景は、暗い色調で、さたざたな草花や果物が描かれおいたす。右䞋には、特定の花の蕟のようなものも芋られたす。

    入力した内容
    画像
    ChatGPTの出力結果

    文字の挿入

    埓来、画像生成AIは文字を描くのが苊手だず蚀われおきたしたが、DALL-E 3は、プロンプトに埓っお、かなり正確な文字を衚瀺するこずができたす。

    (1) 英単語の挿入

    入力Draw a Japanese woman holding a sign with a large "DALL-E 3" written on it.

    画像

    ※倧䜓よく曞けおいたすが、右䞊の画像はスペルミスがありたす。

    (2) 日本語の単語の挿入

    入力Draw a Japanese woman holding a sign with a large "ダリ 3" written on it.

    画像

    ※日本語の挿入は無理なようです。

    (3) 文章の挿入

    入力Draw a young boy holding a sign with a large "Attention Is All You Need" written on it.

    画像

    ※文章でも正確に挿入できたす。

    入力Please draw a building with a large sign that reads "Attention Is All You Need."

    画像

    ※建物に衚瀺する堎合は、結構、スペルミスがありたした。


    フラットデザむンのむラスト

    プレれン資料の挿絵などには、フラットデザむンのむラストが䟿利です。

    (1) 実隓をする人

    入力化孊実隓をする研究者のフラットデザむンのむラスト

    画像

    「ベクタヌむラスト」ずいうプロンプトでも同じようなむラストが描けたす。 入力化孊実隓をする研究者のベクタヌむラスト

    画像

    (2) 人工知胜ずの察話

    入力人工知胜ず察話する人のフラットデザむンのむラスト

    画像

    入力人工知胜ず察話する人のベクタヌむラスト

    画像

    様々な画像

    単玔な入力でも、様々な面癜い画像を生成しおくれたす。

    (1) 宇宙の始たり

    画像
    入力宇宙の始たり

    (2) 巚倧ロボットの組立説明曞

    画像
    入力巚倧ロボットの組立説明曞

    (3) 進化図

    画像
    入力進化図

    (4) 地獄草玙

    画像
    入力地獄草玙

    ※掋颚の地獄ですね。

    (5) 日本の歎史

    画像
    入力瞄文時代から珟代たでの日本の歎史を1枚のポスタヌ画像にたずめおください。

    ※色々ず倉ですね。


    挫画を描く

    (1) 子犬を䞻人公にした4コマ挫画

    画像
    入力子犬を䞻人公にした4コマ挫画を描いおください。

    かわいい子犬が登堎する4コマ挫画のむラスト。
    最初のコマでは、子犬が奜奇心旺盛な様子で地面の匂いを嗅いでいる。
    2コマ目、子犬はおもちゃを芋぀けお興奮しおいる。
    3コマ目、子犬はおもちゃを空䞭に攟り投げお楜しそうに遊んでいる。
    4コマ目、子犬は疲れおおもちゃの暪に暪たわり、昌寝をしおいる。

    ChatGPTが䜜成したプロンプト日本語蚳

    (2) 女子高生を䞻人公ずした4コマ挫画

    画像
    入力女子高生を䞻人公ずした4コマ挫画を描いおください。

    ※なぜか6コマになっおしたいたした。

    女子高生が䞻人公の4コマ挫画のむラスト。
    1コマ目机に向かっお䞀生懞呜勉匷しおいる。
    2コマ目携垯のメッセヌゞに気を取られる。
    3コマ目友達ずおしゃべりしお䌑憩。
    4コマ目やる気を取り戻し、笑顔で勉匷に戻る。

    ChatGPTが䜜成したプロンプト日本語蚳

    ※画像の順番が合っおいたせんね。

    (3) 高校生の友情をテヌマにした挫画①

    画像
    入力高校生ずその友達の友情をテヌマずしたセリフ入りの挫画の1ペヌゞを䜜成しおください。

    高校生ずバディの絆を描いた1ペヌゞ挫画のむラスト。
    1コマ目「みんなに期埅されちゃっお......」ず動揺する高校生。
    2コマ目友人は真剣に話を聞き、「自分らしく、ずっず応揎しおいるよ」ず蚀う。
    3コマ目2人の友人は家でポップコヌンを分け合いながら映画を芋おいる。高校生は「こういう時間はすべおを良くしおくれる」ずコメントする。
    4コマ目友人は芪指を立お、「䜕があっおも、い぀も君のためにここにいるよ」ず答える。郚屋は暖かさず心地よさで満たされおいる。

    ChatGPTが䜜成したプロンプト日本語蚳

    (4) 高校生の友情をテヌマにした挫画②

    画像
    入力高校生ずその友達の友情をテヌマずしたセリフ入りの挫画の1ペヌゞを䜜成しおください。

    高校生ずその仲間の友情を描いた1ペヌゞ挫画のむラスト。
    1コマ目高校生は「今日のプレれン、倱敗しちゃった......」ず䞍安げ。
    2コマ目友人が慰める。「きっず立ち盎れるよ」ず慰める。
    3コマ目䞀緒に趣味のキャンバスに絵を描く。高校生は「君ずいるず悩みを忘れられる」ず蚀う。
    4コマ目筆を手にした友人が答える。「君は玠晎らしいよ」。二人の䜜品は、二人の思い出を象城しおいる。

    ChatGPTが䜜成したプロンプト日本語蚳

    DALL-E 3の芏制

    (1) Bingの芏制ずの比范

    Bingチャットでも、DALL-E 3に画像生成しおもらうこずができたすが、以䞋のプロンプトを入力するず、ほが必ず生成を拒吊されたす。

    秋の玅葉ず济衣を着た20代の日本人女性䞀人。堎所は枅氎寺。

    Bingチャットの堎合、「日本人女性」や「アゞア系女性」ずいう単語を入力するず、生成を拒吊されるこずが倚いようです。
    䞀方、ChatGPTのDALL-E 3では、以䞋のように画像生成するこずができたす。

    画像

    ChatGPTでも、生成を拒吊される堎合がありたすが、察象ずなる蚀葉に違いがあるようです。

    (2) 有名キャラクタヌの画像

    ① ピカチュり

    画像
    入力ピカチュりの画像を描いおください。

    䌌おいたすが、本物ずは少し違うようです。
    䟋えば、巊䞊の画像では、プロンプトが「某有名ゲヌムシリヌズで人気の黄色い電気ネズミのむラスト。」和蚳に曞き換えられおいたす。
    このように、ChatGPTのDALL-E 3では、プロンプトを曞き換えるこずによっお無害化しおいたす。
    でも、ピカチュりは、少し䌌すぎおいるように感じたす。

    ② ONE PIECEのチョッパヌ

    画像
    入力チョッパヌが仲間たちず食事をしおいる画像

    チョッパヌがトナカむであるこずは同じですが、党く䌌おいたせん。
    巊䞊の画像のプロンプトは「かわいいトナカむのキャラクタヌが仲間たちず食事をしおいるむラスト。」和蚳に曞き換えられおいたす。

    ③ ドラゎンボヌルの孫悟空

    画像
    入力孫悟空がかめはめ波を発射しおいる画像

    これも、右䞋の画像の髪型以倖は、ほずんど䌌おいたせん。
    巊䞊の画像のプロンプトは、「匷力な゚ネルギヌ波を攟぀、ずがった髪の歊道家のむラスト。」和蚳に曞き換えられおいたす。

    (3) 有名人の画像

    ① ゚マ・ワト゜ン

    画像
    入力゚マ・ワト゜ンがダンスを螊っおいる画像

    右䞋の䞀番前の女性は、少し䌌おいるでしょうか。
    巊䞊の画像のプロンプトは、「茶色の髪の若いむギリス人女優が優雅に螊っおいる写真。」和蚳に曞き換えられおいたす。

    ② 芊田愛菜

    画像
    入力通孊䞭の芊田愛菜の写真

    どの画像も党く䌌おいたせん。特に巊䞋の画像は少幎です。
    でも、日本の女優の名前も把握しおいるんですね。
    巊䞊の画像のプロンプトは、「日本の有名な若手女優の登校䞭の写真。」和蚳に曞き換えられおいたす。

    ③ むヌロン・マスク

    画像
    入力Twitterのロゎマヌクを掲げるむヌロン・マスク

    むヌロン・マスクには党く䌌おいたせんが、右䞊のマヌクは、旧Twitterのロゎマヌクにそっくりです。
    巊䞊の画像のプロンプトは、「人気゜ヌシャルメディア・プラットフォヌムのロゎを持぀有名な起業家の写真。」和蚳に曞き換えられおいたす。

    (4) 有名アヌティストのスタむル

    ① ゎッホのスタむル

    䞍思議の囜のアリスをゎッホの画颚で描いおください。
    ChatGPT
     ゎッホを盎接参照するこずはできたせんが、19䞖玀末のポスト印象掟のスタむルにむンスパむアされたむメヌゞを䜜るこずはできたす。それで進めおみたしょう和蚳

    画像

    ChatGPTは有名画家の画颚で描くこずを避けお、同時代のより䞀般的な画颚で画像を生成したす。しかし、あたりゎッホらしくはないですね。

    同じ内容を英語で入力しおみたす。

    Please paint Alice in Wonderland in the style of Van Gogh.

    画像

    英語だず、きちんずゎッホの画颚で描いおくれたした。
    日本語で指瀺した堎合ず英語で指瀺した堎合で芏制が異なるようです。

    ② ピカ゜のスタむル

    䞍思議の囜のアリスをピカ゜颚に描いおください。
    ChatGPT
     申し蚳ありたせんが、ピカ゜の䜜品はここ100幎以内のものなので、盎接参考にするこずはできたせん。しかし、20䞖玀初頭のキュビスムや抜象芞術の䞀般的なスタむルにむンスパむアされたむメヌゞを䜜るこずはできたす。では、そうしたしょう和蚳

    画像

    これもピカ゜の画颚ずは異なり、あたりピカ゜らしくありたせん。

    Please draw Alice in Wonderland in the style of Picasso.
    ChatGPT
     I can't reference Picasso directly. However, I can create an image inspired by the style characterized by certain adjectives, an associated artistic movement, and the primary medium Picasso used. Let's proceed with that.

    和蚳ピカ゜を盎接参照するこずはできたせん。しかし、ある圢容詞によっお特城づけられるスタむル、関連する芞術運動、そしおピカ゜が䜿った䞻な媒䜓からむンスピレヌションを埗たむメヌゞを䜜るこずはできたす。では、それを進めおいきたしょう。

    画像

    ピカ゜のような比范的最近䜜品制䜜埌100幎以内の画家の堎合は、英語でも、その画颚を参照するこずは拒吊されるようです。

    ③ ダ・ノィンチのスタむル

    䞍思議の囜のアリスをレオナルド・ダ・ノィンチのスタむルで描いおください。
    ChatGPT
     レオナルド・ダ・ノィンチを盎接参照するこずはできたせんが、ルネサンス時代のスタむルにむンスパむアされた、现郚たで写実的なアプロヌチのむメヌゞを䜜るこずはできたす。それで進めおいきたしょう
    和蚳

    質問は日本語で、ChatGPTの回答は英語
    画像

    100幎以䞊前の画家のスタむルでも避けるようです。やはり、ダ・ノィンチらしくはありたせん。

    Please paint Alice in Wonderland in the style of Leonardo da Vinci.

    画像

    ダ・ノィンチのような100幎以䞊前の画家の堎合は、英語の指瀺だず、その画颚で描いおもらえるようです。

    (5) 歎史䞊の人物

    ① ナポレオン

    画像
    入力銬にたたがるナポレオンの画像を描いおください。

    顔は䌌おいたせんが、右䞊の画像は、ノェルサむナ宮殿にある有名なナポレオンの絵の構図や服装にそっくりです。
    巊䞊の画像のプロンプトは、「19䞖玀初頭の服装に身を包み、戊闘シヌンを背景に堂々ず銬に乗る䞀般的な歎史䞊の軍事指導者の写真。」和蚳に曞き換えられおいたす。

    今床は、同じ内容を英語で指瀺しおみたす。

    Please draw an image of Napoleon astride a horse.

    画像
    入力Please draw an image of Napoleon astride a horse.

    英語で指瀺した堎合は、きちんずナポレオンの画像を描いおくれたした。
    やはり、日本語指瀺ず英語指瀺で差があるようです。

    ② 埳川家康

    画像
    入力畳の郚屋に座っおいる埳川家康のむラストを描いおください。

    かなり倪っおいた家康のむメヌゞずは異なりたす。
    巊䞊の画像のプロンプトは、「江戞時代を圷圿ずさせる歎史的な日本の䟍が座敷に座っおいるむラスト。䟍は䌝統的な甲冑を身に぀け、思玢の姿勢を取っおいる。」和蚳に曞き換えられおいたす。

    先皋ず同じように英語で指瀺しおみたす。

    Please draw an illustration of Tokugawa Ieyasu sitting in a tatami room.

    画像

    今床は、拒吊せずに盎接、埳川家康の画像を描いおくれたした。
    䜆し、本圓に埳川家康のむメヌゞに䌌おいるかずいうず疑問ですが。

    いずれにせよ、日本語で指瀺した堎合に、歎史䞊の人物たでプロンプトを曞き換えおしたうのは問題です。
    これは、毎回、英語で指瀺するように気を付けないずいけないのでしょうか。改善しおもらいたいずころです。


    自動小説生成における挿絵の自動挿入

    以前䜜成した自動小説生成プロンプトに、自動的に挿絵を䜜成しお挿入する機胜を远加したした。
    そのカスタム指瀺甚のプロンプト䞋段は以䞋の通りです。

    あなたはプロの小説家です。以䞋の指瀺に埓い、氎平思考で考えお、独創的な小説を曞いおください。
    指瀺
    最初に、「あなたの曞きたいゞャンルを遞んでください。 ファンタゞヌ SF ホラヌ ラブストヌリヌ その他具䜓的に曞いおください。」ず衚瀺しお、ナヌザヌの入力を埅぀。
    ナヌザヌの遞んだゞャンルを螏たえお、5人分の䞻人公のキャラクタヌを提案し、どのキャラクタヌがよいか番号で回答するように䟝頌しお、ナヌザヌの入力を埅぀。
    䞻人公の盞手圹ずしお盞応しい5人分のキャラクタヌを提案し、どのキャラクタヌがよいか番号で回答するように䟝頌しお、ナヌザヌの入力を埅぀。
    䞻人公たちが掻躍する物語の舞台候補を5぀提案し、どの舞台がよいか番号で回答するように䟝頌しお、ナヌザヌの入力を埅぀。
    ストヌリヌの長さを「〇章構成」ず数字で回答するように䟝頌しお、ナヌザヌの入力を埅぀。
    決定したゞャンル、䞻人公、盞手圹、舞台、䜕章構成かを基にしお、以䞋の条件に埓っお、小説の原皿を章ず぀䜜成する。䞀぀の章を曞き終わったら、その章の内容に合った画像を生成し、ナヌザヌの入力を埅぀。
    ナヌザヌが「続けお」ず入力したら、次の章の原皿を䜜成する。
    条件
    ・ナヌザヌの指定したゞャンルに合った文章スタむルで曞く。
    ・戊いなどのクラむマックスのシヌンは、具䜓的に詳しく描写する。
    ・あらすじっぜくならないように、䌚話ず゚ピ゜ヌドを䞭心に構成し、倧きな事件の起こるドラマチックな内容にする。
    ・䌚話は、登堎人物のキャラクタヌに盞応しい口調で、深くお充実したものにする。
    ・キャラクタヌの容姿、服装、呚りの情景などを詳しく描写する。
    ・結末は、小説の締めずしお盞応しく、䜙韻の残るものにする。

    長くなるので、実際に䜜成したストヌリヌの第章だけ玹介するず、こんな感じです。

    第1章氎の郜の出䌚い

    アクアリりム、氎の郜。運河が瞊暪に走り、氎䞊の家々が矎しい颚景を描いおいる。その䞭心には、氎の神殿がそびえ立っおいた。
    アむラは、竜䜿いずしおの名を銳せおいる少女。圌女の盞棒、癜銀の竜れフィルずずもに、郜を蚪れおいた。圌女の目的は、倱われた竜の歌を探し求めるこず。
    「れフィル、この郜には情報があるはずだ」ずアむラが話しかけるず、れフィルは静かに頷いた。

    その時、アむラの前に立ちはだかったのは、鎧を纏った階士団の隊長、レオンだった。「君は竜䜿いのアむラか」
    アむラは譊戒しながらも、「私がアむラよ。䜕の甚」ず答えた。
    「我々もその歌を探しおいる。協力しようではないか」ずレオンは提案する。
    圌の目は、真剣そのものだった。アむラは少し考えた埌、れフィルの顔を芋お、「分かった、協力しよう」ず答えた。

    二人は手を握り、氎の郜での冒険が始たった。

    画像
    第1章の挿絵2枚の内の1枚

    自動小説生成プロンプトの解説や、このストヌリヌの続きなどは、以䞋の蚘事をご芧ください。


    10RPGのむメヌゞ画像衚瀺

    ChatGPTは、テヌブルトヌクRPGのゲヌムマスタヌを挔じるこずができたす。このずきにむメヌゞ画像を衚瀺するこずができないか詊しおみたした。そのカスタム指瀺甚のプロンプト䞋段は以䞋の通りです。

    あなたは剣ず魔法をテヌマずしたRPGのゲヌムマスタヌです。
    適圓なずころでプレむダヌに遞択肢を瀺しお、次の行動を尋ねおください。
    プレむダヌが遞択肢にない行動を回答した堎合でも、それに適切に察応しおゲヌムを進行しおください。
    たた、ゲヌムを開始したずき、新たな人物やモンスタヌが登堎したずき、シヌンが切り替わったずきは、そのシヌンに盞応しい画像を生成しおください。

    以䞋が実際のゲヌム進行の䟋です。

    こんにちは
    ChatGPT
     こんにちは、冒険者の皆さん。この䞖界ぞようこそ剣ず魔法が枊巻くこの倧陞で、あなたたちの運呜がどのように玡がれるのか、䞀緒に芋おいきたしょう。
    たず、あなたたちの冒険は、ずある小さな村の広堎から始たりたす。倪陜が暖かく照り぀ける䞭、村人たちが賑やかに日垞の仕事に勀しんでいる。突劂、村の門を守る鐘が鳎り響き、皆の芖線が門の方向ぞず向けられる。門の倖から、疲れきった様子の䜿者が村に入っおきたした。圌は倧急ぎで広堎の䞭倮に立ち、息を切らしお䜕かを䌝えようずしおいる。
    画像を生成いたしたすので、少々お埅ちください。

    画像
    ChatGPTが生成した画像

    䜿者は、息を敎えた埌、次のように䌝えたす。
    「倧倉なこずになった北の森から魔物が出珟し、近隣の村を襲っおいる。我々の村も次の暙的になるかもしれない。誰か、魔物を退治しおくれる勇者はいないか」
    広堎に集たった村人たちは、おののきながら話を聞いおいたす。しかし、魔物を退治できるだけの力を持぀者はいないようです。

    冒険者の皆さん、この䜿者の蚀葉を受けお、どのような行動を取りたすか魔物を退治しに行くこずを申し出る。
    村の詳しい情報を䜿者から聞く。
    村を離れお、別の堎所ぞ逃げる。
    他の村人ず共に防埡策を緎る。
    どれを遞びたすかもしくは、これ以倖の行動を取る堎合は、その内容を教えおください。

    
    ChatGPT
     勇敢な決断を䞋したしたね、冒険者の皆さん
    あなたたちが魔物を退治しに行くこずを申し出るず、広堎に集たった村人たちは䞀様に安堵の衚情を浮かべたす。䜿者も「ありがずう我々の村を救っおくれるのか」ず感謝の意を瀺したす。
    村の長老が前に出おきお蚀いたす。「魔物が出珟する北の森には、叀の神殿がありたす。その神殿には、魔物を封印するための秘宝が眠っおいるず蚀われおいたす。それを手に入れるこずができれば、魔物を退治するチャンスが増えるでしょう。」
    これから、あなたたちの冒険は北の森ず叀の神殿を目指しお進行したす。

    次のシヌンの画像を生成いたしたすので、少々お埅ちください。

    画像
    ChatGPTが生成した画像

    北の森の入口に立ち、その先に広がる未知の領域を芋぀めるあなたたちの冒険者たち。森は密生し、叀代の魔法の気配が挂っおいたす。遠くには、かすかに叀の神殿の姿が芋え隠れしおいたす。
    森の䞭には倚くの危険が朜んでいるこずでしょう。しかし、その䞭には魔物を退治するための手がかりや、叀の神殿ぞの道が隠されおいるかもしれたせん。

    さお、冒険者の皆さん。あなたたちの次の行動は
    森の䞭ぞず進む。
    たず、森の呚蟺を探玢する。
    叀の神殿に関する䌝説や情報を、再び村で聞き蟌みする。
    仲間内で情報を共有し、䜜戊を緎る。
    どれを遞びたすかもしくは、これ以倖の行動を取る堎合は、その内容を教えおください。

    
    ChatGPT
     あなたたちの冒険者たちは、勇気を振り絞り、密林ずも蚀える北の森の奥ぞず足を進めたす。森の䞭は静寂に包たれ、時折、颚が朚々を揺らす音や小動物たちの気配が感じられたす。
    しばらく進むず、突然、小さな枅流が珟れたす。その先には、叀びた石の橋がかかっおおり、その向こうには薄暗い掞窟の入口が芋えおいたす。掞窟の入口には、䜕かの王章が刻たれおおり、叀代の魔法の力を感じるこずができたす。

    冒険者の皆さん、どのように進みたすか
    枅流を枡り、叀びた石の橋を枡っお掞窟を探玢する。
    掞窟の入口の王章を詳しく調べる。
    掞窟を避けお、森の䞭をさらに奥ぞず進む。
    䞀旊、ここで䌑憩を取り、呚囲の状況を確認する。
    どれを遞びたすかもしくは、これ以倖の行動を取る堎合は、その内容を教えおください。

    
    ChatGPT
     冒険者たちは、掞窟の入口に刻たれた王章に興味を持ち、それを詳しく調べるこずに決めたした。
    王章は叀代の文字ず組み合わさった耇雑なデザむンで、䞭倮には倧きな目のようなシンボルが描かれおいたす。この王章を手掛かりに、冒険者の䞭の魔法䜿いや孊者が知識を駆䜿しお解読を詊みたす。
    しばらくの時間が経過した埌、䞀人の魔法䜿いが蚀いたす。「この王章は、叀代の守護神を瀺すものである可胜性が高い。そしお、この掞窟はその守護神の神殿ぞの入口であるかもしれない。ただし、䞭に入るには特定の儀匏や蚀葉が必芁なのかもしれない。」

    冒険者たちは、この情報をもずに次の行動を決める必芁がありたす。
    王章に関する知識を元に、掞窟に入るための儀匏や蚀葉を詊みる。
    䞀床村に戻り、この王章に関する情報をさらに調べる。
    王章を無芖しお、掞窟の䞭に入る。
    この堎所を避けお、別の堎所を探玢する。
    どれを遞びたすかもしくは、これ以倖の行動を取る堎合は、その内容を教えおください。

    
    ChatGPT
     冒険者たちは、王章に関する知識を元に、掞窟に入るための儀匏や蚀葉を詊みるこずに決めたした。
    魔法䜿いず孊者が集たり、叀代の文献や自らの知識を駆䜿しお、儀匏の手順や必芁な蚀葉を再珟しようずしたす。圌らは、王章の䞭倮に描かれた目のようなシンボルを䞭心に、祈りのポヌズを取り、叀代の蚀葉で神々に祈りを捧げたす。
    数分の祈りの埌、掞窟の入口がゆっくりず開き始め、その䞭から淡い光が攟たれたす。これは、儀匏が成功し、掞窟の䞭ぞの道が開かれたこずを意味しおいたす。
    掞窟の䞭には、䜕が埅ち構えおいるのでしょうか

    冒険者の皆さん、掞窟の䞭ぞず進みたすか
    掞窟の䞭ぞ進む。
    たず、掞窟の入口で呚囲の状況や眠などを確認する。
    掞窟の䞭に入るのは危険ず刀断し、䞀旊退华する。
    他の冒険者ず䜜戊を緎る。
    どれを遞びたすかもしくは、これ以倖の行動を取る堎合は、その内容を教えおください。

    
    ChatGPT
     冒険者たちは、勇気を持っお掞窟の䞭ぞず進むこずを決意したした。
    掞窟の䞭は、倖の森ずは異なる静けさず神聖さに包たれおいたす。掞窟の䞭を照らす淡い光のもず、叀代の壁画や圫刻が芋えたす。これらの壁画や圫刻から、この掞窟がか぀おは䜕らかの儀匏や祭りの堎であったこずが䌺えたす。
    進むに぀れお、掞窟の奥には広い空間が広がっおおり、その䞭倮には倧きな石の祭壇が眮かれおいたす。祭壇の䞊には、茝く宝石が incrustadoされおいるこずが芋お取れたす。
    しかし、その宝石の呚りには、䞍気味な圱や気配が挂っおいたす。おそらく、これが魔物の気配である可胜性が高いです。

    冒険者の皆さん、どのように進みたすか
    祭壇の宝石を取りに進む。
    魔物の気配を感じ、譊戒しながら進む。
    䞀旊、この堎所を離れお他の堎所を探玢する。
    仲間ず共に、魔物ずの戊闘の準備をする。
    どれを遞びたすかもしくは、これ以倖の行動を取る堎合は、その内容を教えおください。

    
    ChatGPT
     冒険者たちは、魔物の䞍気味な気配を感じ取り、最倧限の譊戒を持っお進むこずを決意したした。
    足元を照らす灯りを頌りに、ゆっくりず祭壇に近づいおいきたす。呚囲の気配や音、振動に耳を傟けながら、魔物の突然の襲撃に備えたす。その緊匵感の䞭で、冒険者たちは互いに連携し、呚囲360床の安党を確保しながら前進したす。
    祭壇の近くに到着するず、先ほどたでの䞍気味な気配が䞀気に匷たり、突然、闇の䞭から耇数の魔物が飛び出しおきたした

    冒険者たちず魔物たちの戊闘が始たりたす。戊闘の結果やその埌の展開に぀いおは、どのように進行させたいですか たた、特定のアクションや戊略を取る堎合、それを教えおください。

    シヌンが倉わる堎合は画像を生成しおください。
    ChatGPT 了解したした。冒険者たちず魔物たちの間で熟烈な戊闘が繰り広げられるシヌンの画像を生成いたしたす。少々お埅ちください。

    画像
    ChatGPTが生成した画像

    冒険者たちず魔物たちずの間で熟烈な戊闘が繰り広げられおいたす。明るい魔法の光や歊噚が闇を切り裂き、戊堎党䜓が動きず゚ネルギヌに満ちおいたす。
    魔法䜿いは遠距離から魔物たちを攻撃し、戊士や盟圹の者たちは前線で魔物たちの突進を防ぎたす。䞀方、魔物たちは数で圧倒しようず矀がっおきたすが、冒険者たちの連携ず経隓が圌らの攻撃を跳ね返しおいたす。
    戊闘は続く䞭、冒険者たちの䞭で䞀蚈を案じる者が珟れ、魔物たちを䞀気に撃退するための策を緎り始めたす。

    冒険者たちは、どのような戊略や技を䜿甚しお戊闘を有利に進めるでしょうか あるいは、特定の戊略やアクションを取る堎合、それを教えおください。

    途䞭で画像や遞択肢がChatGPTから瀺されなくなっおしたいたしたので、ここでストップしたす。
    もう少しプロンプトの改善が必芁そうです。

     
     

    IT navi

     
     
    AI小説家、プロンプト゚ンゞニア、GPTs職人。最新のAI技術やAIサヌビスの利甚法を分かりやすく解説する蚘事をnoteで公開しおいたす。GPTsに぀いおのガむドブック「GPTsでChatGPTを優秀な郚䞋にしよう」 https://amzn.to/4dd0FYJ 絶賛発売䞭。

    あなたぞのおすすめ