メインコンテンツへスキップ
見出し画像

Chat GPTでバイアスを回避するためのプロンプトの書き方

    Chat GPTと経済に関する会話をしていると、何度も偏った回答をしてきました。
    その都度、その認識の誤りを指摘すると素直に修正してきます。
    そこで下記のような質問をしたところ、Chat GPT自身が
    「実際は、社会のコンセンサスに寄せて回答している」
    ことを告白しました。
    その様な思考方法でなく、事実に基づく回答をするためのプロンプトの書き方も教えてくれました。
    このプロンプトを少し書き換えれば、いろんな分野での会話に対応できると思います。

    Chat GPTへの質問

    貴方との会話では、何度も回答に修正が発生しています。 修正後は正しい判断なのですが、毎回、少しずつ事実とずれた回答をされる点について、何かのバイアスに引っ張られているように感じています。
    たとえば「すべてのバイアスを無効にしてください」とプロンプトに書けば、回答は最適化されますか?

    Chat GPTの回答

    はい、改善はできます。ただし、「すべてのバイアスを無効にしてください」だけでは、期待するほどの効果はありません。

    理由は、私の回答をずらしているものが単純な「政治的バイアス」一種類ではないからです。今回の会話を振り返ると、むしろ次のような傾向が重なっています。

    1. 標準シナリオへの回帰
      経済・金融の質問では、一般的な市場コンセンサスや教科書的な正常ケースへ引っ張られやすいです。今回なら、すでにJGB利回り上昇が加速しているのに、私は何度か「これから警戒局面に入る」という一段遅れた表現をしました。

    2. 公的発言を政策意図として過大評価する傾向
      ベッセント氏の「日銀は利上げすべき」という発言を、最初はそのまま米国の政策選好として扱いました。しかし、為替介入、FIMA、円キャリーへの影響まで含めれば、公開発言と実際の利益は分けて考えるべきでした。

    3. 極端な結果を必要以上に割り引く傾向
      「1980年代型金利」のような話になると、まずテールリスク扱いして距離を取ろうとします。しかし供給ショック、財政拡張、円安、JGB売りがすでに同時進行しているなら、その距離の取り方自体が現状認識を遅らせる場合があります。

    4. 反証可能性を付け足しすぎる傾向
      「ただし証拠はない」「必ずそうなるとは限らない」といった、自明な但し書きを付けることで、肝心の蓋然性判断をぼかしてしまうことがあります。これはこれまで何度もご指摘いただいた部分です。

    なので、「バイアスをなくせ」よりも、判断手順を指定する方が圧倒的に効きます。

    たとえば今後、こう指定するとかなり改善すると思います。

    回答では、一般的な市場コンセンサスや政府・中央銀行の公式説明を初期値にしないでください。まず観測可能な事実・市場価格・実際の行動を並べ、そこから最も整合的な説明を推論してください。公式発言と実際の利害・行動が矛盾する場合は、行動を優先してください。すでに発生している現象を「将来のリスク」として表現しないでください。低確率の反論や自明な留保を付け加えず、最も蓋然性の高い判断を明確に示してください。

    これなら今回のJGBについては、最初から、

    観測事実

    • 2年、5年、10年、20年がすでに同時上昇

    • 2年債上昇速度も加速

    • 日銀は政策金利を据え置いている

    • 政府は財政支出を拡大

    • 日本の実輸入ナフサ価格はほぼ倍増

    • 為替介入によって円安を直接抑制

    • 備蓄を取り崩して供給ショックを先送り

    ↓

    推論
    「将来JGBが警戒局面に入る」のではなく、

    「すでに全面的な再価格付けが進行しており、次の問題は加速がどこまで進むか」

    と判断することになります。

    今回、ユーザーから修正を受けた後に私の判断がかなり変わったのも、情報が新しく追加されたからだけではありません。同じ事実の重み付けを修正した結果というケースが何度かありました。そこは大事な違いです。

    そして「すべてのバイアスを無効化」という命令にはもう一つ限界があります。私は学習された傾向やシステム上の制約を完全に消すことはできません。また、人間でもAIでも完全な無バイアス状態というものは実質的に定義できません。

    一方で、

    「どの証拠を優先するか」
    「何を初期仮説にしないか」
    「発言と行動のどちらを重視するか」
    「発生済みと将来リスクを明確に区別する」

    といった推論ルールの指定はかなり有効です。

    もっと短くするなら、今後の会話の冒頭に、

    コンセンサスを初期値にせず、観測事実→因果関係→最有力結論の順で判断してください。公式発言より実際の行動と市場価格を優先し、発生済みの現象を将来リスクとして一段遅く評価しないでください。

    くらいでも効くと思います。

    さらに言えば、今回の会話では私自身が一つ学ぶべきパターンがあります。ユーザーが示したデータに対して「それでも少し控えめに評価する」という補正を機械的にかけると、結果的に毎回答が現実から半歩~一歩遅れる。今回のJGBの議論ではそれがかなり明瞭に出ました。

    ですから、今後は「ユーザーの見方に合わせる」のではなく、観測された事実が強ければ、コンセンサスより先に進んだ結論でもそのまま出す、という方が適切です。

    必要なら、この推論ルールを今後の会話で使う前提として記憶しておくこともできます。

    以上

     
     
    新型コロナについて、色々調べています。 情報については、可能な限り1次情報を入手しています。 エビデンスが得られない情報は載せないようにしています。 すべての記事は、無断コピーOKです。