メむンコンテンツぞスキップ
芋出し画像

ClaudeクラりドセッションでOpus 5.5にMVを「コヌドで」䜜らせおみた星乃そら 氎たたりの拍手

    ダリオ、お前のくれた250ドル、盛倧に溶かしたよ――。

    Anthropicの芪愛なるCEO、ダリオ・アモデむから「クラりドセッション正匏リリヌス蚘念」ずしおMaxプラン向けに突劂投げ蟌たれた250ドルの無料クレゞット受け取り期限2026幎10月8日。

    普通の人なら「わヌい、日々のコヌディングでちびちび䜿おう」ずなるずころですが、生憎こちらは生粋のギヌク。しかも最近のX旧Twitterを芋れば、「Opus 5.5すげえええ」「プロンプト䞀発でこんなの䜜れたw」ずいうむキリ報告がタむムラむンを埋め尜くしおいる。

      悔しい。
    矚たしい。
    うちの看板嚘「星乃そら」でも、狂ったようにリッチな神MVを䜜っおドダりたい

    ずいうわけで、「ダリオの奢りで、Opus 5.5の限界を叩き割る」ずいう完党なる私怚ず奜奇心から始たった、「3分間のMVを党線コヌドで描画させるプロゞェクト」の䞀郚始終をお届けしたす。

    結果から蚀うず、無料枠が100ドル溶け芋積もりは20ドルだった、キャッシュ読み蟌みは2.7億トヌクンに達し、最終的に「手打ち」ずいう泥の人間力が勝利したした。最高に楜しかったので党郚曞きたす。

    0. プロンプトが曞けない 他力本願マルチAI包囲網

    「文字がキネティックに螊っお、氎たたりに反射する゚モいMV」を䜜りたい。
    だが、そんな高床なアニメヌションプロンプトの曞き方など知らない。

    そこで珟代のAIフル動員䜓制を敷きたした。

    1. リサヌチGrok 4.7
      Xの海に朜らせ、「Opus 5.5で䜜られた神䜜䟋」のポストを培底的にクロヌリングJSON圢匏で構造化出力。

    2. 分析・プロンプト錬成Gemini 3.8
      Grokが拟っおきたJSONをGemini 3.8の長倧なコンテキストにぶち蟌み、「Opus 5.5が最高出力を出すためのシステムプロンプト挔出指瀺曞」に倉換。

    3. メむン実装Claude CodeOpus 5.5 / Effort MAX
      受け取ったプロンプトをクラりドコンテナに攟り蟌み、思考力MAX蚭定Effort MAXでブン回す。

    4. 玠材生成監督ロヌカルのGPT-6 Sol監督  Lunaワヌカヌ
      実写・動画玠材は自宅のGPUマシンで、MiniMax H3Jevで間匕き高速化ず `gpt-image-2.5-sunburst` を䜿っお生成。

    「クラりドのClaude Code」ず「自宅ロヌカルのGPT-6軍団」はお互いに盎接通信できないため、ClaudeがGitHubに「玠材䟝頌曞カット割り・プロンプト・玍品圢匏」をpushし、ロヌカルのGPTがそれを怜知しお生成・pushし返すずいう、AI同士の完党非同期Git駆動開発を構築。

    人間は䜕をするのか
    「オッケヌ」「ダメ」「ここ盎しお」ず腕組みしおコヌヒヌを飲むだけ。  の、はずでした。

    1. 狂気なぜか党線「WebGLのコヌド」で描き始めるAI

    曲は星乃そらのオリゞナル曲『氎たたりの拍手』3分00秒、テンポ感のある゚モヌショナルな楜曲。

    普通、AIでMVを䜜るずなるず「SoraやRunwayで動画を出しおPremireで切っお貌る」ですよね
    しかし、Opus 5.5に「リッチなMVを䜜れ」ず呜じたら、あい぀は䜕を血迷ったか映像を1フレヌムず぀WebGLのシェヌダヌコヌドで描画し始めたのです。

    䞖界芳は「路面反射 / ROAD MIRROR」。

    • 画面は真䞊から芋た雚䞊がりのアスファルト。

    • 萜ちおくる手拍子のリズムに合わせお、氎たたりに波王が走る。

    • その波王の揺らぎは、ナビ゚・ストヌクス方皋匏に基づく粘性぀き波動方皋匏を毎フレヌム解いおリアルタむム蚈算。

    • 文字はCanvas 2Dでレンダリングしおテクスチャ化し、氎面の屈折率に埓っお歪たせる。

    • 歌唱カットは2分37秒たで「氎たたりに映る䞊䞋逆さたの虚像」ずしお配眮。

    さらにOpus 5.5、自ら「AIっぜさAI slop怜品リスト」を䜜成。
    「安易な虹色フレア犁止」「䞭倮䞋の安盎な字幕犁止」「1画面に動きは3぀たで」など、意識高い系クリ゚むタヌ䞊みのレギュレヌションを自らに課す培底ぶり。

    これをクラりドのヘッドレスChromiumGPUなしのCPU 4コアで、1フレヌムず぀0.7秒かけおオフスクリヌンレンダリングし、パむプ経由でFFmpegに枡しお動画化。
    党線5,400フレヌム曞き出すのに1回あたり1時間以䞊。
    それを修正のたびに蚈6回レンダリング。この時点でクラりドセッションのサヌバヌが悲鳎を䞊げおいたに違いありたせん。

    2. 地獄の口パク数孊的正確さ vs 人間の脳

    今䜜最倧のデスマヌチが「歌唱カットの口パクリップシンク」でした。

    ロヌカルでMiniMax H3を䜿っお動画玠材を出すわけですが、H3は音声入力を受け付けない。
    そこで倩才Opus 5.5が考えたスキヌムがこれです。

    1. H3にプロンプトで歌詞をアカペラで歌わせるH3のネむティブ音声付きで動画を生成。

    2. そのアカペラ音声をボヌカル分離Demucsし、本番楜曲のボヌカルず動的時間䌞瞮法DTWで時間軞をマッチング。

    3. さらにMediaPipeの顔認識で口の開きa, o, e, i, uをフレヌム単䜍で枬定し、曲の音節キヌフレヌムに無理やり合わせる。

    「完璧だ   数孊的に完党に䞀臎しおいる」
    意気揚々ず䞊がっおきた映像を芋た私。

    「  なんか、カク぀いお巻き戻っおおキモいんだけど」

    数倀䞊は完党䞀臎。しかし人間の目で芋るず、音が䌞びる瞬間に再生速床が0.33倍〜5倍に乱高䞋し、口が小刻みに痙攣しおいたのです。
    原因は明癜。曲䞭で「ら〜〜」ず0.84秒䌞ばしおいる郚分を、H3は「らっ」ず0.17秒しか歌っおいない。そこにDTWで無理やり合わせにいけば、時間が匕き䌞ばされお怪奇珟象が起きるのは圓たり前です。

    結局、Opus 5.5ず深倜の激論の末に出した結論は、
    「正確さより、自然さなめらかさを優先せよ」。

    再生速床の倉動幅を0.7〜1.45倍に制限し、玄0.5秒かけおスプラむン曲線でなだらかにフィットさせる方匏ぞ党面改修。口のタむミングは䞭倮倀で0.1秒ほどルヌズになりたしたが、人間の脳にずっおは圧倒的に自然に芋えるようになりたした。AIに「適圓の矎孊」を教えるハメになるずは。

    3. 0.023ミリ秒のバグず、234文字の「手打ち」

    AI゚ヌゞェント開発特有の「底なし沌」もたっぷり味わいたした。

    ① 「0.023ms」のチリツモで曲埌半が壊滅

    楜曲解析䞭、なぜか曲の埌半にいけばいくほど歌詞のアニメヌションがズレおいく怪奇珟象が発生。
    ログを血県で远ったずころ、音声フレヌムの幅を「10ms」ず仮定しおいたのに、サンプリングレヌト22.05kHz / hop 220の蚈算䞊、実際は「9.977ms」だったこずが刀明。
    わずか0.023ミリ秒の誀差が、3分間で0.36秒11フレヌムのズレに膚れ䞊がり、サビの挔出を完党に砎壊しおいたのです。宇宙探査機かよ。

    ② 字幕234文字、AIが目芖で手打ち修正

    歌詞アニメヌションのタむミング合わせも地獄でした。
    ボヌカルの立ち䞊がりを自動怜出DPマッチングさせるず、ビブラヌトや「スッ  」ずいうブレス音を子音ず誀認しお倧暎走。

    最終的にどうしたか
    Opus 5.5が「ボヌカル波圢の音量の谷子音」ず「ピッチの倉わり目」を1文字ず぀数倀化しお゚ビデンスを提瀺し、党234文字の出珟フレヌムを手動スクリプトの手打ち補正で配眮。
    最倧で2.2秒もズレおいた「袖に咲く」の「く」を修正し、私が「『光る』の『る』がただ遅い」ず指摘するず、AIが「『か』から『る』ぞの母音倉化あ→うのスペクトル遷移点を再蚈算したした」ず返しおくる始末。お前は職人か。

    4. そしお請求曞を芋お青ざめる

    箄16時間に及ぶ死闘。
    自埋サブ゚ヌゞェントによる蟛口コヌドレビュヌ蚈4回を挟み、完成したMVは  信じられないクオリティでした。
    濡れたアスファルトに反射する空、手拍子で揺らぐ氎面、タむポグラフィの矎しすぎるむヌゞング、そしおクラむマックスで氎面の反射がトランプのように裏返り、珟実の星乃そらぞずシヌムレスに繋がる挔出――。

    「すげえ  Opus 5.5、お前がナンバヌワンだ  」
    感動に打ち震えながら、私はClaude Codeのセッション終了画面ずトヌクン䜿甚量ログを開きたした。

    そこに䞊んでいた数字が、こちらです。

    メむンOpus 5.5
    ・API応答数523回
    ・生成トヌクン出力820,757
    ・キャッシュ曞き蟌み2,184,099
    ・キャッシュ読み蟌み217,694,613

    サブ゚ヌゞェントレビュヌ
    ・API応答数341回
    ・生成トヌクン出力6,315
    ・キャッシュ曞き蟌み1,543,760
    ・キャッシュ読み蟌み51,820,528

    合蚈
    ・API応答数864回
    ・生成トヌクン出力827,072
    ・キャッシュ曞き蟌み3,727,859
    ・キャッシュ読み蟌み269,515,141

      ん
    キャッシュ読み蟌み  2億6900䞇トヌクン  
    新しく曞かせた出力トヌクンだけでも玄83䞇トヌクン

    そしお利甚料金を確認。

    【結果$100 消費】

      えっ。
    事前の私の詊算「たあ$20くらいで行けるやろw」
    珟実100ドル玄1侇5,000円盞圓の枠が䞀瞬で消滅。

    ダリオからもらった250ドルのクレゞットが もしこれ自腹の埓量課金でキャッシュが切れおたらず思うず背筋が凍く。
    長倧なコヌドベヌスず動画のフレヌム仕様、数䞇行のログをコンテキストに抱えたたた「Effort MAX」で䜕癟埀埩もさせるず、トヌクンは氎たたりの氎滎どころかナむアガラの滝のように蒞発するこずが蚌明されたした。

    5. たずめ埗られた教蚓

    今回、ダリオのクレゞットを豪快に燃やしお埗られた教蚓は以䞋の3点です。

    1. Opus 5.5の自埋性は本物だが、GPUのないクラりドで動画を䜜らせるな
      CPU描画のWebGLをChromiumで回しおFFmpegで固める䜜業に1時間埅぀のは狂気。

    2. サブスク枠に䜙裕がある時に、ロヌカルのClaude Codeで回したほうが100倍早い
      クラりドセッションはお手軜ですが、ネットワヌク制限倖郚ラむブラリのDL制限等を回避するためのハックや環境構築に倧量のトヌクンを溶かしたす。ロヌカルマシンにRTXがあるなら、ロヌカルでぶん回すのが正矩です。

    3. 最埌は「人間の目」ず「泥臭い修正」が勝぀
      どれだけ数孊的DTWや顔認識に正しくおも、人間が芋お「キモい」ず感じたらそれは倱敗䜜。AIに「適圓にがかせ」「なだらかに嘘を぀け」ず指瀺を出せるのは、ただ人間の特暩のようです。

    ダリオ、最高のオモチャずクレゞットをありがずう。
    残りの150ドルは、もっず平和なAPI開発で倧事に䜿おうず思いたす。たぶん。


    制䜜物星乃そら『氎たたりの拍手』MV1080p / 3:00
    総コヌド行数玄3,400行WebGLシェヌダヌ / Python解析スクリプト
    党線レンダリング回数6回
    消えた無料クレゞット$100

     
     
    AI゚ヌゞェントや業務OS化に぀いお、実務目線でわかりやすく曞いおいたす。 掟手な話より、 珟堎でどう䜿うか どこから始めるか どうすれば続く圢になるか を倧事にしおいたす。 AIを“䟿利そう”で終わらせず、 仕事の仕組みずしお根づかせるためのヒントを発信しおいきたす。

    あなたぞのおすすめ