動画制作を自動化するために「MV自動化アプリ」を作ったら、意外な結末が待っていた。

こんにちは、クロクマです。

今回のテーマは、AIによる動画制作の「自動化」について。

いきなり結論から言うと、

……いや、何言ってるか分からないですよね。
私も書いてて思いました。どないやねんと。

でもこの回り道、たぶん今AIで何か作ろうとしている人みんなに関係のある話だと思うので、順番に書いていきます。

発端：とにかく時短したかった

私はすでにAIでMVっぽいショート動画をいくつか作っています。なので工程は体で分かっていました。

分かっていたからこそ、しんどかったんです。

歌詞のタイミングを取る。カットを割る。1カットずつ画像を作る。それを1本ずつ動画にする。並べる。テロップを入れる。

作業の量もそうですが、それ以上に、

このカットは何秒か。ここは寄りか引きか。この絵で歌詞と合っているか。1カットごとに小さな判断が積み上がっていく。

数本作ってみて、はっきり感じました。

このやり方では、数が作れない。

私は平日休みで、副業に使えるのは1日2〜3時間。しかもMV以外にもやっていることがあります。その時間割の中で、1本にこれだけ思考を持っていかれると、別の作業に影響が出まくる。

そこで考えました。

オレにはfable5がついている。

作ったもの：機能てんこ盛りの「MV Automation Tools」

名前は「MV Automation Tools」。

自動化するために作るんだから、そりゃこの名前になります。この時点の私は、本気で自動化できると思っていたわけです。

作ったのはClaude（Fable 5）です。私はコードを書いていません。指示を出したら動くものが出てくる時代になりました。期間は1週間くらい。平日の夜と、休みの日にちょっとずつです。

作るにあたっては、同じように自作ツールを作っている方のnoteやYouTubeをいろいろ参考にさせてもらいました。この場を借りてお礼を言っておきます。

ありがとうございます🙇‍♂️

で、作り始めたら止まらなくなりまして。機能を盛りに盛りました。

• 曲を入れると歌詞の表示タイミングを自動で取る

• AIがカット割りと素材の割り当てを提案してくれる

• 画像生成も動画生成も連携済み

• 足りない素材はその場で生成

• 果てはBlenderを組み込んで、3Dでカメラワークの参照動画を作る機能まで

我ながら、よくやったと思います。
機能一覧だけ見たら、どこかのスタートアップのプロダクトみたいです。

そして大事なところですが、これはちゃんと動きました。

曲を入れて、歌詞を入れて、参照画像を何枚か入れる。それだけで画像もそれなりに作ってくれるし、動画にもしてくれる。

カット単位の演出も自動で付ける仕様にしていたので、ほぼボタンひとつでMVっぽいものが出てきます。

つまり、私が最初に欲しがっていた「1本にかかる時間を短くする道具」は、ちゃんと完成していたわけです。

問題は、出てきたもので私が満足できなかったこと

1度、ほぼおまかせでMVを出してみました。

出てきたものを見て、思ったんです。

悪くはないんです。ただ、「AIで作ったMVですね」で終わる感じ。自分の作品という手触りがない。

ここで自分の望みが変わったんだと思います。

最初は「数を作れるようにしたい」でした。でも実物を見た瞬間、「何やこれ？」と思ってしまった。

そこから私は、口を出し始めました。

そしてここから、話がおかしな方向に転がっていきます。

何が起きたか：結局、全部「会話」で作っていた

先日、90年代のゲーム画面みたいなドット絵のフルMVを1本仕上げました（作り方は長くなるので別記事に書きます）。44カット、全部AI動画です。

こちらが完成MVです。

音源はコチラ⬇︎

実作業だけを足すと、15時間くらいでしょうか。悪くないスピードだと思います。

ただ、問題がありまして。

実態はこうでした。

Claudeと喋る。画像が出てくる。気に入らないから直させる。動画にする。また気に入らないから撮り直させる。この繰り返しをひたすら数日間。

自動化のために作った「AIおまかせ提案」も使いませんでした。理由は単純です。

普通すぎたから。

AIが出してくる絵は、8割は良いんです。でも「あるはずのものが勝手に消えている」「置く場所がおかしい物が紛れ込んでいる」「1カットだけ絵の質感が浮いている」みたいなことが必ず起きる。

それを見つけて却下するのは、結局自分の目でした。

一番細かいところで言うと、群衆の中の1人の髪型と服装が主役キャラと被って見える、という理由で作り直させています。

我ながらどうかと思います。
でも、そこを流したら「どこかで見たAI動画」になるんですよ。

Claudeに評価させてみた

完成したあと、Claudeに聞いてみました。今回の制作、MV Automation Toolsだけで可能だったか、と。

返ってきた答えが、なかなか痛いところを突いてきた。

名言かよ。

制作中、必要になった小道具（動きの量を測る仕組みとか、字幕を焼き込む仕組みとか）は、必要になった瞬間にClaudeがその場で書いていました。

つまり私が時間をかけて作り込んだ機能は、必要になった時に数分で作れるものだった、という話です。

さらに「画面は要らなかった」とまで言われました。

いや、画面がなかったらもうアプリじゃないやん。
ただのフォルダやん。

とツッコみながら、気づいたんです。

実際その通りで、今回の制作を支えていたのは、アプリの画面ではなく「これまでの失敗と対策を書き溜めたテキストファイル」と「私の却下」だけでした。

じゃあ、こだわりは捨てることになるのか

ここで私は少し落ち込みまして。

クリエイティブなことを自動化しようとすると、結局こだわりは捨てることになるんかなと。全部任せたら「それっぽい何か」は出てくるけど、自分の作品ではなくなる。かといって口を出し続けるなら、自動化の意味がない。

そう言ったら、Claudeの返しがこうでした。

増やした？

最初はピンとこなかったんですが、説明を聞いて腑に落ちました。

今回、私が自動化したのは作業のほうです。絵を作る、動かす、並べる、書き出す。この辺は全部AIにやらせました。

でも良し悪しの判断は、一度も渡していないんです。

背景にあるはずのものが勝手に消えているのに気づいたのも私。室内にあるべき物がなぜか外に置かれているのを変だと思ったのも私。1カットだけ絵の質感が浮いていると感じたのも私。

AIはひとつも「これでいいか悪いか」を決めていない。

ここからが本題です。

手作業の時代なら、絵の作り直し1回に何日もかかります。だから妥協するときもある。「まあ、これでいいか」を積み重ねて作品ができていく。誰でもそうだと思います。

でも今回は、却下1回のコストが数分と数十円でした。

だから私は、画面の隅にいる通行人ひとりの髪型が主役と似ている、という理由で作り直しを命じています。同じ場面を3回撮り直したところも複数あります。

手描きだったら、その却下1回に何日かかるか。絶対に言えません。「まあ、これでいいか」で終わっていたはずです。

自動化が増やしたのは、この「回数」の方でした。今回の出来は、私が偉いからではなく、却下できる回数が増えたから出来たものです。

それともうひとつ、面白いことが起きていました。

制作の後半になるほど、一発でOKが出る率が上がっていったんです。

序盤は同じ場面に3回やり直しが必要だったのに、後半にまとめて作った9つは、やり直しが1回だけ。最後に追加した5つは全部一発で通りました。

理由は単純で、

「この一文は絶対に消すな」「色の名前を書くと画面全部がその色に染まるから書くな」。最初は私がその都度ダメ出ししていたことが、途中からAI側の手順書に書き込まれていきました。

つまり、

ということ。

一度言葉になったこだわりは次からAIが守ってくれるので、私は「新しい違和感」を見つけることだけに集中できるようになる。

ただ、これで私がラクになって終わるかというと、たぶん違います。次に別の曲、別の絵柄でやれば、また新しい違和感が出てくるからです。そこは永遠に自分の仕事として残る。

でもそれって悪いことじゃないと思うんですよ。そこが差別化できて価値になる部分だから。

結論：成立するのは「クリエイターの増幅」まで

今回の結論。

と書くとカッコいいんですが、意味が分かりにくいと思うので、実際に何が増えて何が増えなかったかを分けて書きます。

・増えたもの

1. 試行の回数
3日で60本近い動画を作って、10本以上を却下しました。手作業なら却下1回が数日の損失なので、こだわれる回数に物理的な上限があります。それが数分と数十円になった。

2. 手数
歌詞テロップの作成、映像の加工、編集ソフト用データの書き出し、品質のチェック。本来なら別々の人がやるか、私が何週間かけて覚える作業です。それを1人のまま持てた。

3. 時間の使い方
AIが9つ分の映像を作っている裏で、私は次の修正点を考えていました。作業が一列に並ばなくなった。

4. 記憶
私の却下がルールとして溜まっていって、後半は一発で通るようになった。判断が使い捨てにならず、資産になった。

・増えなかったもの

AIは絵を10倍の速さで作れます。でも、その10倍のうちどれがOKでどれがダメかは、1つも決められない。

消えてはいけないものが消えたと気づく。物の位置がおかしいと感じる。絵の質感が揃っていないと思う。「ここは、こうならないと気持ち悪いやろ」と思う。

これを判定できるのは、最初から最後まで私だけでした。AIは1つも肩代わりしていません。

だから、作った分だけ全部私が見ることになります。

これが、私がアプリに任せられなかったことの正体だと思います。

作業は預けられる。でも、承認は預けられない。

預けた瞬間に、あの「それっぽい何か」が出てくるからです。

だから、これは「自動化」じゃないんです。

自動化って本来、人がいなくなることを指しますよね。工場のラインみたいに。でもこれは、私がいなくなった瞬間に成立しなくなる。

かといって「何も変わらなかった」わけでもない。1人でできる量は、確実に何倍かになったので。

AIが増やせたのは私の手だけで、私自身は増やせなかった。

その中間を指す言葉が、増幅だと思っています。

そして「増幅まで」の「まで」は、さっきの話がそのまま理由です。私が全部見ないと終わらない以上、私自身が上限になる。

そして、ここが厳しいところ

増幅は掛け算です。ゼロを増幅してもゼロなんですよ。

基準を持たない人が同じ道具を使ったら、「どこかで見たようなAI動画」が高速で量産されるだけです。それは増幅じゃなくて、ただの生産。

同じツールを使っても人によって結果が分かれる理由は、たぶんここです。AIは係数にしかなれなくて、プラスかマイナスかを決めるのは人間の側でしかない。

だからこの言葉は、限界の話であると同時に、こっち側の話でもあります。

道具はもう誰の手元にもあります。でもそれだけでは、何も起きないってことです。

MV Automation Toolsはムダだったのか

で、冒頭の話に戻ります。

1週間かけて作って、ほぼ使わなかったMV Automation Toolsはムダだったのか。

ムダではなかった、と今は思っています。

理由は2つ。

1つは、作る過程でぶつかった失敗と対策が全部テキストとして残っていること。生成AIのクセ、課金の罠、うまくいくプロンプトの型。今回の制作では、それが効きました。アプリという「形」は要らなかったけど、作る過程で溜まった「中身」は使われていた。

もう1つは、

私は「時間を短くしたい」と思ってアプリを作りました。実際それは叶いました。でも出てきたものを見て、自分が本当に欲しかったのは「短い時間」ではなく「短い時間で納得いくものを作ること」だったと気づいたんです。

似ているようで、これは全然違います。前者は道具の問題ですが、後者は自分の目の問題でした。

それが分かっただけでも、この期間の授業料としては安いかな？

そう思わんとやってられんというのもけっこうありますが。笑

最後に

もし今、AIで何かを自動化したくなっているなら、先に一度だけ考えてみたほうがいいかもしれないです。

自動化したいのは「作業」なのか「判断」なのか。

作業なら、どんどん自動化していいと思います。
でも判断まで手放そうとしているなら、それはたぶん、楽になるのと引き換えに、あなたの作品じゃなくなっていくと思います。

時間がない私たちが手放していいのは、作業までかなと。

判断を捨てるということは “クリエイティブ” を捨てるということだと思いますよ。

ドット絵MVの作り方はこちらから⬇︎

ここまで読んでいただきありがとうございました。
今回のnoteはこれで以上になります。

私と同じように、仕事も家庭もあって、それでも副業を続けたいと思っている方に少しでも届けばうれしいです。

ではまた、次回のnoteで。

よければ “スキ” や “フォロー” もらえるとうれしいです。

お願いします🙇‍♂️

過去のnoteもよければご覧ください。