【プロンプト全公開】AI動画の作り方｜編集ソフトなしで1枚のイラストを動かす4ステップ

AI動画の作り方｜編集ソフトなしで1枚のイラストを動かす4ステップ【プロンプト全公開】

動画編集ソフトのタイムラインを一度も触らずに、1枚のイラストを動かして動画にしました。
使った道具の名前も、投げているプロンプトの全文も、この概要欄に全部置いてあります。

そして、うまくいかなかった失敗も4つ、そのまま出します。
（正面顔だとまばたきしない／禁止を増やすと一切動かない／半目を禁止するとまばたきごと消える／目では動いたか判断できない）

▼ 目次（チャプター）
0:00 オープニング
0:23 あの横に長い棒が、こわい
0:41 道具の名前を知らなかった
1:14 使う道具は、これだけ
1:46 無料では、ありません
2:15 やることは、よっつ
2:35 動きは、台本で決まる
2:58 長く作ろうとしない
3:23 行って、戻す
3:47 禁止をふやすと、止まる
4:19 正面・見開きは、まばたきしない
4:51 ふんわりした指示は、伝わらない
5:22 通り道を、塞がない
5:51 目でなく、数字で見る
6:21 よっつの鉄則
6:46 一枚の絵に、息を吹き込む
7:21 エンディング

━━━━━━━━━━━━━━━━━━━━
▼ 使っている道具（全部ローカルで動きます）
━━━━━━━━━━━━━━━━━━━━

■ 絵を出す
　Stable Diffusion（モデル：Animagine XL 4.0）＋ 自分で学習させた LoRA
　※ LoRA は「同じキャラの顔を固定する」ための追加学習データです

■ 絵を動かす（画像→動画）
　ComfyUI ＋ Wan2.2
　※ 1枚の画像を数秒の映像に変えるモデルです

■ 声
　GPT-SoVITS

■ 台本から動画への組み立て
　自作ツール（AIに指示を出して作りました。作り方は第1回で公開しています）

━━━━━━━━━━━━━━━━━━━━
▼ 動く環境（正直に）
━━━━━━━━━━━━━━━━━━━━

ソフトの料金は0円ですが、無料ではありません。グラフィックボードが要ります。

・私が使ったもの：RTX 3060（VRAM 12GB）
・61フレーム（約2.5秒）の生成で 1本あたり約8分
・5秒（121フレーム）を一度に作ろうとすると 12GB では破綻します（必要 16.7GB）
　→ だから「短く作って、順再生と逆再生でつなぐ」やり方にしています

━━━━━━━━━━━━━━━━━━━━
▼ プロンプト全文（そのままコピーして使えます）
━━━━━━━━━━━━━━━━━━━━

書き換えるのは【シーンの説明】だけです。前後は毎回そのまま付けています。

--- ここからプラス側 ---

Anime style illustration animated with clearly visible natural movement.

【シーンの説明をここに英語で書く】

A gentle breeze blows: her long pink hair and twintails sway and drift noticeably the entire time, flowing side to side. Loose strands of hair move freely.

Around the middle of the shot she blinks once: a single quick, natural blink where her eyes close and open again within half a second. Her eyelids move fast and lightly.

Her round glasses stay perfectly still on her face the whole time, keeping their exact shape and size, not moving or deforming at all.

Camera is fixed, single shot.

--- ここまで ---

--- ネガティブ（動かしたくないもの） ---

low quality, blurry, overexposed, deformed hands, extra fingers, missing fingers, walking, camera pan, still image, frozen, no motion, motionless, static pose, nothing moving, glasses warping, glasses distortion, glasses moving, face morphing, smirk, asymmetric smile, crooked mouth, one-sided grin, lopsided smile, steam, smoke, mist, vapor

--- ここまで ---

※ まばたきさせたくない回だけ、ネガティブの末尾に足します：
　blinking, eyes closing, half-closed eyes, sleepy, drowsy
　（ただし動画中でも話したとおり、これを入れるとまばたき自体が消えます。使いどころに注意）

■【シーンの説明】の書き方・実例

　A girl standing alone in a dim night alley under a streetlamp, holding an open empty wallet with both hands. She looks down into the wallet with a quiet, resigned little smile. The streetlamp flickers very faintly.

　誰が・どこで・何を持って・どんな顔をしているか、そして「背景で何が動いているか」を1つ足すのがコツです。

■ 設定値
　フレーム数：61（4の倍数＋1でないと通りません）
　→ 約2.5秒。順再生＋逆再生で約5秒分に伸ばしています

━━━━━━━━━━━━━━━━━━━━
▼ この動画で踏んだ失敗（本編で全部話しています）
━━━━━━━━━━━━━━━━━━━━

1. 真正面・目を見開いた絵にまばたきをさせようとして、3回とも半目で止まった
2. 「大きく動いて」と「絶対に崩さないで」を両方書いたら、一切動かなくなった
3. 「半目を出さないで」と禁止したら、まばたきそのものが消えた
4. 湯気を出させようとしたら、髪から煙が出た（2回とも失敗）

━━━━━━━━━━━━━━━━━━━━

▼ ハッシュタグ
#AI動画 #ComfyUI #Wan22 #StableDiffusion #LoRA #画像生成AI #AIイラスト #AI動画生成 #VTuber #個人開発


▼ 登場人物
アイちゃん … 佐倉アイ。29歳の崖っぷちOL。本業を抜け出すために、AIを相棒にゼロからキャラと声を作っています。

▼ このチャンネルについて
「アイちゃんねる｜AIでキャラを作る工房」では、AIキャラの声・動画・自動化を、実際に作りながら全部お見せしています。
専門知識も、難しいコードもありません。使った道具もプロンプトも、隠さず公開します。
うまくいった話だけでなく、詰まったところや失敗も、そのまま出します。

※音声クローンやAI生成は、作る人のモラルが問われる技術です。著作権のあるものや他人の声・作品を無断で使うことはしないでください。
※この動画の内容は制作の記録であり、特定のツールやサービスの利用を保証・推奨するものではありません。

作ってみたいものや、詳しく知りたい工程があれば、コメントで教えてください。多かったものから順番に取り上げます。
高評価とチャンネル登録をしてもらえると、工房の続きが作りやすくなります！よろしくお願いします！