メインコンテンツへスキップ
見出し画像

「人文字のカエルが、なぜか走り出した」PolloAIをAIから直接動かして、運動会の動画を作った話

    「参考画像を作ったけど、これを動画にするのが面倒…」
    「AI動画のモデル、多すぎてどれを選べばいいかわからない…」

    そう感じたこと、ありませんか?

    画像

    こんにちは。Kyosukeです🐸

    今回、第3回スキ動画コンテスト「秋の陣」開催とのことで、はじめてPolloAIをAIにつないで、話しかけるだけで動画を生成みました。

    画像3枚から、10秒ほどの短い動画を作るまでの記録です。 仕上げは、自作の2つのアプリでやっています。 その紹介もあわせて、どうぞ。

    画像

    00.導入

    ※ここは読み飛ばして大丈夫です。

    普段使っているAIとPollo.AIを繋げるのは簡単です。

    00-01. MCP設定ページ

    設定ページにアクセスして、お使いのAIを選択。

    画像

    00-02. コネクタに追加する

    今回はClaudeアプリを選択しました。
    コネクタの追加設定のポップアップが出てくるので、そのまま「続ける」→「追加」してください。

    画像
    画像

    これだけで完了です。



    01. 材料は、運動会の画像3枚

    用意したのは、カエルたちの運動会の画像です。

    汗だくの3匹:スタートラインでにらみ合っている寄りのカット

    画像

    全力疾走:砂ぼこりを上げて、こっちに向かって走ってくる

    画像

    人文字:グラウンドいっぱいに整列した、引きのカット

    画像

    これをつないで、短い動画にしたい。 BGMはいりません。

    やりたいことは、それだけです。


    02. 頼んだのはひとことだけ

    画像

    MCPを知らない方に説明💬 ※読み飛ばしてOKです。

    MCPは、AIに外部のサービスを操作させるための「接続口」のようなものです。AIとアプリを繋げるUSBケーブルとも比喩されたりします。

    PolloAIのMCPをつなぐと、サイトを開いてモデルを選んで画像を上げて…という作業を、チャットの中でAIが代わりにやってくれます。


    最初に送ったのは、これだけです。

    画像が三枚あるんだけど、動画を作りたいのでモデルや方法を提案して

    すると、AIがPolloAIで使えるモデルの一覧を実際に取ってきて、作り方を4つ出してくれました。

    1枚ずつ動かしてつなぐ。 3枚を参考にして1本で作る。 始まりと終わりの画像を指定して、間をつなぐ。 AIを使わず、ズームや字幕だけで見せる。

    私が選んだのは「1枚ずつ動かしてつなぐ」です。

    1カットだけ失敗しても、そこだけ作り直せるのからです。


    並びは、汗だくの寄り→全力疾走→人文字の順にしました。 「位置について」の緊張から走り出して、最後は人文字の全景で締める流れです。

    モデルは、おすすめされたSeedance 2.0。 「10秒以内で」と伝えると、1カット4秒で作って、つなぐときに少しずつ詰める段取りを組んでくれました。

    ありがたかったのが、生成の前に、残高と見積もりを先に出してくれるところです。

    使いすぎる心配がありません。

    頼み方がざっくりでも、段取りはAIが組んでくれます。


    03. 人文字のカエルがなぜか走り出した

    画像

    数分待って、3本ができあがりました。

    さっそく見てみると…

    人文字のカットだけ、整列していたカエルたちが勝手に走り出していました。 しかも、キャラ変わってる・・・

    画像
    失敗作1

    「揺れる」「観客が盛り上がる」くらいの動きを頼んだつもりでした。 どこまで動かすかは、思った以上にAI任せになるんですね。

    そこで、このカットだけ、元の画像への忠実さが高いKlingという別のモデルで作り直しました。

    最初と最後のコマを、元の画像に固定:人文字の形で始まって、人文字の形のまま終わる

    「走る」「歩く」「キャラが変わる」を禁止:動いていいのは、小さな揺れ、まばたき、観客の拍手、旗のはためきだけ

    画像
    失敗作2


    …………いったい私たちは何を見せられているんでしょうか?(笑)




    04. つなぐのは、自作のCaptureAppで

    画像

    AIからは「つなぎもこちらでやります」と言われていたのですが、 結局、使い慣れた自分のアプリでつないでいました(笑)

    最終的に使ったのは2本です。

    画像
    素材1
    画像
    素材2

    CaptureAppは、私が作っているWindows用の画面録画&編集アプリです。 録画用のアプリですが、仕上げの編集にも使えます。

    画像
    CaptureApp編集画面

    04-01. 「動画を追加」で2本をつなぐ

    1本目を開いて、「動画を追加」を押すだけです。 2本目が再生位置につながります。ドラッグ&ドロップでもいけます。

    04-02. noteに貼れる容量にする

    noteに貼るGIFは、10MBが上限です。

    CaptureAppの「note用GIF」で書き出すと、仕上がりの容量を実際に測って、10MBを超えていたら画質となめらかさのどちらを優先するか聞いてくれます。

    容量のために、何度も書き出し直す必要はありません。

    録るためのアプリですが、仕上げの道具としても働いてくれました。



    05. 四角にして、最後を止めるのはMovie to GIF

    画像

    Movie to GIFは、動画をブラウザだけでGIFにできる無料ツールです。 動画はサーバーに送られず、ブラウザの中だけで変換が終わります。

    05-01. 横長を切って正方形に

    AIで作った動画は横長です。

    これを正方形にしたいのですが、最後の「スキ」の文字が切れない程度に左右をトリミングしました。

    画像


    05-02. 「ループ調整」で、最後を2秒止める

    GIFは止まらずに、ずっと回り続けます。

    最後の人文字が一瞬で終わってしまうのがもったいなかったので、ループ調整で最後のコマを2秒伸ばしました。

    作り直しているわけではなく、コマの表示時間を書き換えているだけなので、画質は落ちません。

    最後の2秒があるだけで、人文字をちゃんと見てもらえます。


    06.出来上がった作品はこちら

    スポーツの秋で「スキ」をお返しする動画です🐸

    画像
    応募作品

    おわりに

    画像

    ここまで読んでいただき、ありがとうございます。

    今回の仕上げに使ったアプリはこちらです👇

    🛒 CaptureApp(買い切り1,980円・30日返金保証)


    🎁 Movie to GIF(無料・登録不要)


    「作ってみたよ!」の感想コメントやシェアなどして頂くと製作の励みになります。🐸

    「これどうしたら上手くいく?」など質問は質問箱からお気軽にどうぞ! 喜んで答えます😉


    それではまた😌🐸

     
     
    九州の長崎県からホームページ制作、AIツール開発に関する発信をしてます🖥️ noteではAIやWebに関連する普段の業務や副業などに活かせる内容をお届けしていきます🐸✨️ ITが苦手な方にも届くように記事を書いていきますので、ぜひフォローしてください✨

    あなたへのおすすめ