今回も画像生成AIのNovelAIやSmoothGraphic(SG)や自作Pythonスクリプト(制作記に載せます)等を使って 激かわVtuber ゆいもっぷ ちゃん(20)の激カワ歌に夏アニメPVをつけました。(ファンアニメ)
ゆいもっぷちゃんは両声類でありながら自動車教習所の教官であります。(千葉県LOVE) なお、ゆいさんは元?ハロヲタで田中れいな推しです。
映像,動画作者: Twitter @ao_love_yuimop
[ゆいもっぷさんの活動]:
・毎週木or金 22:00~頃 テイルズ実況(激かわ)
https://com.nicovideo.jp/community/co1441586・隔週土 22:00~ バーチャル番組『マイティスマイル』出演 (センター)
V世界でバーチャルゲーム
https://com.nicovideo.jp/community/co5379792元配信:
https://live.nicovideo.jp/watch/lv339020560SmoothGraphic Copyright(C)2013-2017 チラ裏エリア
--
画像(原画)を指定し、間を補完させ動画を作りました。1秒毎の原画指定だと早いと思いますが、0.5秒毎に指定し動きを頑張ってるシーンもあります。画像から動画へ。
SGは、元々重ね合わせで画像をi2iして作るときれいなので、いい構図の2枚の出力画像をSGで重ねると、尺埋めに良い感じの遷移する画像群ができます。(私は「静動画」と呼んでました) 普通のアニメOPでは、35秒位がしっかり動く動画、30秒位が静止画(をズーム、パン)、30秒位が AnimateDiff で作れる様な髪やスカートがたなびく動画(をカメラを並行移動)ですが、本動画では、最後の「割と短めなループで尺を埋める」所を「静動画」で埋めてます。
動画の内容は、「エプロンを着たゆいもっぷさんが振り返り、ローアングル後に装備を整え出撃し、撃ち合いし、戦場にジャンプして現れ、勝利帰還し、憧れのあの人なのでラーメンを手づかみで食べて、スカイダイビングし水中で楽しそうに踊る」です。(t◯mでこの内容が作れる様になるといいですね)
やはりアニメの映像の7割は原画と痛感。一番多いシーンで第4原画まで作りました。最低でも第2原画は作っています。第◯原画の数字を増やすのは、枚数少ないので簡単です。(詳しくは制作記を)
一番上手くいったのは「ラーメン手づかみ」ですね。手づかみラーメンを食べるという動きを綺麗に描けて良かったです。
今回は、技術開発が多く、画像生成AIに作画させてのアニメ作り作業の自動化率を高めました。(開発したもの2週間後くらいに制作記に載せますので、見れば皆さんも作れます)
次回は廉価版とし、「早くゆいもっぷアニメMVを作る」に集中し、理想「週刊ゆいもっぷMV」に近づく。(制作開始から2週間でできると最高。3週間でできるのでは?)
SGでの30fpsシーンは、particle sparkles lens_flare smoke dust等の「画面の任意の位置に現れる」プロンプトが毎フレームランダムな位置に出て、ちらつきとなってます。次回からは入れない知見。name_badge identity_card choker等、デザインの自由度が高いプロンプトも同じです(フレーム毎の一貫性の低下)
SG利用は、何フレーム目をどのくらい重視して動画に多く取り入れるといい感じかも製作記に書きます。
クオリティUPより作業時間を短縮に興味。現在「制御点設定」と「選別」が2大作業なのですが(制作手法を書く制作記をご覧)、アレを使えば自動化行けるのではと思い、次次回予定です。(次回は廉価版)
やはり動きを描けると嬉しいですね。ap◯xのシーンは結構原画で動きを指定できていたのですが、その後のval◯のシーンの後半では動きを意識せずに原画を作ってしまい申し訳ない。原画でどんな動きをさせたいかを意識して、これからも映像を見ていきたい所存です。
製作記(制作手法):
https://ao-love-yuimop.hatenablog.com/ (ここに今回の動画やそこで開発したもののコードも2週間後ぐらいに上げます)