動画で動いている人を静止画の人と入れ替えるモデルが
公開されているのでご紹介です。


解説動画はこちら




コードなどはこちら
First Order Motion Model for Image Animation 

動画で動いている人を静止画に置き換えるようです。

いろんなサンプルが置いてありますね。
スクリーンショット 2020-04-26 15.20.22

GoogleColabで動くコードもあります。
自分のドライブにコピーして
上から実行していけば試すこともできますね。
スクリーンショット 2020-04-26 15.25.22


コードの中で
source_image = imageio.imread('/content/gdrive/My Drive/first-order-motion-model/02.png')
driving_video = imageio.mimread('/content/gdrive/My Drive/first-order-motion-model/04.mp4')

とあるので、ここのpngとmp4を変えてあげれば
自分の好きな動画を作る事が出来ると思います。

変換後のサイズがあまり大きくないので
256x256くらいの画像、動画が良いだろうと思います。

感触としては
・髪が顔に被らない
・背景なし
・メガネなし
にしてあげると上手くいくかなと思います。

単純に静止画を入れ替えるのと変わらないわけで
画像同士が似ている方が上手くいきやすいですね。

興味がある方は試してみてはどうでしょうか。

今日はこれまでです
それでは