dragonmeteor (aka masterspark)@dragonmeteor
一枚の画像でVTuberになれるシステム(v2)を作りました。キャラの正面画像を用意することだけで、眉毛、目、虹彩、口が操作することができ、顔も回転させられます。キャラが表情豊かになり、リップシンクもいい感じです。詳しくはhttps://t.co/0UF9sJnQkAで。#機械学習 #ディープラーニング #Vtuber
ツイートに対するネットの反応
用意するのは正面画像のみ!
いずれ3面図があれば…なんてことに
なったりするのでしょうか!?
#TalkingHead https://t.co/zxOok8a6il
かなり違和感なく動いてて、技術屋としてめちゃくちゃすげえことしてるなって思った、これMMOに表情システム組み込まれる未来がかなり近いし何なら絵かきさんの表示用差分を自分で作れちゃう
水無月0627@(元)凡人ハンター@q0Ywm71PBSRzpOA
そういう技術の存在自体は知ってたけど、実際に目の当たりにすると改めてすげぇと思う
多分Live2Dとは全く違う形式だけどね(Live2Dはパーツをパラメータに応じて変形させてるけど、コッチは多分いくつかの画像を比べて、各パーツがどう変形するか予測してるタイプ?だと思う)
これあれですよね
既に自分のLive2Dモデルを持ってるvの方も
ファンアートや自分の作品用に用意したイラストを使って
簡単に衣装チェンジや見た目の変更を行って
動きながら配信出来るようになるのでは?
画期的過ぎる……!!!
#vtuber