deepfacelab 勝手にFAQ
Q:グラボはどれがいい?
A:メモリ12GBある3060が安定
Q:FACESETの抽出はWFがいい?HEADがいい?
A:
SRC(素材側)は将来の拡張を見据えてHEADの1024
DST(移す先)側はWFの512くらいで十分
Q:どのモデルでやればいい?
mrdeepfake見てる限りLIAE-UDが安定の様子
WFのresolution256で大体似る
それ未満はおでこあたりの髪の毛まで移植しきれないのでどうしても似ない
headは環境によってはバグる
慣れないうちは
resolution256
randomwarp on だけでok
最初から重い設定でやると試行錯誤するのに時間がかかる
Quick96は無茶苦茶軽くて一瞬でできるが
マージするときに確かオデコあたりまでしか適用できない
なのでtrain中は似てるなーとなってもmergeの段階だと全然似なかったりする
オデコの上の髪くらいまでSWAPできるように最低でも顔のサイズはWFが必須になる
ただWFだと
DSTが茶髪で長髪
SRCが黒髪だとオデコの上のあたりまでしかSWAPできない関係上
髪色や髪型までDSTとSRCが元から似ている必要がある
Q:綺麗に似せるコツは?
A:
一見して本人かなと見間違うくらい似てる方が似せやすい
全く別人と認識しているものを顔だけ全く同じにしても本人と認識できるものはできない
極端な話顔だけ画像ツールでコピペしても他の要素が違うと本人感が出ない
他の要素がほぼ本人だと画像ツールで顔だけコピペすると本人感が出てくる
他の要素とは↓の要素
顔・体の太り具合や表情・お腹のくびれといった細かいところ
その他自分がここは本人の大事な特徴だと思っているところが似てるかどうかで大きな差が出てくる
ちなみに薄い顔に濃い顔を移す方が楽に似させられる
メイクや表情が似てると楽
そんな人は確率的にほぼいないのが残念
なので似せられるかどうかはDSTの人選にどれだけ時間をかけるかという点も関わってくる
Q:簡単にやるコツは?
慣れないうちはDSTの動画のFPSを10くらいに落とすとやりやすい
これでも10秒で100フレームある
ちなみにFPS30フレームで1分とかやると1800フレームもいじらないといけないのでなかなか大変
正面オンリー動画が楽
変な方向向いてる動画は顔認識をいちいちやるのが面倒
Q:SRC素材はどんなのがいい?
最強は正面からの色々な表情をする高画質のインタビュー動画
顔も安定しやすい
足りないからと色んな動画からもってくると素材によっては顔が不安定になるというか混じってしまうこともある
DSTでやっている表情と角度と同じようなものを用意する必要がある
SRCでアップだと魚眼レンズの要領で少し顔が歪んでしまうのであまりドアップのものは使いづらい
最初色々な動画からsrcを集めてtrainをしある程度形になったら
自分が似せたい顔だけのsrcだけ残してやると少し似てくる
src側で自分がイメージしている顔とは違う微妙な表情や顔を残すと完成したものもナンカチガウものができるので完成度の高い物を作るにはsrc側の厳選は必須
Q:X-segはどんな感じで使う?
顔の周りを囲う感じで行う
顎とかは顎の線のラインを丁寧に
髪の毛は髪の毛の内側のラインを適当にやるだけでok
300フレームなら20枚程度editした後train してapplyする
足りないならeditをもっとやっていく
そのあとmergeする時はxを何度か押して顔の範囲をx-seg dstあたりにして
eでブラーしてなめらかす感じで大体綺麗になる
Q:
