[過去ﾛｸﾞ] 【質問】dfl【その4】 (1002ﾚｽ)
上下前次1-新
このｽﾚｯﾄﾞは過去ﾛｸﾞ倉庫に格納されています｡
次ｽﾚ検索 歴削→次ｽﾚ 栞削→次ｽﾚ 過去ﾛｸﾞﾒﾆｭｰ
101(1): 2022/03/11(金)22:52 ID:CWhSxf/i0(1) AAS
画質だけで言うと数値変えて大きく影響するのはモデルresだけど
srcとdstのaligned解像度だけ変えて他の条件を全く同じにした場合どのくらい画質に影響するか実際に比較した人いる？
海外でもよく意見が分かれてるけど
WFとかHeadで顔抽出すると顔以外の余白部分がかなり多いから
モデルres 384の場合でもalignedの解像度は512とかそれ以上必要になるよね？
102: 2022/03/12(土)09:54 ID:wCRcM+/e0(1) AAS
res384て…
そんなに上げられるものなの？
302とか288でやってるな
RTX3060で
103(3): 2022/03/12(土)10:01 ID:kiyIk+z60(1/3) AAS
余白の話が出たので情報共有
extractした時のフェイス部分の大きさ位置変更
■LandmarksProcessor.py
・214行目 顔の大きさ 数字が小さいほど大きくなる
FaceType.WHOLE_FACE: (0.40, False),
FaceType.HEAD: (0.70, False),
・302行目 wfの顔位置 数字が小さいほど上に行く
省7
104(2): 2022/03/12(土)10:19 ID:0zNvv9L80(1/2) AAS
>103
その設定ならほぼwfのデフォルトと同じでは？互換性捨ててまでやることじゃないと思う。
headは髪のボリュームあると上手くいかないし、日本のアイドルは前髪まで含めておけば、本人っぽくはなるし両津問題で困ること無くなるし、wfで十分と思ってる。
105(1): 2022/03/12(土)11:05 ID:kiyIk+z60(2/3) AAS
>>104
同じ数値にしてもwfとhaedのextractは異なるものが抽出されるのと
そもそもランドマークの扱いが違うので内部データが異なる全く別物になります
headの3Dでのextractが画角に強いのと仕上がりが好みなので俺はheadを選択してるのね
106(1): 2022/03/12(土)11:11 ID:kiyIk+z60(3/3) AAS
すみません互換性の部分が良く分からなかったけど
modelのfacetypeはheadでの話をしてました
107: 2022/03/12(土)11:48 ID:Ib5GDpaq0(1) AAS
>>106
確かにheadは画角に強いですよね〜
マスクをどこからどこにすれば良いかが難しい…
108(1): 2022/03/12(土)12:04 ID:aVff+N+e0(1) AAS
>>103
聞きたかったのはaligned resを変えた場合の画質の変化だったが
そんなことよりもその情報を知ってるってことはもしかしてloss functionにMS-SSIM+L1とか使えるようにしてる？
何の事か分からなかったらスルーで良いんだけど
自分でも今実験しててSSIMもしくはMS-SSIMと比べてどこまで顔に差が出るか知りたいんだよね
109: 2022/03/12(土)13:36 ID:NInxcUBj0(1) AAS
srcは髪型のシルエットから顎までしっかりマスクやって
dstは顎あたりしっかりやって頭部広めにキノコ型にマスクすると
結構よかったです。dstはポニーテールで
110: 2022/03/12(土)14:00 ID:wgBVVMqc0(1) AAS
srcが常に同じ髪型してるわけじゃないから大変そう
111(1): 2022/03/12(土)21:28 ID:0zNvv9L80(2/2) AAS
>103
そういう事か。余白が理由じゃないんですね。勉強になります。
もしかして、3Dextract でwfのフォーマットで書き出すように出来たりする？画角に強いwfの書き出しが出来るなら嬉しいんだけど。
112: 2022/03/12(土)23:04 ID:Dm7Kl3Is0(1) AAS
みんなwfなのか
俺はいまだにfなんすけど
113: 2022/03/12(土)23:18 ID:5tfgxYB10(1) AAS
おれもｆっすｗ
114(1): 2022/03/12(土)23:27 ID:cjYIexVM0(1/2) AAS
udとudtはどうなん？udtはなんかdst寄りになってる気がする
115(3): 2022/03/12(土)23:30 ID:cjYIexVM0(2/2) AAS
fの人は雰囲気出てればいっかぁって人でしょ
ガチ勢はwf一択
116: 2022/03/13(日)00:00 ID:DdKgiaZa0(1) AAS
fとかwfってscrとモデルとdstにそれぞれあると思うけど、やっぱり同じもの同士合わせないといけないの？
最初にやってるdstとか使いまわしするんでfにしないといけないからという感じもあるんだけど。
117: 2022/03/13(日)00:47 ID:yAXmsNkO0(1) AAS
俺も3年ほど作ってるけどfだな
wfあんまり役に立たない
118(1): 2022/03/13(日)06:07 ID:hdkPXi/B0(1) AAS
>>114
liaeはDSTの顔の角度がSRCにないとそうなるよ
dfだとクリーチャーになる
あとは単純にtrainが不十分
loss値が0.1あたりまで下がると一気に似てくる
119: 2022/03/13(日)08:47 ID:+35yBR+40(1) AAS
自分はwf派
眉下で切ったりするならffで十分。狭い方が安定するし、解像度も高くなる。かなり素材の相性が必要だけど。
wfでちゃんと再現出来るなら広範囲変換した方が似るのは当然。輪郭や前髪まで含めれば特に。色合わせ適当でも目立たないし、上向いた時に顎下まで範囲に含めれば、お面っぽさも減る。
前髪は多少チラつくからそれが許せるかにもよるし、輪郭と障害物同時にこなすは難しいから、何を求めるかで違うんじゃないかな。
120: 2022/03/13(日)12:17 ID:JichKtkJ0(1) AAS
電気代がヤバかったので一旦引退します笑
2万/月ほど乗ってる
121: 2022/03/14(月)18:12 ID:D4fxcIxb0(1) AAS
もしsrcの正面の画像をたけしで揃えて
左向きの顔は全部さんま
右向きの顔は全部紳助
で揃えたら右向くと紳助になって左向くとさんまで正面向いてるときはたけしの
阿修羅みたいな奴ができるん？
122(1): 2022/03/14(月)18:43 ID:W2/Abswa0(1) AAS
エロくないのは却下
123(1): 2022/03/15(火)16:02 ID:ZhAgGwk60(1) AAS
mergeして動画にすると顔にちらつきが
見られるのってtrain不足ですかね？
同じ位の動画時間で同じtrain時間でも
ちらつかないのも出来たりするので
謎です
ランドマークが乱れている時のちらつきとは
明らかに違います
124: 2022/03/15(火)18:22 ID:GimY8sSm0(1/2) AAS
顔のextractがちゃんと出来てないとか
125(1): 2022/03/15(火)18:48 ID:iwGHh9C30(1) AAS
ほぼ正面のなんてことないシーンなのにチラつく動画が出来上がることは、まれにあるね
カラーモードを変えてtrainを続けてみるなどのテストはしてないので、打開策があるのか私には分からん
対処法があるなら、教えて欲しいです
126(1): 2022/03/15(火)20:22 ID:GimY8sSm0(2/2) AAS
rctでチラついたらmkl-mにするとかぐらいかな
127: 123 2022/03/15(火)21:04 ID:QBc0zKPp0(1) AAS
ありがとうございます
カラーはいつもrctでやっています
一番無難な選択としてやっていたのですが
他も試してどう変化がでるかやってみます
128(1): 2022/03/20(日)10:27 ID:W9LumOpO0(1/2) AAS
一番効率の良いTrainの設定ってどんな感じでしょうか？
バッチ増やすとiter遅くなるような気がします。
3090でやってます。今バッチ16で0.55ms位です。
129(1): 2022/03/20(日)10:32 ID:f7F6AzPZ0(1) AAS
最初4ぐらいの小さめで、整ってきたらバッチギリギリまで上げるのが基本
130(2): 2022/03/20(日)16:13 ID:W9LumOpO0(2/2) AAS
>>129
有難うございます。ずっとバッチ16で最初からやってました。
次回言われたようにやってみますね！
131(1): 2022/03/20(日)18:24 ID:JnvGMxIO0(1) AAS
自分も最初からずっと16でやってた...
単に並列処理数が多くて効率的ぐらいに思ってたけど違ったのか
132: 2022/03/20(日)20:27 ID:3qWrgP2z0(1) AAS
xsegのトレーニングはどれくらいやたほうがいいですか？
133: 2022/03/20(日)21:07 ID:UdeYg4MP0(1) AAS
プレビューでマスク範囲内の影がなくなるまで
134(2): 2022/03/20(日)22:30 ID:QozVxlKn0(1) AAS
1iterの学習時間/バッチサイズが最小になる設定が一番効率いいのかと思ってた
135: 2022/03/21(月)00:08 ID:H8YMV8UJ0(1) AAS
髪で顔が覆われたdstのaligned素材を一旦別ファイルに移動させて（正確には切り取り→貼り付け）trainし、merge前にdstのalignedフォルダに戻したのですが、merge時に画像が見つからないとなりました。
原因がよく分からないのですが、なぜでしょうか？
train、mergeはQuick96でやりました。
136(1): 2022/03/21(月)00:32 ID:DQloK8KR0(1/2) AAS
移動の仕方が何か違うのかもね
ただのjpgファイルに見えるけど、ただのjpgじゃないからね
137(1): 2022/03/21(月)05:08 ID:wbKZkIL60(1) AAS
フォルダ名や位置を間違える、ソートして元に戻さすやっちゃってたとかそういう凡ミスが経験上多い
138(2): 2022/03/21(月)16:23 ID:NJIf394q0(1) AAS
VRAM12GBの3060と10GBの3080だと
前者のほうが処理はやいですか？
139(1): 2022/03/21(月)16:29 ID:DQloK8KR0(2/2) AAS
はやいかもね
でもDFでは普通はVRAMが少しでも多い方を買う
140: 2022/03/21(月)17:59 ID:6HSCPIWQ0(1/2) AAS
全く同じ設定にして比較してるのを見たけど3060が600msで3090が300msくらいだったから
3060よりも3080の方が処理は早いけどそこまで変わるわけじゃないし
3060なら3080よりもバッチ、解像度、dims上げられるし価格も考えて3060が圧勝
というか秋に出る4070でさえ3090以上の性能らしいから3080は論外
141(1): 2022/03/21(月)18:27 ID:u9d1XUrx0(1) AAS
まだしばらく2060superでがんばる
142: 2022/03/21(月)20:15 ID:359CBjeS0(1/2) AAS
loss値が下がらなくなるまでという説明が良くあるけど、randoｍ warpをyからnに切り替えるタイミングで
0.001でも下がり続けてたらyで続行すべき？
そのあたりの見極めが出来なくてモヤモヤしてます。
143(3): 2022/03/21(月)22:52 ID:6HSCPIWQ0(2/2) AAS
プレビューの見栄えにもよるけど25分毎のlossの履歴見て3回連続で0.001ずつ位しか下がってない時は
大きく変化することは無いからそうなったら設定変えてるな
素材によって損失の低下速度も変わるから多少タイミングも変えるが
大体最初はRW+UYだけONでsrc lossが0.35位まで行ったらRW+UY+LRD ONにして
srcが0.25位まで行ったらRW切ってUY+LRDオンリーで0.15とかになったら終わらせてる
144: 2022/03/21(月)23:49 ID:359CBjeS0(2/2) AAS
>>143
コメント有難うございます。
自分がやってた事と大きく違ってなかったので安心しました。
各オプションを有効・無効にするタイミング間違えた事で結果が変わって何度無駄なトレーニングをした事か、、、
悩ましいけど段々良くなってるような気がしてて楽しいから続けられる。
145(2): 2022/03/22(火)14:59 ID:CuSz3ILS0(1) AAS
>>143
RWとLRDを両方オンにしたことないのですが、うまく学習は進みますか？
146(1): 2022/03/22(火)18:53 ID:R5xnplv90(1) AAS
>>145
DFLの開発者も深層学習に詳しい人達もRW→RW+LRD→LRDの工程を推奨してるし
この方法でsrcと同じクオリティの顔が最終的に作れてるから最適だと思う
現状どんな結果なのか分からないし元の素材が悪かったらどうしようもないけど
同じ様なタイミングで進めていけば今よりも良くなるかもね
147: 2022/03/22(火)20:30 ID:pu+Lo9mf0(1) AAS
>>136
>>137
返信ありがとうございます。
ネットで調べたところ、no face foundと表示された箇所は、aligned_debugのランドマークが上手くいってない部分でした。
MANUAL RE-EXTRACT DELETED ALIGNED_DEBUGでいじってみます。
148: 2022/03/23(水)14:27 ID:9NSCv3W90(1/2) AAS
眉のマスクについて、眉下をマスクしてmergeした際に前髪が二重になります（dst の前髪の下にprdの前髪がある）
?マスクをする際はsrc、dst 共に眉下の縁ギリギリを実線でなぞっているのですが、この認識であっているのでしょうか？
?そもそもsrcの眉を上手く使う方法はないのか？
?片眉にのみ前髪がかかっている場合、実線で眉の高さをある程度揃えて、前髪部分だけ点線で除外した方がいいのか？それとも実線だけで前髪に沿って線を引けばいいのか？
149(2): 2022/03/23(水)16:46 ID:4N7u+7Mf0(1) AAS
マスクはdstだけで良いと思います
それでX-seg trainをするとdstとsrc両方
読み込んでくれdstのマスクをsrcに対しても
あてがって学習してくれているみたいですね
150: 2022/03/23(水)18:27 ID:QtDV5ckE0(1/3) AAS
dstだけのxseg trainってできないのかね
srcはさんざんtrainしてるのに
151: 2022/03/23(水)18:44 ID:jfcxBLMW0(1/2) AAS
srcフォルダどこかへ移動させて試してみるとか
エラー起こるかな？
152(1): 2022/03/23(水)19:20 ID:wd+rVhFW0(1) AAS
できるよ
srcのalignedフォルダの名前適当に変えてやればdstだけで始まる
153(4): 2022/03/23(水)19:58 ID:U8658mPa0(1) AAS
xsegの汎用で当てた後はみ出してたりするのを修正するのは一番左上ので輪郭を
いったんもう一度規定してやらないとだめなんですかね？
点線の方の部分的に消す方だけやっても直したことにはならないんですか？
文章だとわかりにくいんでこれでは修正したことにならないんですか？↓
外部ﾘﾝｸ:imgur.com
154(1): 2022/03/23(水)20:42 ID:9NSCv3W90(2/2) AAS
>>149
なるほど
YouTubeでチュートリアル見ても、srcの方へもマスクしてたので、必須かと思ってました
今後dst のみでやってみます
ところでそうなるとsrcのマスクはどういう時に使うんですかね？
155(1): 2022/03/23(水)20:50 ID:QtDV5ckE0(2/3) AAS
>>153
面倒くさいけど適応させる顔の部分を全部囲ってやらないとダメ
その例だとそんな大変でもないと思うけど
156: 2022/03/23(水)21:34 ID:jfcxBLMW0(2/2) AAS
srcのマスクって私はしたことないですね
不必要な物の除去に使えそうですが
そういうのはtrain時に認識しませんし
そもそも除外します
157: 2022/03/23(水)21:41 ID:QtDV5ckE0(3/3) AAS
マスクしないと必要のない部分も学習しちゃってloss値が下がらなくなるからだな
158: 2022/03/23(水)23:16 ID:cvUc74yB0(1/2) AAS
棒を舐めたいとする
そうするとSRCでバナナ食ってるやつとかを用意する必要がある
ここでx-segちゃんとやらないとバナナを口と学習してしまって棒なめてる時にバナナが出てくる
159(2): 2022/03/23(水)23:28 ID:cvUc74yB0(2/2) AAS
顔にちょっと手とかがかかってるのとかも除外するほど完成度が上がるんだよな
160(1): 2022/03/24(木)01:25 ID:EZKR+eN60(1) AAS
バナナの例えがわかりにくいよ
笛はdstの方にマスクすればsrcのバナナも隠れるだろうし
161(2): 2022/03/24(木)01:48 ID:oNqp1W5C0(1) AAS
>>153
最初、障害物だけ囲めばいいじゃーんってやって何も起こらないやつな
顔全体も実線ポリゴンで指定しとかないと適用されない
162: 2022/03/24(木)09:19 ID:t9Nn/zwJ0(1) AAS
大口開けてるsrc画像欲しくておにぎりかぶりついてる
画像使っているんだけど
マスクしたほうが効率は良かったんですね
いまからでもやろうかなぁ
163(1): 2022/03/24(木)22:09 ID:bRlaDVTh0(1) AAS
今まで、新しいの作るたびに、clear workspaceでワークスペースを空にしてました
過去スレ見てたら下のようなレスがあったのですが、一番最後の文を見る限り、
真新しいのを作る際はdata_dstとdata_srcのフォルダを削除して、modelフォルダは残しといた方が良いってことですかね？
296 /名無しさん[1-30].jpg 2019/08/19(月) 21:35:35 ID:
モデルの流用はmodeLフォルダの
上書きのことなのでしょうか。
297 /名無しさん[1-30].jpg 2019/08/19(月) 21:54:03 ID:
省9
164: 2022/03/24(木)23:32 ID:eM3mEN2v0(1) AAS
Mergeする時に、core9-9900の時には全コア使ってるんだけど、core7-12700の時にはコアを4つぐらいしか使ってない
なのでだいぶ時間に差が出るんだけどバグなんかな？
これが普通？
165: 2022/03/25(金)22:51 ID:qiPzT4p+0(1) AAS
CPUが新しすぎて対応してないんじゃ
166(1): 2022/03/26(土)12:05 ID:SF8psl8Q0(1) AAS
11世代では問題無かったけどMSI Z690と12世代 i9に変えたらトレーニング開始15分で停止するようになったって人がいたけどBIOSアップデートしたら直ったってよ
俺は使ってないから分からんけどマイクロコードの更新で12世代から分かれたEコアとPコアのcpuスケジューリングの処理が改善されたからみたい
他のマザボも多分同じように更新来てるだろうからアプデしたら直るかもね
12世代はwin11に最適化されてるって事も言及してるからwin11も必要かも
167: 2022/03/26(土)19:13 ID:NVpYOcd40(1) AAS
みなさんありがとう
やっぱCPUうまく動いてないのかなあ
Bios、OSのせいもあるんかもしれないけどDFL自体去年のが最新版だから対応してないんかなあ
12世代で全CPUちゃんと動いてるよっていう人がいたら教えてください
168: 2022/03/26(土)19:20 ID:Exoy10VI0(1) AAS
Eコア無効にして動かしてみれば
169: 2022/03/27(日)00:10 ID:v3V83Ug60(1) AAS
Windows11にしたら全コア動き始めた
12世代の人はアップデートしないといけないな
170(1): 2022/03/27(日)12:07 ID:8DfOfbqV0(1/2) AAS
srcの前髪使いたい場合はxsegでsrcとdst の前髪まるごとmaskすればいいのかな？
maskのコツとかある？
171(2): 2022/03/27(日)12:56 ID:qLkzrCgF0(1) AAS
そのとおり
全く難しくないからやってみると良いと思う
成功したという人もいるけど、俺には無理だった
srcの前髪が常に同じじゃないといけないし、どんなにdstが上下運動しても前髪不自然に止まったまんまだし、とにかく輪郭が不自然
172: 2022/03/27(日)21:20 ID:8DfOfbqV0(2/2) AAS
>>171
ありがとうございます
とりあえずやってみます
173: 2022/03/27(日)22:55 ID:jO66UYzT0(1) AAS
headのもやもや感が全然取れん
3060じゃパワー不足かな？
174(2): 2022/04/01(金)02:49 ID:i/Dt3ia50(1) AAS
全然更新ないなって思ってたけどこのソフトの作者ってロシア人なんだっけ？
175(1): 2022/04/01(金)21:59 ID:4WodZj1v0(1) AAS
ロシア人だけど今も有名人のDF作るかオーバーウォッチで遊ぶかディスコでしょうもない質問してくる奴に対してキレてるだけで暇なのに細かい更新しかしてないから期待できないなw
176(2): 2022/04/02(土)11:07 ID:bJ41ty0m0(1/2) AAS
dst では閉じ目のシーンが、出来上がりを見ると半目になってしまいます
これを閉じ目にしたいのですが、何かいい方法ないでしょうか？
loss値は0.2くらいで、一応src5000枚のうち、200枚くらいは目を閉じてます
177(2): 2022/04/02(土)14:30 ID:n+sdsj+m0(1) AAS
LIAEだとマシになる程度
178(1): 2022/04/02(土)17:03 ID:P0/RTPSV0(1) AAS
>>176
ae dimsを上げるか、MVEでdstのランドマークをいじれば多分いける
179(2): 2022/04/02(土)20:25 ID:bJ41ty0m0(2/2) AAS
>>178
ae_dims初期設定の256からいじったことないんですけど、どれくらい上げれば変化分かるものなのでしょうか？
それと、ae_dimsってtrain途中で変えることできないんですが、初めからやり直すしかないんでしょうか？
180(2): 2022/04/02(土)20:38 ID:vMFBhom70(1) AAS
目を閉じたsrcとdstだけ集めて別にやる手もある それでも完璧にはならないけど
181: 2022/04/02(土)21:04 ID:MzF+nllB0(1) AAS
>>179
多分やり直すしかないと思います
aeは512位が良いのではないかと
上下前次1-新書関写板覧索設栞歴
あと 821 ﾚｽあります
ｽﾚ情報 赤ﾚｽ抽出 画像ﾚｽ抽出 歴の未読ｽﾚ AAｻﾑﾈｲﾙ
ぬこの手 ぬこTOP 0.023s