Hugging Face's logo

nvidia
/
Audio2Face-3D-v2.3-Mark

ONNX
Model card Files
xet
Community
yseolnv commited on
Commit
4ac33e9
·
verified ·
1 Parent(s): 56ee109

Upload 12 files

Browse files
Files changed (12) hide show
  1. a2f_ms_config.json +366 -0
  2. bs_skin.npz +3 -0
  3. bs_skin_config.json +280 -0
  4. bs_tongue.npz +3 -0
  5. bs_tongue_config.json +100 -0
  6. implicit_emo_db.npz +3 -0
  7. model.json +17 -0
  8. model_config.json +30 -0
  9. model_data.npz +3 -0
  10. network.onnx +3 -0
  11. network_info.json +46 -0
  12. trt_info.json +15 -0
a2f_ms_config.json ADDED
@@ -0,0 +1,366 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "inputDataFilePath": "{ROOT}/model_data.npz",
3
+ "netPath": "{ROOT}/network.trt",
4
+ "emotionDatabaseFilePath": "{ROOT}/implicit_emo_db.npz",
5
+ "fps": 30,
6
+ "device_id": 0,
7
+ "name": "mark_v2.3",
8
+ "face_params": {
9
+ "input_strength": 1.3,
10
+ "prediction_delay": 0.25,
11
+ "upper_face_smoothing": 0.001,
12
+ "lower_face_smoothing": 0.0023,
13
+ "upper_face_strength": 1.0,
14
+ "lower_face_strength": 1.4,
15
+ "face_mask_level": 0.6,
16
+ "face_mask_softness": 0.0085,
17
+ "emotion": [
18
+ 0.0,
19
+ 0.0,
20
+ 0.0,
21
+ 0.0,
22
+ 0.0,
23
+ 0.0,
24
+ 0.0,
25
+ 0.0,
26
+ 0.0,
27
+ 0.0
28
+ ],
29
+ "source_shot": "g2a_neutral",
30
+ "source_frame": 33,
31
+ "skin_strength": 1.1,
32
+ "blink_strength": 1.0,
33
+ "lower_teeth_strength": 1.3,
34
+ "lower_teeth_height_offset": -0.1,
35
+ "lower_teeth_depth_offset": 0.0,
36
+ "lip_close_offset": -0.03,
37
+ "tongue_strength": 1.5,
38
+ "tongue_height_offset": 0.2,
39
+ "tongue_depth_offset": 0.13,
40
+ "eyeballs_strength": 1.0,
41
+ "saccade_strength": 0.9,
42
+ "right_eye_rot_x_offset": 0.0,
43
+ "right_eye_rot_y_offset": -2.0,
44
+ "left_eye_rot_x_offset": 0.0,
45
+ "left_eye_rot_y_offset": 2.0,
46
+ "eyelid_offset": 0.06,
47
+ "blink_interval": 3.0,
48
+ "eye_saccade_seed": 0,
49
+ "keyframer_fps": 60.0
50
+ },
51
+ "network_id": {
52
+ "type": "regression",
53
+ "actor": "mark",
54
+ "version": "2.3",
55
+ "output": "geometry"
56
+ },
57
+ "network_params": {
58
+ "num_dim_fullface": 301,
59
+ "implicit_emotion_len": 16,
60
+ "explicit_emotions": [
61
+ "amazement",
62
+ "anger",
63
+ "cheekiness",
64
+ "disgust",
65
+ "fear",
66
+ "grief",
67
+ "joy",
68
+ "outofbreath",
69
+ "pain",
70
+ "sadness"
71
+ ],
72
+ "num_shapes_skin": 272,
73
+ "num_shapes_tongue": 10,
74
+ "result_skin_size": 61520,
75
+ "result_tongue_size": 5602,
76
+ "result_jaw_size": 15,
77
+ "result_eyes_size": 4,
78
+ "maximum_batch_size": 2
79
+ },
80
+ "audio_params": {
81
+ "buffer_ofs": 4160,
82
+ "buffer_len": 8320,
83
+ "samplerate": 16000
84
+ },
85
+ "blendshape_params": {
86
+ "strengthL2regularization": 0.5,
87
+ "strengthTemporalSmoothing": 0.3,
88
+ "strengthL1regularization": 0.5,
89
+ "strengthSymmetry": 100.0,
90
+ "numPoses": 52,
91
+ "bsSolveActivePoses": [
92
+ 1,
93
+ 0,
94
+ 0,
95
+ 0,
96
+ 0,
97
+ 1,
98
+ 1,
99
+ 1,
100
+ 0,
101
+ 0,
102
+ 0,
103
+ 0,
104
+ 1,
105
+ 1,
106
+ 1,
107
+ 1,
108
+ 1,
109
+ 1,
110
+ 1,
111
+ 1,
112
+ 1,
113
+ 1,
114
+ 1,
115
+ 1,
116
+ 1,
117
+ 1,
118
+ 1,
119
+ 1,
120
+ 1,
121
+ 1,
122
+ 1,
123
+ 1,
124
+ 1,
125
+ 1,
126
+ 1,
127
+ 1,
128
+ 1,
129
+ 1,
130
+ 1,
131
+ 1,
132
+ 1,
133
+ 1,
134
+ 1,
135
+ 1,
136
+ 1,
137
+ 1,
138
+ 1,
139
+ 1,
140
+ 1,
141
+ 1,
142
+ 1,
143
+ 0
144
+ ],
145
+ "bsSolveCancelPoses": [
146
+ -1,
147
+ -1,
148
+ -1,
149
+ -1,
150
+ -1,
151
+ -1,
152
+ -1,
153
+ -1,
154
+ -1,
155
+ -1,
156
+ -1,
157
+ -1,
158
+ -1,
159
+ -1,
160
+ -1,
161
+ -1,
162
+ -1,
163
+ -1,
164
+ -1,
165
+ -1,
166
+ -1,
167
+ -1,
168
+ -1,
169
+ -1,
170
+ -1,
171
+ -1,
172
+ -1,
173
+ -1,
174
+ -1,
175
+ -1,
176
+ -1,
177
+ -1,
178
+ -1,
179
+ -1,
180
+ -1,
181
+ -1,
182
+ -1,
183
+ -1,
184
+ -1,
185
+ -1,
186
+ -1,
187
+ -1,
188
+ -1,
189
+ -1,
190
+ -1,
191
+ -1,
192
+ -1,
193
+ -1,
194
+ -1,
195
+ -1,
196
+ -1,
197
+ -1
198
+ ],
199
+ "bsSolveSymmetryPoses": [
200
+ 0,
201
+ -1,
202
+ -1,
203
+ -1,
204
+ -1,
205
+ -1,
206
+ 1,
207
+ 0,
208
+ -1,
209
+ -1,
210
+ -1,
211
+ -1,
212
+ -1,
213
+ 1,
214
+ -1,
215
+ -1,
216
+ -1,
217
+ -1,
218
+ -1,
219
+ -1,
220
+ -1,
221
+ -1,
222
+ -1,
223
+ 2,
224
+ 2,
225
+ 3,
226
+ 3,
227
+ 4,
228
+ 4,
229
+ 5,
230
+ 5,
231
+ -1,
232
+ -1,
233
+ -1,
234
+ -1,
235
+ 6,
236
+ 6,
237
+ 7,
238
+ 7,
239
+ 8,
240
+ 8,
241
+ 10,
242
+ 10,
243
+ -1,
244
+ 9,
245
+ 9,
246
+ -1,
247
+ 11,
248
+ 11,
249
+ 12,
250
+ 12,
251
+ -1
252
+ ],
253
+ "bsWeightMultipliers": [
254
+ 1.0,
255
+ 1.0,
256
+ 1.0,
257
+ 1.0,
258
+ 1.0,
259
+ 1.0,
260
+ 1.0,
261
+ 1.0,
262
+ 1.0,
263
+ 1.0,
264
+ 1.0,
265
+ 1.0,
266
+ 1.0,
267
+ 1.0,
268
+ 1.0,
269
+ 1.0,
270
+ 1.0,
271
+ 1.0,
272
+ 1.0,
273
+ 1.0,
274
+ 1.0,
275
+ 1.0,
276
+ 1.0,
277
+ 1.0,
278
+ 1.0,
279
+ 1.0,
280
+ 1.0,
281
+ 1.0,
282
+ 1.0,
283
+ 1.0,
284
+ 1.0,
285
+ 1.0,
286
+ 1.0,
287
+ 1.0,
288
+ 1.0,
289
+ 1.0,
290
+ 1.0,
291
+ 1.0,
292
+ 1.0,
293
+ 1.0,
294
+ 1.0,
295
+ 1.0,
296
+ 1.0,
297
+ 1.0,
298
+ 1.0,
299
+ 1.0,
300
+ 1.0,
301
+ 1.0,
302
+ 1.0,
303
+ 1.0,
304
+ 1.0,
305
+ 1.0
306
+ ],
307
+ "bsWeightOffsets": [
308
+ 0.0,
309
+ 0.0,
310
+ 0.0,
311
+ 0.0,
312
+ 0.0,
313
+ 0.0,
314
+ 0.0,
315
+ 0.0,
316
+ 0.0,
317
+ 0.0,
318
+ 0.0,
319
+ 0.0,
320
+ 0.0,
321
+ 0.0,
322
+ 0.0,
323
+ 0.0,
324
+ 0.0,
325
+ 0.0,
326
+ 0.0,
327
+ 0.0,
328
+ 0.0,
329
+ 0.0,
330
+ 0.0,
331
+ 0.0,
332
+ 0.0,
333
+ 0.0,
334
+ 0.0,
335
+ 0.0,
336
+ 0.0,
337
+ 0.0,
338
+ 0.0,
339
+ 0.0,
340
+ 0.0,
341
+ 0.0,
342
+ 0.0,
343
+ 0.0,
344
+ 0.0,
345
+ 0.0,
346
+ 0.0,
347
+ 0.0,
348
+ 0.0,
349
+ 0.0,
350
+ 0.0,
351
+ 0.0,
352
+ 0.0,
353
+ 0.0,
354
+ 0.0,
355
+ 0.0,
356
+ 0.0,
357
+ 0.0,
358
+ 0.0,
359
+ 0.0
360
+ ],
361
+ "bsDataPath": "{ROOT}/bs_skin.npz",
362
+ "ue_l_eye_idx": 1,
363
+ "ue_r_eye_idx": 8,
364
+ "ue_eye_dim": 4
365
+ }
366
+ }
bs_skin.npz ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:95fbe12499271a9c1ca0d718262fad76d6218f026a450d07006c6b70bc001cc5
3
+ size 39182291
bs_skin_config.json ADDED
@@ -0,0 +1,280 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "blendshape_params": {
3
+ "strengthL2regularization": 0.5,
4
+ "strengthTemporalSmoothing": 0.3,
5
+ "strengthL1regularization": 0.5,
6
+ "strengthSymmetry": 100.0,
7
+ "numPoses": 52,
8
+ "bsSolveActivePoses": [
9
+ 1,
10
+ 0,
11
+ 0,
12
+ 0,
13
+ 0,
14
+ 1,
15
+ 1,
16
+ 1,
17
+ 0,
18
+ 0,
19
+ 0,
20
+ 0,
21
+ 1,
22
+ 1,
23
+ 1,
24
+ 1,
25
+ 1,
26
+ 1,
27
+ 1,
28
+ 1,
29
+ 1,
30
+ 1,
31
+ 1,
32
+ 1,
33
+ 1,
34
+ 1,
35
+ 1,
36
+ 1,
37
+ 1,
38
+ 1,
39
+ 1,
40
+ 1,
41
+ 1,
42
+ 1,
43
+ 1,
44
+ 1,
45
+ 1,
46
+ 1,
47
+ 1,
48
+ 1,
49
+ 1,
50
+ 1,
51
+ 1,
52
+ 1,
53
+ 1,
54
+ 1,
55
+ 1,
56
+ 1,
57
+ 1,
58
+ 1,
59
+ 1,
60
+ 0
61
+ ],
62
+ "bsSolveCancelPoses": [
63
+ -1,
64
+ -1,
65
+ -1,
66
+ -1,
67
+ -1,
68
+ -1,
69
+ -1,
70
+ -1,
71
+ -1,
72
+ -1,
73
+ -1,
74
+ -1,
75
+ -1,
76
+ -1,
77
+ -1,
78
+ -1,
79
+ -1,
80
+ -1,
81
+ -1,
82
+ -1,
83
+ -1,
84
+ -1,
85
+ -1,
86
+ -1,
87
+ -1,
88
+ -1,
89
+ -1,
90
+ -1,
91
+ -1,
92
+ -1,
93
+ -1,
94
+ -1,
95
+ -1,
96
+ -1,
97
+ -1,
98
+ -1,
99
+ -1,
100
+ -1,
101
+ -1,
102
+ -1,
103
+ -1,
104
+ -1,
105
+ -1,
106
+ -1,
107
+ -1,
108
+ -1,
109
+ -1,
110
+ -1,
111
+ -1,
112
+ -1,
113
+ -1,
114
+ -1
115
+ ],
116
+ "bsSolveSymmetryPoses": [
117
+ 0,
118
+ -1,
119
+ -1,
120
+ -1,
121
+ -1,
122
+ -1,
123
+ 1,
124
+ 0,
125
+ -1,
126
+ -1,
127
+ -1,
128
+ -1,
129
+ -1,
130
+ 1,
131
+ -1,
132
+ -1,
133
+ -1,
134
+ -1,
135
+ -1,
136
+ -1,
137
+ -1,
138
+ -1,
139
+ -1,
140
+ 2,
141
+ 2,
142
+ 3,
143
+ 3,
144
+ 4,
145
+ 4,
146
+ 5,
147
+ 5,
148
+ -1,
149
+ -1,
150
+ -1,
151
+ -1,
152
+ 6,
153
+ 6,
154
+ 7,
155
+ 7,
156
+ 8,
157
+ 8,
158
+ 10,
159
+ 10,
160
+ -1,
161
+ 9,
162
+ 9,
163
+ -1,
164
+ 11,
165
+ 11,
166
+ 12,
167
+ 12,
168
+ -1
169
+ ],
170
+ "bsWeightMultipliers": [
171
+ 1.0,
172
+ 1.0,
173
+ 1.0,
174
+ 1.0,
175
+ 1.0,
176
+ 1.0,
177
+ 1.0,
178
+ 1.0,
179
+ 1.0,
180
+ 1.0,
181
+ 1.0,
182
+ 1.0,
183
+ 1.0,
184
+ 1.0,
185
+ 1.0,
186
+ 1.0,
187
+ 1.0,
188
+ 1.0,
189
+ 1.0,
190
+ 1.0,
191
+ 1.0,
192
+ 1.0,
193
+ 1.0,
194
+ 1.0,
195
+ 1.0,
196
+ 1.0,
197
+ 1.0,
198
+ 1.0,
199
+ 1.0,
200
+ 1.0,
201
+ 1.0,
202
+ 1.0,
203
+ 1.0,
204
+ 1.0,
205
+ 1.0,
206
+ 1.0,
207
+ 1.0,
208
+ 1.0,
209
+ 1.0,
210
+ 1.0,
211
+ 1.0,
212
+ 1.0,
213
+ 1.0,
214
+ 1.0,
215
+ 1.0,
216
+ 1.0,
217
+ 1.0,
218
+ 1.0,
219
+ 1.0,
220
+ 1.0,
221
+ 1.0,
222
+ 1.0
223
+ ],
224
+ "bsWeightOffsets": [
225
+ 0.0,
226
+ 0.0,
227
+ 0.0,
228
+ 0.0,
229
+ 0.0,
230
+ 0.0,
231
+ 0.0,
232
+ 0.0,
233
+ 0.0,
234
+ 0.0,
235
+ 0.0,
236
+ 0.0,
237
+ 0.0,
238
+ 0.0,
239
+ 0.0,
240
+ 0.0,
241
+ 0.0,
242
+ 0.0,
243
+ 0.0,
244
+ 0.0,
245
+ 0.0,
246
+ 0.0,
247
+ 0.0,
248
+ 0.0,
249
+ 0.0,
250
+ 0.0,
251
+ 0.0,
252
+ 0.0,
253
+ 0.0,
254
+ 0.0,
255
+ 0.0,
256
+ 0.0,
257
+ 0.0,
258
+ 0.0,
259
+ 0.0,
260
+ 0.0,
261
+ 0.0,
262
+ 0.0,
263
+ 0.0,
264
+ 0.0,
265
+ 0.0,
266
+ 0.0,
267
+ 0.0,
268
+ 0.0,
269
+ 0.0,
270
+ 0.0,
271
+ 0.0,
272
+ 0.0,
273
+ 0.0,
274
+ 0.0,
275
+ 0.0,
276
+ 0.0
277
+ ],
278
+ "templateBBSize": 53.45050282121686
279
+ }
280
+ }
bs_tongue.npz ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:ae9f0cdade93c0e0037f9e61b125a02709b8eb133eb857d348065a847e5f0d47
3
+ size 1147669
bs_tongue_config.json ADDED
@@ -0,0 +1,100 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "blendshape_params": {
3
+ "strengthL2regularization": 3.5,
4
+ "strengthTemporalSmoothing": 5.0,
5
+ "strengthL1regularization": 1.0,
6
+ "strengthSymmetry": 100.0,
7
+ "numPoses": 16,
8
+ "bsSolveActivePoses": [
9
+ 1,
10
+ 1,
11
+ 1,
12
+ 1,
13
+ 1,
14
+ 1,
15
+ 1,
16
+ 1,
17
+ 1,
18
+ 1,
19
+ 1,
20
+ 1,
21
+ 1,
22
+ 1,
23
+ 1,
24
+ 1
25
+ ],
26
+ "bsSolveCancelPoses": [
27
+ -1,
28
+ -1,
29
+ -1,
30
+ -1,
31
+ -1,
32
+ -1,
33
+ -1,
34
+ -1,
35
+ -1,
36
+ -1,
37
+ -1,
38
+ -1,
39
+ -1,
40
+ -1,
41
+ -1,
42
+ -1
43
+ ],
44
+ "bsSolveSymmetryPoses": [
45
+ -1,
46
+ -1,
47
+ -1,
48
+ -1,
49
+ -1,
50
+ -1,
51
+ -1,
52
+ -1,
53
+ -1,
54
+ -1,
55
+ -1,
56
+ -1,
57
+ -1,
58
+ -1,
59
+ -1,
60
+ -1
61
+ ],
62
+ "bsWeightMultipliers": [
63
+ 2.0,
64
+ 1.0,
65
+ 1.0,
66
+ 1.0,
67
+ 3.0,
68
+ 1.0,
69
+ 1.0,
70
+ 1.0,
71
+ 2.0,
72
+ 1.0,
73
+ 1.0,
74
+ 1.0,
75
+ 1.0,
76
+ 2.0,
77
+ 1.0,
78
+ 1.0
79
+ ],
80
+ "bsWeightOffsets": [
81
+ 0.0,
82
+ 0.0,
83
+ 0.0,
84
+ 0.0,
85
+ 0.0,
86
+ 0.0,
87
+ 0.0,
88
+ 0.0,
89
+ 0.0,
90
+ 0.2,
91
+ 0.0,
92
+ 0.0,
93
+ 0.0,
94
+ 0.0,
95
+ 0.0,
96
+ 0.0
97
+ ],
98
+ "templateBBSize": 7.935866586456822
99
+ }
100
+ }
implicit_emo_db.npz ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:ec07bdf65ea52b6c348e637021a5933b663fae52acf5ff45c11726c1057d5130
3
+ size 1319768
model.json ADDED
@@ -0,0 +1,17 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "networkInfoPath": "network_info.json",
3
+ "networkPath": "network.trt",
4
+ "emotionDatabasePath": "implicit_emo_db.npz",
5
+ "modelConfigPath": "model_config.json",
6
+ "modelDataPath": "model_data.npz",
7
+ "blendshapePaths": {
8
+ "skin": {
9
+ "config": "bs_skin_config.json",
10
+ "data": "bs_skin.npz"
11
+ },
12
+ "tongue": {
13
+ "config": "bs_tongue_config.json",
14
+ "data": "bs_tongue.npz"
15
+ }
16
+ }
17
+ }
model_config.json ADDED
@@ -0,0 +1,30 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "config": {
3
+ "input_strength": 1.3,
4
+ "upper_face_smoothing": 0.001,
5
+ "lower_face_smoothing": 0.0023,
6
+ "upper_face_strength": 1.0,
7
+ "lower_face_strength": 1.4,
8
+ "face_mask_level": 0.6,
9
+ "face_mask_softness": 0.0085,
10
+ "source_shot": "g2a_neutral",
11
+ "source_frame": 33,
12
+ "skin_strength": 1.1,
13
+ "blink_strength": 1.0,
14
+ "lower_teeth_strength": 1.3,
15
+ "lower_teeth_height_offset": -0.1,
16
+ "lower_teeth_depth_offset": 0.0,
17
+ "lip_open_offset": -0.03,
18
+ "tongue_strength": 1.5,
19
+ "tongue_height_offset": 0.2,
20
+ "tongue_depth_offset": 0.13,
21
+ "eyeballs_strength": 1.0,
22
+ "saccade_strength": 0.9,
23
+ "right_eye_rot_x_offset": 0.0,
24
+ "right_eye_rot_y_offset": -2.0,
25
+ "left_eye_rot_x_offset": 0.0,
26
+ "left_eye_rot_y_offset": 2.0,
27
+ "eyelid_open_offset": 0.06,
28
+ "eye_saccade_seed": 0
29
+ }
30
+ }
model_data.npz ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:03790f24942ec26796ce101c2e238eb7ff5c1bb94a6c14a840ffcd530d3a301e
3
+ size 203797682
network.onnx ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:dcd16d3b1affb090d4da1ba88791faa6bcd755f97c853b3b667abad9be15cb4b
3
+ size 75751144
network_info.json ADDED
@@ -0,0 +1,46 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "id": {
3
+ "type": "regression",
4
+ "actor": "mark",
5
+ "version": "2.3",
6
+ "output":"geometry"
7
+ },
8
+ "params": {
9
+ "implicit_emotion_len": 16,
10
+ "explicit_emotions": [
11
+ "amazement",
12
+ "anger",
13
+ "cheekiness",
14
+ "disgust",
15
+ "fear",
16
+ "grief",
17
+ "joy",
18
+ "outofbreath",
19
+ "pain",
20
+ "sadness"
21
+ ],
22
+ "default_emotion": [
23
+ 0.0,
24
+ 0.0,
25
+ 0.0,
26
+ 0.0,
27
+ 0.0,
28
+ 0.0,
29
+ 0.0,
30
+ 0.0,
31
+ 0.0,
32
+ 0.0
33
+ ],
34
+ "num_shapes_skin": 272,
35
+ "num_shapes_tongue": 10,
36
+ "num_verts_skin": 61520,
37
+ "num_verts_tongue": 5602,
38
+ "result_jaw_size": 15,
39
+ "result_eyes_size": 4
40
+ },
41
+ "audio_params": {
42
+ "buffer_len": 8320,
43
+ "buffer_ofs": 4160,
44
+ "samplerate": 16000
45
+ }
46
+ }
trt_info.json ADDED
@@ -0,0 +1,15 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "estimated_trt_builder_time": 150,
3
+ "trt_build_param": {
4
+ "cuda_in_graphics": ["--memPoolSize=tacticSharedMem:0.046875"],
5
+ "batch": [
6
+ "--minShapes=input:1x1x8320,emotion:1x1x26",
7
+ "--maxShapes=input:{MAX_BATCH_SIZE}x1x8320,emotion:{MAX_BATCH_SIZE}x1x26",
8
+ "--optShapes=input:{OPT_BATCH_SIZE}x1x8320,emotion:{OPT_BATCH_SIZE}x1x26"
9
+ ]
10
+ },
11
+ "defaults": {
12
+ "MAX_BATCH_SIZE": 128,
13
+ "OPT_BATCH_SIZE": 8
14
+ }
15
+ }