Hugging Face's logo

nvidia
/
Audio2Face-3D-v3.0

ONNX
Model card Files
xet
Community
yseolnv commited on
Commit
fc9ba87
·
verified ·
1 Parent(s): e1337b2

Upload 22 files

Browse files
Files changed (22) hide show
  1. bs_skin_Claire.npz +3 -0
  2. bs_skin_James.npz +3 -0
  3. bs_skin_Mark.npz +3 -0
  4. bs_skin_config_Claire.json +280 -0
  5. bs_skin_config_James.json +280 -0
  6. bs_skin_config_Mark.json +280 -0
  7. bs_tongue_Claire.npz +3 -0
  8. bs_tongue_James.npz +3 -0
  9. bs_tongue_Mark.npz +3 -0
  10. bs_tongue_config_Claire.json +100 -0
  11. bs_tongue_config_James.json +100 -0
  12. bs_tongue_config_Mark.json +100 -0
  13. model.json +46 -0
  14. model_config_Claire.json +28 -0
  15. model_config_James.json +28 -0
  16. model_config_Mark.json +28 -0
  17. model_data_Claire.npz +3 -0
  18. model_data_James.npz +3 -0
  19. model_data_Mark.npz +3 -0
  20. network.onnx +3 -0
  21. network_info.json +55 -0
  22. trt_info.json +15 -0
bs_skin_Claire.npz ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:bcb1fde2c7384fe9ec3cf9932b0fdeeda01fe4a1e42bba3817bba14e7f1716d3
3
+ size 15297809
bs_skin_James.npz ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:da119b5291de9d7b711ccd34c99f5a9cec001f5d1e25083c294d3c02f642691c
3
+ size 15297809
bs_skin_Mark.npz ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:a13234c0fa07e5c3bea3b2f4ad1d5c17fcec5482285607a2c3cd79099ed81297
3
+ size 15297809
bs_skin_config_Claire.json ADDED
@@ -0,0 +1,280 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "blendshape_params": {
3
+ "strengthL2regularization": 0.1,
4
+ "strengthTemporalSmoothing": 0.15,
5
+ "strengthL1regularization": 0.1,
6
+ "strengthSymmetry": 100.0,
7
+ "numPoses": 52,
8
+ "bsSolveActivePoses": [
9
+ 1,
10
+ 0,
11
+ 0,
12
+ 0,
13
+ 0,
14
+ 1,
15
+ 1,
16
+ 1,
17
+ 0,
18
+ 0,
19
+ 0,
20
+ 0,
21
+ 1,
22
+ 1,
23
+ 1,
24
+ 0,
25
+ 0,
26
+ 1,
27
+ 1,
28
+ 1,
29
+ 1,
30
+ 0,
31
+ 0,
32
+ 1,
33
+ 1,
34
+ 1,
35
+ 1,
36
+ 1,
37
+ 1,
38
+ 1,
39
+ 1,
40
+ 1,
41
+ 1,
42
+ 1,
43
+ 1,
44
+ 1,
45
+ 1,
46
+ 1,
47
+ 1,
48
+ 1,
49
+ 1,
50
+ 1,
51
+ 1,
52
+ 1,
53
+ 1,
54
+ 1,
55
+ 1,
56
+ 1,
57
+ 1,
58
+ 1,
59
+ 1,
60
+ 0
61
+ ],
62
+ "bsSolveCancelPoses": [
63
+ -1,
64
+ -1,
65
+ -1,
66
+ -1,
67
+ -1,
68
+ -1,
69
+ -1,
70
+ -1,
71
+ -1,
72
+ -1,
73
+ -1,
74
+ -1,
75
+ -1,
76
+ -1,
77
+ -1,
78
+ -1,
79
+ -1,
80
+ -1,
81
+ -1,
82
+ -1,
83
+ -1,
84
+ -1,
85
+ -1,
86
+ -1,
87
+ -1,
88
+ -1,
89
+ -1,
90
+ -1,
91
+ -1,
92
+ -1,
93
+ -1,
94
+ -1,
95
+ -1,
96
+ -1,
97
+ -1,
98
+ -1,
99
+ -1,
100
+ -1,
101
+ -1,
102
+ -1,
103
+ -1,
104
+ -1,
105
+ -1,
106
+ -1,
107
+ -1,
108
+ -1,
109
+ -1,
110
+ -1,
111
+ -1,
112
+ -1,
113
+ -1,
114
+ -1
115
+ ],
116
+ "bsSolveSymmetryPoses": [
117
+ 0,
118
+ -1,
119
+ -1,
120
+ -1,
121
+ -1,
122
+ -1,
123
+ 1,
124
+ 0,
125
+ -1,
126
+ -1,
127
+ -1,
128
+ -1,
129
+ -1,
130
+ 1,
131
+ -1,
132
+ -1,
133
+ -1,
134
+ -1,
135
+ -1,
136
+ -1,
137
+ -1,
138
+ -1,
139
+ -1,
140
+ 2,
141
+ 2,
142
+ 3,
143
+ 3,
144
+ 4,
145
+ 4,
146
+ 5,
147
+ 5,
148
+ -1,
149
+ -1,
150
+ -1,
151
+ -1,
152
+ 6,
153
+ 6,
154
+ 7,
155
+ 7,
156
+ 8,
157
+ 8,
158
+ 10,
159
+ 10,
160
+ -1,
161
+ 9,
162
+ 9,
163
+ -1,
164
+ 11,
165
+ 11,
166
+ 12,
167
+ 12,
168
+ -1
169
+ ],
170
+ "bsWeightMultipliers": [
171
+ 1.0,
172
+ 1.0,
173
+ 1.0,
174
+ 1.0,
175
+ 1.0,
176
+ 1.0,
177
+ 1.0,
178
+ 1.0,
179
+ 1.0,
180
+ 1.0,
181
+ 1.0,
182
+ 1.0,
183
+ 1.0,
184
+ 1.0,
185
+ 1.0,
186
+ 1.0,
187
+ 1.0,
188
+ 1.0,
189
+ 1.0,
190
+ 1.0,
191
+ 1.0,
192
+ 1.0,
193
+ 1.0,
194
+ 1.0,
195
+ 1.0,
196
+ 1.0,
197
+ 1.0,
198
+ 1.0,
199
+ 1.0,
200
+ 1.0,
201
+ 1.0,
202
+ 1.0,
203
+ 1.0,
204
+ 1.0,
205
+ 1.0,
206
+ 1.0,
207
+ 1.0,
208
+ 1.0,
209
+ 1.0,
210
+ 1.0,
211
+ 1.0,
212
+ 1.0,
213
+ 1.0,
214
+ 1.0,
215
+ 1.0,
216
+ 1.0,
217
+ 1.0,
218
+ 1.0,
219
+ 1.0,
220
+ 1.0,
221
+ 1.0,
222
+ 1.0
223
+ ],
224
+ "bsWeightOffsets": [
225
+ 0.0,
226
+ 0.0,
227
+ 0.0,
228
+ 0.0,
229
+ 0.0,
230
+ 0.0,
231
+ 0.0,
232
+ 0.0,
233
+ 0.0,
234
+ 0.0,
235
+ 0.0,
236
+ 0.0,
237
+ 0.0,
238
+ 0.0,
239
+ 0.0,
240
+ 0.0,
241
+ 0.0,
242
+ 0.0,
243
+ 0.0,
244
+ 0.0,
245
+ 0.0,
246
+ 0.0,
247
+ 0.0,
248
+ 0.0,
249
+ 0.0,
250
+ 0.0,
251
+ 0.0,
252
+ 0.0,
253
+ 0.0,
254
+ 0.0,
255
+ 0.0,
256
+ 0.0,
257
+ 0.0,
258
+ 0.0,
259
+ 0.0,
260
+ 0.0,
261
+ 0.0,
262
+ 0.0,
263
+ 0.0,
264
+ 0.0,
265
+ 0.0,
266
+ 0.0,
267
+ 0.0,
268
+ 0.0,
269
+ 0.0,
270
+ 0.0,
271
+ 0.0,
272
+ 0.0,
273
+ 0.0,
274
+ 0.0,
275
+ 0.0,
276
+ 0.0
277
+ ],
278
+ "templateBBSize": 45.94270354273603
279
+ }
280
+ }
bs_skin_config_James.json ADDED
@@ -0,0 +1,280 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "blendshape_params": {
3
+ "strengthL2regularization": 0.1,
4
+ "strengthTemporalSmoothing": 0.05,
5
+ "strengthL1regularization": 0.1,
6
+ "strengthSymmetry": 100.0,
7
+ "numPoses": 52,
8
+ "bsSolveActivePoses": [
9
+ 1,
10
+ 0,
11
+ 0,
12
+ 0,
13
+ 0,
14
+ 1,
15
+ 1,
16
+ 1,
17
+ 0,
18
+ 0,
19
+ 0,
20
+ 0,
21
+ 1,
22
+ 1,
23
+ 1,
24
+ 0,
25
+ 0,
26
+ 1,
27
+ 1,
28
+ 1,
29
+ 1,
30
+ 0,
31
+ 0,
32
+ 1,
33
+ 1,
34
+ 1,
35
+ 1,
36
+ 1,
37
+ 1,
38
+ 1,
39
+ 1,
40
+ 1,
41
+ 1,
42
+ 1,
43
+ 1,
44
+ 1,
45
+ 1,
46
+ 1,
47
+ 1,
48
+ 1,
49
+ 1,
50
+ 1,
51
+ 1,
52
+ 1,
53
+ 1,
54
+ 1,
55
+ 1,
56
+ 1,
57
+ 1,
58
+ 1,
59
+ 1,
60
+ 0
61
+ ],
62
+ "bsSolveCancelPoses": [
63
+ -1,
64
+ -1,
65
+ -1,
66
+ -1,
67
+ -1,
68
+ -1,
69
+ -1,
70
+ -1,
71
+ -1,
72
+ -1,
73
+ -1,
74
+ -1,
75
+ -1,
76
+ -1,
77
+ -1,
78
+ -1,
79
+ -1,
80
+ -1,
81
+ -1,
82
+ -1,
83
+ -1,
84
+ -1,
85
+ -1,
86
+ -1,
87
+ -1,
88
+ -1,
89
+ -1,
90
+ -1,
91
+ -1,
92
+ -1,
93
+ -1,
94
+ -1,
95
+ -1,
96
+ -1,
97
+ -1,
98
+ -1,
99
+ -1,
100
+ -1,
101
+ -1,
102
+ -1,
103
+ -1,
104
+ -1,
105
+ -1,
106
+ -1,
107
+ -1,
108
+ -1,
109
+ -1,
110
+ -1,
111
+ -1,
112
+ -1,
113
+ -1,
114
+ -1
115
+ ],
116
+ "bsSolveSymmetryPoses": [
117
+ 0,
118
+ -1,
119
+ -1,
120
+ -1,
121
+ -1,
122
+ -1,
123
+ 1,
124
+ 0,
125
+ -1,
126
+ -1,
127
+ -1,
128
+ -1,
129
+ -1,
130
+ 1,
131
+ -1,
132
+ -1,
133
+ -1,
134
+ -1,
135
+ -1,
136
+ -1,
137
+ -1,
138
+ -1,
139
+ -1,
140
+ 2,
141
+ 2,
142
+ 3,
143
+ 3,
144
+ 4,
145
+ 4,
146
+ 5,
147
+ 5,
148
+ -1,
149
+ -1,
150
+ -1,
151
+ -1,
152
+ 6,
153
+ 6,
154
+ 7,
155
+ 7,
156
+ 8,
157
+ 8,
158
+ 10,
159
+ 10,
160
+ -1,
161
+ 9,
162
+ 9,
163
+ -1,
164
+ 11,
165
+ 11,
166
+ 12,
167
+ 12,
168
+ -1
169
+ ],
170
+ "bsWeightMultipliers": [
171
+ 1.0,
172
+ 1.0,
173
+ 1.0,
174
+ 1.0,
175
+ 1.0,
176
+ 1.0,
177
+ 1.0,
178
+ 1.0,
179
+ 1.0,
180
+ 1.0,
181
+ 1.0,
182
+ 1.0,
183
+ 1.0,
184
+ 1.0,
185
+ 1.0,
186
+ 1.0,
187
+ 1.0,
188
+ 1.0,
189
+ 1.0,
190
+ 1.0,
191
+ 1.0,
192
+ 1.0,
193
+ 1.0,
194
+ 1.0,
195
+ 1.0,
196
+ 1.0,
197
+ 1.0,
198
+ 1.0,
199
+ 1.0,
200
+ 1.0,
201
+ 1.0,
202
+ 1.0,
203
+ 1.0,
204
+ 1.0,
205
+ 1.0,
206
+ 1.0,
207
+ 1.0,
208
+ 1.0,
209
+ 1.0,
210
+ 1.0,
211
+ 1.0,
212
+ 1.0,
213
+ 1.0,
214
+ 1.0,
215
+ 1.0,
216
+ 1.0,
217
+ 1.0,
218
+ 1.0,
219
+ 1.0,
220
+ 1.0,
221
+ 1.0,
222
+ 1.0
223
+ ],
224
+ "bsWeightOffsets": [
225
+ 0.0,
226
+ 0.0,
227
+ 0.0,
228
+ 0.0,
229
+ 0.0,
230
+ 0.0,
231
+ 0.0,
232
+ 0.0,
233
+ 0.0,
234
+ 0.0,
235
+ 0.0,
236
+ 0.0,
237
+ 0.0,
238
+ 0.0,
239
+ 0.0,
240
+ 0.0,
241
+ 0.0,
242
+ 0.0,
243
+ 0.0,
244
+ 0.0,
245
+ 0.0,
246
+ 0.0,
247
+ 0.0,
248
+ 0.0,
249
+ 0.0,
250
+ 0.0,
251
+ 0.0,
252
+ 0.0,
253
+ 0.0,
254
+ 0.0,
255
+ 0.0,
256
+ 0.0,
257
+ 0.0,
258
+ 0.0,
259
+ 0.0,
260
+ 0.0,
261
+ 0.0,
262
+ 0.0,
263
+ 0.0,
264
+ 0.0,
265
+ 0.0,
266
+ 0.0,
267
+ 0.0,
268
+ 0.0,
269
+ 0.0,
270
+ 0.0,
271
+ 0.0,
272
+ 0.0,
273
+ 0.0,
274
+ 0.0,
275
+ 0.0,
276
+ 0.0
277
+ ],
278
+ "templateBBSize": 54.84744857247202
279
+ }
280
+ }
bs_skin_config_Mark.json ADDED
@@ -0,0 +1,280 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "blendshape_params": {
3
+ "strengthL2regularization": 0.1,
4
+ "strengthTemporalSmoothing": 0.05,
5
+ "strengthL1regularization": 0.1,
6
+ "strengthSymmetry": 100.0,
7
+ "numPoses": 52,
8
+ "bsSolveActivePoses": [
9
+ 1,
10
+ 0,
11
+ 0,
12
+ 0,
13
+ 0,
14
+ 1,
15
+ 1,
16
+ 1,
17
+ 0,
18
+ 0,
19
+ 0,
20
+ 0,
21
+ 1,
22
+ 1,
23
+ 1,
24
+ 0,
25
+ 0,
26
+ 1,
27
+ 1,
28
+ 1,
29
+ 1,
30
+ 0,
31
+ 0,
32
+ 1,
33
+ 1,
34
+ 1,
35
+ 1,
36
+ 1,
37
+ 1,
38
+ 1,
39
+ 1,
40
+ 1,
41
+ 1,
42
+ 1,
43
+ 1,
44
+ 1,
45
+ 1,
46
+ 1,
47
+ 1,
48
+ 1,
49
+ 1,
50
+ 1,
51
+ 1,
52
+ 1,
53
+ 1,
54
+ 1,
55
+ 1,
56
+ 1,
57
+ 1,
58
+ 1,
59
+ 1,
60
+ 0
61
+ ],
62
+ "bsSolveCancelPoses": [
63
+ -1,
64
+ -1,
65
+ -1,
66
+ -1,
67
+ -1,
68
+ -1,
69
+ -1,
70
+ -1,
71
+ -1,
72
+ -1,
73
+ -1,
74
+ -1,
75
+ -1,
76
+ -1,
77
+ -1,
78
+ -1,
79
+ -1,
80
+ -1,
81
+ -1,
82
+ -1,
83
+ -1,
84
+ -1,
85
+ -1,
86
+ -1,
87
+ -1,
88
+ -1,
89
+ -1,
90
+ -1,
91
+ -1,
92
+ -1,
93
+ -1,
94
+ -1,
95
+ -1,
96
+ -1,
97
+ -1,
98
+ -1,
99
+ -1,
100
+ -1,
101
+ -1,
102
+ -1,
103
+ -1,
104
+ -1,
105
+ -1,
106
+ -1,
107
+ -1,
108
+ -1,
109
+ -1,
110
+ -1,
111
+ -1,
112
+ -1,
113
+ -1,
114
+ -1
115
+ ],
116
+ "bsSolveSymmetryPoses": [
117
+ 0,
118
+ -1,
119
+ -1,
120
+ -1,
121
+ -1,
122
+ -1,
123
+ 1,
124
+ 0,
125
+ -1,
126
+ -1,
127
+ -1,
128
+ -1,
129
+ -1,
130
+ 1,
131
+ -1,
132
+ -1,
133
+ -1,
134
+ -1,
135
+ -1,
136
+ -1,
137
+ -1,
138
+ -1,
139
+ -1,
140
+ 2,
141
+ 2,
142
+ 3,
143
+ 3,
144
+ 4,
145
+ 4,
146
+ 5,
147
+ 5,
148
+ -1,
149
+ -1,
150
+ -1,
151
+ -1,
152
+ 6,
153
+ 6,
154
+ 7,
155
+ 7,
156
+ 8,
157
+ 8,
158
+ 10,
159
+ 10,
160
+ -1,
161
+ 9,
162
+ 9,
163
+ -1,
164
+ 11,
165
+ 11,
166
+ 12,
167
+ 12,
168
+ -1
169
+ ],
170
+ "bsWeightMultipliers": [
171
+ 1.0,
172
+ 1.0,
173
+ 1.0,
174
+ 1.0,
175
+ 1.0,
176
+ 1.0,
177
+ 1.0,
178
+ 1.0,
179
+ 1.0,
180
+ 1.0,
181
+ 1.0,
182
+ 1.0,
183
+ 1.0,
184
+ 1.0,
185
+ 1.0,
186
+ 1.0,
187
+ 1.0,
188
+ 1.0,
189
+ 1.0,
190
+ 1.0,
191
+ 1.0,
192
+ 1.0,
193
+ 1.0,
194
+ 1.0,
195
+ 1.0,
196
+ 1.0,
197
+ 1.0,
198
+ 1.0,
199
+ 1.0,
200
+ 1.0,
201
+ 1.0,
202
+ 1.0,
203
+ 1.0,
204
+ 1.0,
205
+ 1.0,
206
+ 1.0,
207
+ 1.0,
208
+ 1.0,
209
+ 1.0,
210
+ 1.0,
211
+ 1.0,
212
+ 1.0,
213
+ 1.0,
214
+ 1.0,
215
+ 1.0,
216
+ 1.0,
217
+ 1.0,
218
+ 1.0,
219
+ 1.0,
220
+ 1.0,
221
+ 1.0,
222
+ 1.0
223
+ ],
224
+ "bsWeightOffsets": [
225
+ 0.0,
226
+ 0.0,
227
+ 0.0,
228
+ 0.0,
229
+ 0.0,
230
+ 0.0,
231
+ 0.0,
232
+ 0.0,
233
+ 0.0,
234
+ 0.0,
235
+ 0.0,
236
+ 0.0,
237
+ 0.0,
238
+ 0.0,
239
+ 0.0,
240
+ 0.0,
241
+ 0.0,
242
+ 0.0,
243
+ 0.0,
244
+ 0.0,
245
+ 0.0,
246
+ 0.0,
247
+ 0.0,
248
+ 0.0,
249
+ 0.0,
250
+ 0.0,
251
+ 0.0,
252
+ 0.0,
253
+ 0.0,
254
+ 0.0,
255
+ 0.0,
256
+ 0.0,
257
+ 0.0,
258
+ 0.0,
259
+ 0.0,
260
+ 0.0,
261
+ 0.0,
262
+ 0.0,
263
+ 0.0,
264
+ 0.0,
265
+ 0.0,
266
+ 0.0,
267
+ 0.0,
268
+ 0.0,
269
+ 0.0,
270
+ 0.0,
271
+ 0.0,
272
+ 0.0,
273
+ 0.0,
274
+ 0.0,
275
+ 0.0,
276
+ 0.0
277
+ ],
278
+ "templateBBSize": 53.45050282121686
279
+ }
280
+ }
bs_tongue_Claire.npz ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:812f10c34edb6ab6f36aedfe1d59a79d8190a5a8ee0a6071382f6bae9e3413b6
3
+ size 1147927
bs_tongue_James.npz ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:831c9d646174d84f628d5516694e00b5077cd5b2bc1dd964d817fabe68497bcc
3
+ size 1147927
bs_tongue_Mark.npz ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:3dfd5dcdeca813df9574536750cf6d2382ec3167482f0b883e1b1eebf84fc022
3
+ size 1147927
bs_tongue_config_Claire.json ADDED
@@ -0,0 +1,100 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "blendshape_params": {
3
+ "strengthL2regularization": 3.5,
4
+ "strengthTemporalSmoothing": 5.0,
5
+ "strengthL1regularization": 1.0,
6
+ "strengthSymmetry": 100.0,
7
+ "numPoses": 16,
8
+ "bsSolveActivePoses": [
9
+ 1,
10
+ 1,
11
+ 1,
12
+ 1,
13
+ 1,
14
+ 1,
15
+ 1,
16
+ 1,
17
+ 1,
18
+ 1,
19
+ 1,
20
+ 1,
21
+ 1,
22
+ 1,
23
+ 1,
24
+ 1
25
+ ],
26
+ "bsSolveCancelPoses": [
27
+ -1,
28
+ -1,
29
+ -1,
30
+ -1,
31
+ -1,
32
+ -1,
33
+ -1,
34
+ -1,
35
+ -1,
36
+ -1,
37
+ -1,
38
+ -1,
39
+ -1,
40
+ -1,
41
+ -1,
42
+ -1
43
+ ],
44
+ "bsSolveSymmetryPoses": [
45
+ -1,
46
+ -1,
47
+ -1,
48
+ -1,
49
+ -1,
50
+ -1,
51
+ -1,
52
+ -1,
53
+ -1,
54
+ -1,
55
+ -1,
56
+ -1,
57
+ -1,
58
+ -1,
59
+ -1,
60
+ -1
61
+ ],
62
+ "bsWeightMultipliers": [
63
+ 2.0,
64
+ 1.0,
65
+ 1.0,
66
+ 1.0,
67
+ 3.0,
68
+ 1.0,
69
+ 1.0,
70
+ 1.0,
71
+ 2.0,
72
+ 1.0,
73
+ 1.0,
74
+ 1.0,
75
+ 1.0,
76
+ 2.0,
77
+ 1.0,
78
+ 1.0
79
+ ],
80
+ "bsWeightOffsets": [
81
+ 0.0,
82
+ 0.0,
83
+ 0.0,
84
+ 0.0,
85
+ 0.0,
86
+ 0.0,
87
+ 0.0,
88
+ 0.0,
89
+ 0.0,
90
+ 0.2,
91
+ 0.0,
92
+ 0.0,
93
+ 0.0,
94
+ 0.0,
95
+ 0.0,
96
+ 0.0
97
+ ],
98
+ "templateBBSize": 7.4916537004979755
99
+ }
100
+ }
bs_tongue_config_James.json ADDED
@@ -0,0 +1,100 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "blendshape_params": {
3
+ "strengthL2regularization": 3.5,
4
+ "strengthTemporalSmoothing": 5.0,
5
+ "strengthL1regularization": 1.0,
6
+ "strengthSymmetry": 100.0,
7
+ "numPoses": 16,
8
+ "bsSolveActivePoses": [
9
+ 1,
10
+ 1,
11
+ 1,
12
+ 1,
13
+ 1,
14
+ 1,
15
+ 1,
16
+ 1,
17
+ 1,
18
+ 1,
19
+ 1,
20
+ 1,
21
+ 1,
22
+ 1,
23
+ 1,
24
+ 1
25
+ ],
26
+ "bsSolveCancelPoses": [
27
+ -1,
28
+ -1,
29
+ -1,
30
+ -1,
31
+ -1,
32
+ -1,
33
+ -1,
34
+ -1,
35
+ -1,
36
+ -1,
37
+ -1,
38
+ -1,
39
+ -1,
40
+ -1,
41
+ -1,
42
+ -1
43
+ ],
44
+ "bsSolveSymmetryPoses": [
45
+ -1,
46
+ -1,
47
+ -1,
48
+ -1,
49
+ -1,
50
+ -1,
51
+ -1,
52
+ -1,
53
+ -1,
54
+ -1,
55
+ -1,
56
+ -1,
57
+ -1,
58
+ -1,
59
+ -1,
60
+ -1
61
+ ],
62
+ "bsWeightMultipliers": [
63
+ 2.0,
64
+ 1.0,
65
+ 1.0,
66
+ 1.0,
67
+ 3.0,
68
+ 1.0,
69
+ 1.0,
70
+ 1.0,
71
+ 2.0,
72
+ 1.0,
73
+ 1.0,
74
+ 1.0,
75
+ 1.0,
76
+ 2.0,
77
+ 1.0,
78
+ 1.0
79
+ ],
80
+ "bsWeightOffsets": [
81
+ 0.0,
82
+ 0.0,
83
+ 0.0,
84
+ 0.0,
85
+ 0.0,
86
+ 0.0,
87
+ 0.0,
88
+ 0.0,
89
+ 0.0,
90
+ 0.2,
91
+ 0.0,
92
+ 0.0,
93
+ 0.0,
94
+ 0.0,
95
+ 0.0,
96
+ 0.0
97
+ ],
98
+ "templateBBSize": 8.316031577996926
99
+ }
100
+ }
bs_tongue_config_Mark.json ADDED
@@ -0,0 +1,100 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "blendshape_params": {
3
+ "strengthL2regularization": 3.5,
4
+ "strengthTemporalSmoothing": 5.0,
5
+ "strengthL1regularization": 1.0,
6
+ "strengthSymmetry": 100.0,
7
+ "numPoses": 16,
8
+ "bsSolveActivePoses": [
9
+ 1,
10
+ 1,
11
+ 1,
12
+ 1,
13
+ 1,
14
+ 1,
15
+ 1,
16
+ 1,
17
+ 1,
18
+ 1,
19
+ 1,
20
+ 1,
21
+ 1,
22
+ 1,
23
+ 1,
24
+ 1
25
+ ],
26
+ "bsSolveCancelPoses": [
27
+ -1,
28
+ -1,
29
+ -1,
30
+ -1,
31
+ -1,
32
+ -1,
33
+ -1,
34
+ -1,
35
+ -1,
36
+ -1,
37
+ -1,
38
+ -1,
39
+ -1,
40
+ -1,
41
+ -1,
42
+ -1
43
+ ],
44
+ "bsSolveSymmetryPoses": [
45
+ -1,
46
+ -1,
47
+ -1,
48
+ -1,
49
+ -1,
50
+ -1,
51
+ -1,
52
+ -1,
53
+ -1,
54
+ -1,
55
+ -1,
56
+ -1,
57
+ -1,
58
+ -1,
59
+ -1,
60
+ -1
61
+ ],
62
+ "bsWeightMultipliers": [
63
+ 2.0,
64
+ 1.0,
65
+ 1.0,
66
+ 1.0,
67
+ 3.0,
68
+ 1.0,
69
+ 1.0,
70
+ 1.0,
71
+ 2.0,
72
+ 1.0,
73
+ 1.0,
74
+ 1.0,
75
+ 1.0,
76
+ 2.0,
77
+ 1.0,
78
+ 1.0
79
+ ],
80
+ "bsWeightOffsets": [
81
+ 0.0,
82
+ 0.0,
83
+ 0.0,
84
+ 0.0,
85
+ 0.0,
86
+ 0.0,
87
+ 0.0,
88
+ 0.0,
89
+ 0.0,
90
+ 0.2,
91
+ 0.0,
92
+ 0.0,
93
+ 0.0,
94
+ 0.0,
95
+ 0.0,
96
+ 0.0
97
+ ],
98
+ "templateBBSize": 7.935866586456822
99
+ }
100
+ }
model.json ADDED
@@ -0,0 +1,46 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "networkInfoPath": "network_info.json",
3
+ "networkPath": "network.trt",
4
+ "modelConfigPaths": [
5
+ "model_config_Claire.json",
6
+ "model_config_James.json",
7
+ "model_config_Mark.json"
8
+ ],
9
+ "modelDataPaths": [
10
+ "model_data_Claire.npz",
11
+ "model_data_James.npz",
12
+ "model_data_Mark.npz"
13
+ ],
14
+ "blendshapePaths": [
15
+ {
16
+ "skin": {
17
+ "config": "bs_skin_config_Claire.json",
18
+ "data": "bs_skin_Claire.npz"
19
+ },
20
+ "tongue": {
21
+ "config": "bs_tongue_config_Claire.json",
22
+ "data": "bs_tongue_Claire.npz"
23
+ }
24
+ },
25
+ {
26
+ "skin": {
27
+ "config": "bs_skin_config_James.json",
28
+ "data": "bs_skin_James.npz"
29
+ },
30
+ "tongue": {
31
+ "config": "bs_tongue_config_James.json",
32
+ "data": "bs_tongue_James.npz"
33
+ }
34
+ },
35
+ {
36
+ "skin": {
37
+ "config": "bs_skin_config_Mark.json",
38
+ "data": "bs_skin_Mark.npz"
39
+ },
40
+ "tongue": {
41
+ "config": "bs_tongue_config_Mark.json",
42
+ "data": "bs_tongue_Mark.npz"
43
+ }
44
+ }
45
+ ]
46
+ }
model_config_Claire.json ADDED
@@ -0,0 +1,28 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "config": {
3
+ "input_strength": 1.0,
4
+ "upper_face_smoothing": 0.001,
5
+ "lower_face_smoothing": 0.006,
6
+ "upper_face_strength": 1.0,
7
+ "lower_face_strength": 1.0,
8
+ "face_mask_level": 0.6,
9
+ "face_mask_softness": 0.0085,
10
+ "skin_strength": 1.0,
11
+ "blink_strength": 1.0,
12
+ "lower_teeth_strength": 1.0,
13
+ "lower_teeth_height_offset": 0.0,
14
+ "lower_teeth_depth_offset": 0.0,
15
+ "lip_open_offset": 0.0,
16
+ "tongue_strength": 1.3,
17
+ "tongue_height_offset": 0.0,
18
+ "tongue_depth_offset": 0.0,
19
+ "eyeballs_strength": 1.0,
20
+ "saccade_strength": 0.6,
21
+ "right_eye_rot_x_offset": 0.0,
22
+ "right_eye_rot_y_offset": 0.0,
23
+ "left_eye_rot_x_offset": 0.0,
24
+ "left_eye_rot_y_offset": 0.0,
25
+ "eyelid_open_offset": 0.0,
26
+ "eye_saccade_seed": 0
27
+ }
28
+ }
model_config_James.json ADDED
@@ -0,0 +1,28 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "config": {
3
+ "input_strength": 1.0,
4
+ "upper_face_smoothing": 0.001,
5
+ "lower_face_smoothing": 0.006,
6
+ "upper_face_strength": 1.0,
7
+ "lower_face_strength": 1.0,
8
+ "face_mask_level": 0.6,
9
+ "face_mask_softness": 0.0085,
10
+ "skin_strength": 1.0,
11
+ "blink_strength": 1.0,
12
+ "lower_teeth_strength": 1.0,
13
+ "lower_teeth_height_offset": 0.0,
14
+ "lower_teeth_depth_offset": 0.0,
15
+ "lip_open_offset": -0.02,
16
+ "tongue_strength": 1.3,
17
+ "tongue_height_offset": 0.0,
18
+ "tongue_depth_offset": 0.0,
19
+ "eyeballs_strength": 1.0,
20
+ "saccade_strength": 0.9,
21
+ "right_eye_rot_x_offset": 0.0,
22
+ "right_eye_rot_y_offset": 0.0,
23
+ "left_eye_rot_x_offset": 0.0,
24
+ "left_eye_rot_y_offset": 0.0,
25
+ "eyelid_open_offset": 0.0,
26
+ "eye_saccade_seed": 0
27
+ }
28
+ }
model_config_Mark.json ADDED
@@ -0,0 +1,28 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "config": {
3
+ "input_strength": 1.0,
4
+ "upper_face_smoothing": 0.001,
5
+ "lower_face_smoothing": 0.0023,
6
+ "upper_face_strength": 1.0,
7
+ "lower_face_strength": 1.0,
8
+ "face_mask_level": 0.6,
9
+ "face_mask_softness": 0.0085,
10
+ "skin_strength": 1.0,
11
+ "blink_strength": 1.0,
12
+ "lower_teeth_strength": 1.0,
13
+ "lower_teeth_height_offset": 0.0,
14
+ "lower_teeth_depth_offset": 0.0,
15
+ "lip_open_offset": 0.0,
16
+ "tongue_strength": 1.5,
17
+ "tongue_height_offset": 0.2,
18
+ "tongue_depth_offset": 0.13,
19
+ "eyeballs_strength": 1.0,
20
+ "saccade_strength": 0.9,
21
+ "right_eye_rot_x_offset": 0.0,
22
+ "right_eye_rot_y_offset": -2.0,
23
+ "left_eye_rot_x_offset": 0.0,
24
+ "left_eye_rot_y_offset": 2.0,
25
+ "eyelid_open_offset": 0.06,
26
+ "eye_saccade_seed": 0
27
+ }
28
+ }
model_data_Claire.npz ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:4f05331263fa609321335e55c20922f4d6709d33160d368c3b537f019429ea4f
3
+ size 972958
model_data_James.npz ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:23f653f88fceddda3ae137a7c2199a59ed36822f7f9681234eaad38ba7d753f3
3
+ size 972958
model_data_Mark.npz ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:8843a3a6599b263fd368ff445f4c7a9f9b4454f739271560004d1589693886cf
3
+ size 972958
network.onnx ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:db47c2701ca849de443c9e9f25657210f829a74fc458ee6fed603a8a501253a8
3
+ size 724844664
network_info.json ADDED
@@ -0,0 +1,55 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "id": {
3
+ "type": "diffusion",
4
+ "actor": "multi",
5
+ "version": "3.2",
6
+ "output": "geometry"
7
+ },
8
+ "params": {
9
+ "emotions": [
10
+ "amazement",
11
+ "anger",
12
+ "cheekiness",
13
+ "disgust",
14
+ "fear",
15
+ "grief",
16
+ "joy",
17
+ "outofbreath",
18
+ "pain",
19
+ "sadness"
20
+ ],
21
+ "default_emotion": [
22
+ 0.0,
23
+ 0.0,
24
+ 0.0,
25
+ 0.0,
26
+ 0.0,
27
+ 0.0,
28
+ 0.0,
29
+ 0.0,
30
+ 0.0,
31
+ 0.0
32
+ ],
33
+ "identities": [
34
+ "Claire",
35
+ "James",
36
+ "Mark"
37
+ ],
38
+ "skin_size": 72006,
39
+ "tongue_size": 16806,
40
+ "jaw_size": 15,
41
+ "eyes_size": 4,
42
+ "num_diffusion_steps": 2,
43
+ "num_gru_layers": 2,
44
+ "gru_latent_dim": 256,
45
+ "num_frames_left_truncate": 15,
46
+ "num_frames_right_truncate": 15,
47
+ "num_frames_center": 30
48
+ },
49
+ "audio_params": {
50
+ "buffer_len": 16000,
51
+ "padding_left": 16000,
52
+ "padding_right": 16000,
53
+ "samplerate": 16000
54
+ }
55
+ }
trt_info.json ADDED
@@ -0,0 +1,15 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "estimated_trt_builder_time": 150,
3
+ "trt_build_param": {
4
+ "cuda_in_graphics": ["--memPoolSize=tacticSharedMem:0.046875"],
5
+ "batch": [
6
+ "--minShapes=window:1x16000,identity:1x3,emotion:1x30x10,input_latents:2x2x1x256,noise:1x3x60x88831",
7
+ "--maxShapes=window:{MAX_BATCH_SIZE}x16000,identity:{MAX_BATCH_SIZE}x3,emotion:{MAX_BATCH_SIZE}x30x10,input_latents:2x2x{MAX_BATCH_SIZE}x256,noise:{MAX_BATCH_SIZE}x3x60x88831",
8
+ "--optShapes=window:{OPT_BATCH_SIZE}x16000,identity:{OPT_BATCH_SIZE}x3,emotion:{OPT_BATCH_SIZE}x30x10,input_latents:2x2x{OPT_BATCH_SIZE}x256,noise:{OPT_BATCH_SIZE}x3x60x88831"
9
+ ]
10
+ },
11
+ "defaults": {
12
+ "MAX_BATCH_SIZE": 8,
13
+ "OPT_BATCH_SIZE": 3
14
+ }
15
+ }