Nvidia-ի նոր գործիքը ձայնի հիման վրա անիմացնում 3D մոդելի դեմքի շարժումները

125
Nvidia-ի նեյրոնային ցանցով աշխատող նոր գործիքը կարողանում է անիմացնել 3D մոդելի դեմքը, օգտագործելով միայն տրված ձայնը: Audio2Face տեխնոլոգիան աշխատում է Nvidia Omniverse բաց պլատֆորմի վրա:

Նեյրոնային ցանցը կարողանում է ձայնի հիման վրա գեներացնել դեմքի ու շուրթերի շարժումները իրական ժամանակում:

Պետք է ընդամենը վերբեռնել ձայնային ֆայլը կամ խոսել միկրոֆոնով: Հետաքրքիրն այն է, որ նույն անիմացիան հնարավոր է տեղադրել տարբեր մոդելների վրա:

Audio2Face-ը թույլ է տալիս նաև կառավարել դեմքի էմոցիաները: Ծրագիրը ընտրված էմոցիայի հիման վրա ավտոմատ գեներացնում է դեմքի, աչքերի, բերանի, լեզվի և գլխի շարժումները:

Ծրագրի բետա տարբերակը հասանելի է Nvidia կայքում: Տվյալ պահին հասանելի են 4 լեզուներ (անգլերն, ռուսերեն, ֆրանսերեն և իտալերեն): Հետագայում նախատեսվում է ավելացնել այլ լեզուներ:

www.nvidia.com

Աղբյուրը