Netease Fuxi AI Lab және Мичиган университетінің зерттеушілері бір портретті талдау арқылы бет-әлпетті автоматты түрде жасай алатын MeInGame машиналық оқыту әдісін жасады
3D морфтелетін бет модельдері (3DMM) адамның профилін дәл көрсетуі үшін оларды кескіндер мен текстуралық деректердің үлкен деректер жиынтығы бойынша оқыту керек.
Бұл деректер жиынтығын құрастыру ұзақ уақыт алуы мүмкін. Сонымен қатар, мұндай жүйе жаңа деректер үнемі жүктеліп тұрған жағдайда ғана сенімді жұмыс істей алады. Бұл шектеуді жеңу үшін зерттеу авторлары Лин, Юань және Зоу жасалған фотосуреттердің орнына нақты адамдардың суреттерін пайдаланды.
Олар алдымен 3D морфтелетін бет моделін (3DMM) және конволюциялық нейрондық желілерді (CNN) пайдаланып бетті қалпына келтірді, содан кейін 3D бет пішінін шаблон торына ауыстырды. Алынған желі кіріс ретінде бет кескінін және оралмаған УК текстура картасын алады, содан кейін жарықтандыру коэффициенттерін болжайды.
Авторлар өздерінің терең оқыту техникасын ойын кейіпкерлерінің сапасын басқа жасалған модельдермен салыстыра отырып, бірқатар эксперименттерде сынап көрді.
