一种能将AR彩妆自然叠加在人脸上美妆滤镜可以模拟彩妆师化妆技巧

近期，Facebook旗下Instagram的科研人员发表了一篇关于AR美妆滤镜的论文，该论文描述了一种可为不同肤色人种实时渲染彩妆的智能手机滤镜，该滤镜可模拟彩妆师化妆技巧，将AR彩妆自然叠加在人脸上。

滤镜实际应用效果图

据了解，这款滤镜技术可精准模拟五种市面常见的化妆品质地：哑光、丝绒、釉面、亮片和金属光泽，同时它还支持均匀肤色的皮肤平滑技术和用于进一步融合纹理的色阶重建技术。

滤镜渲染流程图

该滤镜的原理是，通过手机摄像头实时追踪用户面部，为实时创建用户面部的网格模型，区分嘴唇、眼睛、脸颊等区域，然后使用GPU渲染，将光敏的化妆品滤镜加在用户面部，最后使用皮肤平滑和色阶重建来融合和合成自然的皮肤。

该滤镜在渲染妆容阴影时，将环境光遮蔽因素考虑在内，也就是说妆容的颜色也会因为光线变化而改变。反射颜色采用RGB，而阴影色彩来自于LAB色彩空间。

此外，该滤镜还支持对睫毛的渲染，利用具有节点和纹理的条状网格来实现，它还能够根据用户面部表情来进行调节。

经过测试，这款滤镜在2013年的Nexus 5上运行时，需要20毫秒;在2014年Galaxy S5上为14毫秒，2015年Pixel手机上需要16毫秒，而2017年Pixel 2上需要7毫秒。

这项滤镜技术可帮助彩妆师展示常用妆容，此外，为了让消费者试用市面上彩妆产品，这组科研人员还开发了一款免费平台。