【原创】三星官方科普，Galaxy S21系列如何利用AI改善人像照片

DominicHu

现在的智能手机大多致力于提升相机功能，尤其是那些高端旗舰手机。然而，与单反相机相比，智能手机上的相机存在着先天的差距，而为了缩小它们之间的差距，很多手机厂商的做法是借助AI算法来增强一些功能，比如现在常见的HDR、夜景模式以及人像模式等功能。而最近，三星就详细解释了发布没多久的Galaxy S21系列是如何利用AI来改善人像拍照的。

首先是优化了由前置摄像头拍摄的自拍照片，三星称“用户总是很难拍出满意的自拍，导致经常在拍完后就删除照片。但利用Galaxy S21系列的自拍相机，将可以始终通过AI呈现最佳状态，并提供了更自然的画面和细节的改进。”

其对于自拍的增强主要包括两个部分：首先是在拍摄照片时，由AI驱动的自拍相机首先识别图像中的面部信息，将其与场景中的其它细节分开，再将自然增强效果应用于拍摄主体。其次是自然增强效果包括了对拍摄主体的头发、眼睛和面部特征展现更多的细节，并自动调整白平衡以在任何环境下创建更自然的肤色。最终的结果是这些自拍照都可以即拍即享，不需要再手动编辑。此外，三星还提供了对第三方应用的支持，因此也可以利用自己喜欢的相机或社交媒体来进行自拍。

其次升级了人像模式。三星称“Galaxy S21系列不仅可以改善自拍效果，还可以让初学者轻松的捕捉各种人像照片，新的高级人像模式使用改进的3D感应功能，可以让照片更具深度和戏剧性。”

在使用人像模式时，Galaxy S21系列用户可以从各种特殊效果中进行选择以应用到最终图像，其中包括模糊、工作室、High-key Mono、Low-key Mono等，在点击快门后，集成的AI处理器便开始对拍摄主体的细节进行分割，抠图和优化，运作方式如下：

• AI立即识别场景中的拍摄主体，并生成即时分割图以分离每个个体；
• 基于分割图，将生成基于拍摄主体的种子图，你所选择的效果将应用于这个种子图上，如上图所示，种子图会将主体与背景分开；
• 然后，图像处理会在种子图的基础上添加一个三维图，以识别主体、背景以及它们混合在一起的区域；
• 接着将遮罩应用于三维图，以突出主体的头发和面部特征细节；
• 最后AI将测量深度信息，自动优化背景细节和景深效果。
  

而在分割的过程中，支持纵向模式的AI还能够识别用户是想捕获单个主体还是一群处于不同深度级别的主体。

最后是细节的优化。无论主体是人还是动物，AI都确保尽可能多地捕捉他们的细节。如上所述，在对图像进行分割后，种子图会生成一个三维图，其中黑色代表背景，白色代表主体，灰色代表图像中不确定的区域。

于是在图像处理过程中，当在“人像”模式下将背景模糊掉时，该贴图可以确保模糊处不会与主体重叠，然后生成一张遮罩图，以细化场景中未知区域（灰色）的细节，并提高图像的分辨率。在进行消光的同时，AI会使用种子图来细化主体部分的细节，然后将这些图像组合起来，并进行放大，以产生最终高分辨率的图像。值得一提的是，虽然这些看起来很复杂，但在手机上只需3秒就能完成。