Zijian Zhao (赵子健, Aric)

Aric.Zhao@outlook.com

I am a Research Engineer in the field of Computer Vision and Machine Learning working at Institute of Computing Technology, Chinese Academy of Science.


人脸检测

人脸检测

人脸检测是计算机视觉领域的一项重要技术,它旨在自动检测和识别图像或视频中的人脸。通过分析图像中的像素信息和模式,人脸检测算法可以确定图像中是否存在人脸,并标记出其位置和边界框。

人脸检测技术在各种应用领域中发挥着重要作用,如人脸识别、人脸表情分析、人脸跟踪等。它被广泛应用于安全监控、人机交互、社交媒体过滤、人脸美化等领域。

下面介绍了本人在不同的应用场景下的人脸检测项目案例,每个案例均有其独特的难点与创新性。这些算法通过大量的训练数据和复杂的网络结构,能够实现高准确率和实时性的人脸检测。

多尺度人脸检测/小脸检测

多尺度人脸检测和小尺寸人脸检测都是人脸检测领域中的挑战性问题,检测的人脸尺度范围从几个像素到几千像素,具有多方面的应用。

  1. 应用:
    • 安全监控:在监控系统中,多尺度和小尺寸人脸检测可以帮助识别和追踪场景中的人脸,提高监控的准确性和效率。
    • 人脸识别:多尺度人脸检测对于人脸识别系统中的人脸图像预处理至关重要,可以确保从图像中提取到的人脸特征准确可靠。
    • 社交媒体过滤:在社交媒体平台中,多尺度和小尺寸人脸检测可以用于自动识别和过滤敏感或不适当的人脸图像。
    • 公开数据脱敏:在一些涉及到人脸隐私要求的数据中,检测到存在的各种尺度的人脸,进行打马赛克等脱敏操作。
  2. 难点:
    • 规模变化:人脸在图像中的大小会因距离、角度和摄像头分辨率等因素而不同,因此需要在不同尺度下准确检测人脸。
    • 上下文信息:在小尺寸的人脸图像中,背景信息相对较多,缺乏明显的人脸特征,这增加了人脸检测的难度。
    • 遮挡和姿态变化:小尺寸人脸更容易被遮挡或出现非正面的姿态,如侧脸或部分遮挡,这使得人脸检测更具挑战性。

360度旋转人脸检测

360度旋转人脸检测。

  1. 应用:
    • 美颜及视频特效:在照片及短视频或直播中,需要对各个旋转角度的人脸进行美颜或加特效,该功能可以准确得到人脸姿态达到需要的美颜效果,
    • 任意姿态镜头下的人脸检测:在诸如无人机,机器人或任意摆放的手机等场景,该功能将支持对其中的人脸及其姿态进行准确定位。
    • 人脸底库数据预处理:在人脸识别应用中,需要处理上传的人脸数据,该数据由于采集设备原因图像可能处于各种方向,该功能将支持自动检测人脸并将图像转正。
  2. 难点:
    • 缺乏标注数据:相比于通用人脸检测数据如widerface中只有一种角度的矩形标注框,旋转人脸检测是无法实现的的。可以通过自行标注或者数据增强方式,但是旋转数据的标难度是正常标注的多倍,而且多人场景数据扩展较难,对于人脸检测这种需要大规模数据集训练的任务,均不是最优解。本项目提出的方案可以只使用widerface数据集,就可以训练鲁棒的旋转人脸检测器。