光照变化是影响人脸识别准确率的最关键因素，由于脸部是3D结构，因此光线投射的阴影会加强或削弱原始脸部的特征。特别是在夜晚，由光线不足引起的面部阴影会导致识别率急剧下降，使得系统难以满足实际要求。同时，理论和实验也证明了不同光照下同一个体之间的差异大于同一照射下不同个体之间的差异。
二、人脸面部表情变化
人脸面部表情变化是由不同的表情表现的区域组成的，这里面有：嘴、脸颊、眼睛、眉毛以及前额，人的感情表达是通过组成表情表现区域的肌肉发生局部形变实现的，这些形变不是简单的平移，旋转式的刚性变化。由表情变化所引起的人脸肌肉的局部形变会被当做面部特征模式的一部分，从而难以区分特征模式之间的差异是由不同人脸引起的还是由表情变化引起的，给分类识别造成了困难。
