079、镜头阴影校正LSC精讲径向衰减模型、增益矩阵生成与产线标定技巧一、一个让我熬夜三天的阴影问题2018年某款旗舰机项目模组厂送来一批镜头实验室拍白墙中心亮度正常四角发暗——典型的lens shading。按惯例跑一遍LSC标定增益矩阵灌进去结果左上角过曝了右下角还暗着。更诡异的是换一颗镜头同样的标定参数阴影形态完全不一样。那晚我盯着示波器看RAW图波形发现径向衰减曲线根本不是教科书上说的cos⁴θ那么简单。镜头组装公差、IR filter的楔形误差、甚至sensor微透镜阵列的偏移都在叠加一个非对称的衰减场。后来拆解发现是镜头模组中一片镜片装偏了0.05mm——这个量级在光学设计公差表里是“允许”的但在影像系统里它让LSC标定彻底失效。从那以后我明白LSC不是简单的“中心亮四周暗”的数学问题而是一个涉及光学、机械、工艺的耦合系统。今天这篇笔记就把我这些年踩过的坑、总结的套路掰开揉碎讲清楚。二、径向衰减模型别被cos⁴θ骗了先看理想情况。一个完美镜头光照度从中心到边缘按cos⁴θ衰减θ是入射角。这个公式在光学设计软件里跑得漂亮但实际模组里至少有三个因素在捣乱1. 光瞳像差带来的偏移真实镜头的光阑位置会随视场变化导致实际衰减曲线偏离cos⁴θ。我实测过一颗6P镜头在0.7视场处衰减比理论值多3%在0.9视场处反而少2%。这种“先快后慢”的曲线用单一多项式拟合会出大问题。2. 微透镜阵列的串扰sensor上的微透镜不是完美对准每个像素的。边缘光线以大角度入射时部分光会漏到相邻像素的感光区造成“伪亮度”。这个效应在背照式sensor上更明显——别问我怎么知道的某次调试发现暗角校正后出现彩色条纹查了三天才发现是微透镜串扰导致的R/G/B通道衰减不一致。3. 红外滤光片的楔形效应IR filter如果厚度不均匀比如0.1°的楔角会在sensor表面产生一个线性梯度衰减。这个量级很小但叠加在径向衰减上会让LSC标定结果出现“一边亮一边暗”的假象。所以我的经验是别用单一径向模型用“径向切向”双分量模型。径向部分用5阶多项式别用3阶精度不够切向部分用1阶线性补偿。代码里这样写// 径向衰减5阶多项式系数从标定文件读取// 这里踩过坑用3阶拟合时边缘误差会超过5%必须上5阶floatradial_attenuation(floatr){floatr2r*r;floatr4r2*r2;floatr6r4*r2;floatr8r4*r4;floatr10r8*r2;return1.0fc1*r2c2*r4c3*r6c4*r8c5*r10;}// 切向补偿线性梯度dx/dy是标定得到的偏移量// 别这样写直接用固定系数不同镜头公差不同必须动态计算floattangential_compensation(floatx,floaty){return1.0fdx*xdy*y;// x,y归一化到[-1,1]}三、增益矩阵生成从RAW图到校正表标定LSC的核心是生成一个增益矩阵让每个像素乘以对应的增益后亮度均匀。但这里有个关键问题增益矩阵的分辨率。早期方案用全分辨率矩阵比如4000x3000存储量太大ISP硬件扛不住。后来用网格矩阵比如16x16每个网格代表一个区域的增益中间插值。但网格太粗会引入“块效应”太细又浪费资源。我的做法是自适应网格在亮度变化剧烈的边缘区域加密网格在中心区域稀疏化。具体实现步骤1采集RAW图用积分球或均匀光源拍白场至少拍5帧取平均消除随机噪声。注意光源色温要稳定最好用D65因为不同色温下lens shading形态会变镜头对不同波长的折射率不同。步骤2计算每个像素的增益增益 目标亮度 / 实际亮度。目标亮度取中心区域比如图像中心10%区域的平均值。这里有个坑如果中心区域有瑕疵比如脏点目标亮度会偏所以要做中值滤波剔除异常点。步骤3网格化与平滑把图像分成MxN个网格每个网格内所有像素的增益取中值别用均值均值对噪声敏感。然后对网格增益做二维低通滤波消除标定过程中的随机波动。我常用高斯核sigma取1.5个网格间距。步骤4生成查表格式ISP硬件通常支持两种格式增益矩阵直接存储每个网格的增益值插值用双线性。多项式系数存储径向多项式的系数硬件实时计算。手机ISP多用增益矩阵因为计算量小车载ISP用多项式系数因为存储空间有限。别问我为什么知道某次给车规芯片移植算法发现增益矩阵占用了40%的SRAM被架构师骂了一顿。代码示例生成增益矩阵// 生成16x16增益矩阵每个网格存储R/G/B三个通道的增益// 这里踩过坑网格边界处插值会引入跳变必须做边界扩展voidgenerate_gain_table(float*raw_image,intwidth,intheight,float*gain_table,intgrid_w,intgrid_h){intblock_wwidth/grid_w;intblock_hheight/grid_h;// 计算中心区域目标亮度floattarget0.0f;intcenter_xwidth/2,center_yheight/2;introi_sizemin(width,height)/10;// 中心10%区域intcount0;for(intycenter_y-roi_size/2;ycenter_yroi_size/2;y){for(intxcenter_x-roi_size/2;xcenter_xroi_size/2;x){targetraw_image[y*widthx];count;}}target/count;// 遍历每个网格计算增益for(intgy0;gygrid_h;gy){for(intgx0;gxgrid_w;gx){floatsum_r0,sum_g0,sum_b0;intcnt_r0,cnt_g0,cnt_b0;// 遍历网格内像素按Bayer模式分离通道for(intygy*block_h;y(gy1)*block_h;y){for(intxgx*block_w;x(gx1)*block_w;x){floatvalraw_image[y*widthx];// 假设Bayer模式是RGGBif((y%20)(x%20)){// Rsum_rval;cnt_r;}elseif((y%20)(x%21)){// G1sum_gval;cnt_g;}elseif((y%21)(x%20)){// G2sum_gval;cnt_g;}else{// Bsum_bval;cnt_b;}}}// 计算增益注意防止除零// 别这样写直接除以cnt如果网格内没有某个通道的像素会崩溃floatgain_r(cnt_r0)?target/(sum_r/cnt_r):1.0f;floatgain_g(cnt_g0)?target/(sum_g/cnt_g):1.0f;floatgain_b(cnt_b0)?target/(sum_b/cnt_b):1.0f;// 存储到增益表格式[gy][gx][0]R, [1]G, [2]Bgain_table[(gy*grid_wgx)*30]gain_r;gain_table[(gy*grid_wgx)*31]gain_g;gain_table[(gy*grid_wgx)*32]gain_b;}}}四、产线标定技巧别让良率毁在LSC上产线标定LSC最怕两件事标定时间太长影响节拍标定结果不一致导致返修。我总结了几条实战经验1. 光源选择积分球 vs 平板光源积分球均匀性好1%但价格贵、体积大产线一般用平板光源。平板光源的均匀性通常只有3-5%所以标定前必须先测光源本身的均匀性作为“参考面”扣除。否则标定出来的增益矩阵会把光源的不均匀也校正进去换一个光源就废了。2. 标定帧数别贪多理论上帧数越多噪声越低但产线节拍不允许。我的经验是低噪声sensor读出噪声2e-3帧平均足够高噪声sensor比如安防用的卷帘快门5帧但要做帧间运动检测防止震动引入伪影3. 坏点处理先校正再标定如果sensor有坏点dead pixel或hot pixel标定前必须先用坏点校正算法处理。否则坏点处的增益会异常高或低导致校正后出现“亮点”或“暗点”。某次产线反馈LSC后出现白点查了三天发现是标定前没做坏点校正坏点被放大成了“白斑”。4. 温度补偿别忽略sensor的暗电流随温度变化会影响LSC标定的准确性。产线环境温度控制在25±2℃但实际往往做不到。我的做法是在标定前先测sensor温度如果偏离25℃用温度补偿系数修正目标亮度。这个系数需要提前在实验室标定不同sensor差异很大。5. 快速验证用“十字线”法产线每颗镜头都要标定但不可能每颗都上积分球。我设计了一个快速验证方法在标定完成后拍一张白墙或均匀光源计算图像四角与中心的亮度比。如果四个角的比值差异超过5%说明标定有问题需要重新标定。这个方法在产线用了三年拦截了上百颗不良镜头。五、调试中的“玄学”问题与破解问题1校正后出现彩色条纹现象白墙校正后边缘出现红蓝交替的条纹。原因R/G/B三个通道的增益矩阵不一致导致边缘处颜色失衡。破解标定时必须分别计算每个通道的增益不能共用。另外检查Bayer模式是否正确——某次模组厂把RGGB贴成了GBRGLSC直接崩了。问题2校正后中心过曝现象中心区域亮度比四周高很多像有个“光晕”。原因目标亮度取中心区域但中心区域本身有衰减比如镜头中心有灰尘或划痕。破解目标亮度应该取图像中亮度最高的区域而不是固定中心。用直方图统计找到峰值亮度作为目标值。问题3不同色温下阴影形态不同现象D65下校正完美A光源下四角发红。原因镜头对不同波长的折射率不同导致不同色温下衰减曲线不同。破解至少标定两个色温D65和A光源ISP根据当前色温插值增益矩阵。高端方案会标定5-7个色温点用多项式拟合色温-增益关系。六、个人经验性建议别迷信理论模型。cos⁴θ只是起点实际调试中我见过镜头因为组装应力导致衰减曲线出现“马鞍形”——中心暗、边缘亮、最边缘又暗。这种非单调曲线任何多项式模型都拟合不好只能上全分辨率增益矩阵。产线标定要留余量。增益矩阵的最大值不要超过2.5倍否则校正后的噪声会被放大到不可接受。如果某个角落需要3倍增益说明镜头设计有问题应该退回光学部门。LSC和AWB的交互。LSC校正后白平衡可能会偏移因为不同通道的增益不同。所以LSC标定完成后必须重新标定AWB。这个顺序不能错否则你会陷入“校正阴影-调整白平衡-阴影又变了”的死循环。调试工具很重要。我习惯用伪彩色图显示校正前后的亮度差异红色代表过亮蓝色代表过暗。一眼就能看出问题区域比看数值快得多。如果你还在看RAW图的像素值建议换个工具。最后一条也是最重要的LSC不是万能的。如果镜头本身的阴影超过30%中心到边缘亮度差任何校正都会引入明显的噪声和色彩偏差。这时候应该找光学部门改设计而不是在ISP里硬扛。我见过太多项目为了省镜头成本把LSC的增益拉到3倍以上结果图像边缘全是噪点用户投诉不断。LSC这个模块说简单也简单说复杂也复杂。简单在于原理清晰复杂在于工程实现中的各种坑。希望这篇笔记能帮你少走一些弯路。下一篇我会讲“防抖OIS与EIS的协同调试”敬请期待。