跳转至

9.1 图像预处理

图像预处理是算法流水线的第一道关口,目的是将原始采集图像转化为适合后续分析的标准化输入。预处理质量直接影响特征提取、分类或检测的最终精度,通常包括几何校正、灰度校正、去噪和归一化等环节。


一、预处理流程概览

原始图像(Raw)
    ↓ 几何校正(畸变矫正 / 配准)
几何对齐图像
    ↓ 灰度校正(暗场 / 平场 / 辐射定标)
线性响应图像
    ↓ 去噪(空域 / 频域滤波)
信噪比提升图像
    ↓ 归一化 / 格式转换
算法可用输入

二、几何校正

2.1 镜头畸变校正

光学镜头引入的几何失真分为两类:

畸变类型 表现 校正方式
径向畸变 直线变弯,桶形或枕形 多项式模型($k_1, k_2, k_3$)
切向畸变 图像平面与镜头平面不平行 切向系数($p_1, p_2$)

校正公式(以归一化坐标 $(x, y)$ 为例):

$$x' = x(1 + k_1 r^2 + k_2 r^4) + 2p_1 xy + p_2(r^2 + 2x^2)$$

其中 $r^2 = x^2 + y^2$,参数由标定板(棋盘格)标定得到。

2.2 图像配准

多帧或多传感器图像需要对齐到同一坐标系,常用方法:

  • 特征点配准:SIFT / ORB 提取关键点 → 描述符匹配 → RANSAC 估计变换矩阵
  • 强度配准:最大化互信息(MI),适合多模态图像(可见光 + 红外)
  • 仿射 / 单应变换:4 点以上对应关系估计 3×3 单应矩阵

三、灰度校正

3.1 暗场校正(Dark Frame Subtraction)

探测器存在暗电流和固定模式噪声,采集纯暗帧 $D$ 后逐像元减除:

$$I_{corr} = I_{raw} - D$$

3.2 平场校正(Flat-Field Correction)

消除像元响应不均匀和光照不均匀,用均匀白板采集平场帧 $F$:

$$I_{corr} = \frac{I_{raw} - D}{F - D} \times \bar{F}$$

其中 $\bar{F}$ 为平场均值,保持整体亮度。

3.3 辐射定标

光电成像系统中,将 DN 值转换为辐射亮度 $L$(单位 W·m⁻²·sr⁻¹·μm⁻¹):

$$L = G \cdot DN + B$$

$G$ 为增益,$B$ 为偏置,由积分球或标准辐射源标定。


四、去噪

4.1 噪声来源

噪声类型 来源 典型特征
高斯噪声 热噪声、放大器噪声 均值为零,正态分布
泊松噪声(散粒噪声) 光子统计 方差等于均值
椒盐噪声 ADC 误码、传输错误 随机亮/暗点
固定模式噪声 像元响应不均匀 结构性条纹

4.2 空域滤波

  • 均值滤波:计算邻域均值,抑制高斯噪声,但模糊边缘
  • 中值滤波:邻域像元取中值,对椒盐噪声效果好,保边能力强
  • 高斯滤波:加权均值(权重按高斯分布),比均值滤波更平滑,频率特性好
  • 双边滤波:同时考虑空间距离和灰度差,保边去噪

4.3 频域滤波

对图像做傅里叶变换,在频域乘以低通滤波器 $H(\omega)$(巴特沃斯、理想低通等),再逆变换。适合去除周期性条纹噪声。

4.4 深度学习去噪

DnCNN、FFDNet 等卷积网络直接学习噪声残差,在高斯噪声场景下 PSNR 比传统方法高 1–2 dB,支持盲去噪(无需已知噪声水平)。


五、归一化与格式转换

5.1 灰度归一化

将图像像素值映射到 $[0, 1]$ 或 $[-1, 1]$,消除光照差异对网络输入的干扰:

$$\hat{I} = \frac{I - \mu}{\sigma}$$

其中 $\mu$、$\sigma$ 为数据集的全局均值和标准差(ImageNet 预训练模型常用 RGB 各通道独立归一化)。

5.2 尺寸对齐

不同来源图像分辨率不同,需裁剪(Crop)或缩放(Resize)到统一尺寸(如 640×640)。缩放时注意保持长宽比,避免目标变形。

5.3 数据类型转换

原始格式 常用转换 注意事项
uint16(14-bit RAW) 线性映射到 float32 保留高动态范围
uint8(8-bit) 直接归一化 ÷255 信息已损失高位
浮点辐射亮度 标准化后送网络 防止梯度爆炸

六、工程注意事项

  • 标定一致性:同一批任务使用同一批标定参数,切勿跨设备混用。
  • 顺序不能颠倒:必须先暗场/平场校正,再几何校正,再去噪,顺序改变会引入新偏差。
  • 版本留痕:预处理参数(标定文件哈希、去噪参数)应随数据版本一起记录,确保结果可复现。

参考资料

  • Gonzalez & Woods, Digital Image Processing, 4th ed., Pearson
  • OpenCV 文档:https://docs.opencv.org/
  • Zhang, Z., \"A Flexible New Technique for Camera Calibration\", IEEE TPAMI, 2000

更新时间

2026-03-03