跳转至

11.4 数据标准与评测规范

光电系统产生的图像、光谱、点云等多类数据,若缺乏统一的格式标准和评测规范,将导致多系统对接困难、算法迁移成本高、产品验收无客观依据。本节梳理工程中常见的数据格式标准与系统评测规范体系。


一、图像数据格式标准

1.1 通用图像格式

格式 特点 适用场景
TIFF(含 BigTIFF) 无损,支持 16/32 bit 及多波段 科研级高光谱原始存储、遥感正射影像
PNG 无损压缩,支持透明通道 标注掩模图、可见光结果输出
JPEG / JPEG XL 有损压缩,尺寸小 可视化预览,禁止用于定量分析数据
RAW(DNG / 私有格式) 传感器原始 DN 值,未经 ISP 辐射定标分析、算法研发
HDF5 层次化大数据容器,支持任意维度 卫星高光谱立方体、多时相数据
NetCDF 自描述科学数据格式,自带坐标及元数据 大气、海洋、遥感数据

1.2 高光谱数据格式(ENVI BSQ/BIL/BIP)

ENVI 格式将图像数据与头文件(.hdr)分离,通过波段排列方式区分三种内存布局:

BSQ(Band Sequential):  数据按波段顺序连续存放,同一波段空间访问快
BIL(Band Interleaved by Line):一行内各波段交替,空间与光谱均衡
BIP(Band Interleaved by Pixel):每像素所有波段紧挨,光谱向量读取快

头文件中必须记录:波段数、行列数、数据类型、波段波长列表、坐标投影信息等元数据。


二、元数据与互操作规范

2.1 EXIF / XMP

消费级相机和部分工业相机在 JPEG/TIFF 文件头中嵌入 EXIF 元数据,包含拍摄时间、曝光、焦距、GPS 坐标等,是图像数据与采集参数溯源的基础,不应在处理过程中被抹除

2.2 OGC 规范(遥感领域)

  • WMS/WCS/WFS:OGC 定义的地图/覆盖/要素服务接口,用于地理空间数据的互操作共享。
  • GeoTIFF:在 TIFF 文件头中内嵌投影坐标系(EPSG 代码)和仿射变换参数,使图像具备地理参考能力,是遥感产品分发的标准格式。

2.3 标注数据格式

格式 用途
COCO JSON 目标检测 + 实例分割(业界最通用)
Pascal VOC XML 经典检测格式,逐文件存储
YOLO TXT 每行一个框(类别 x_c y_c w h,归一化)
GeoJSON 地理要素标注(与遥感配合)
ISAT JSON SAM 辅助标注工具的输出格式

三、系统级评测规范

3.1 图像质量评测规范

主要依据 ISO 12233(分辨率)、EMVA 1288(传感器噪声与动态范围),具体测试方法见第 10.4 节。在产品出货验收时,应以这两项标准约定各纬度的最低合格阈值。

3.2 辐射测量溯源规范

  • 绝对辐射定标须能追溯到国家计量院(如 NIM、NIST)的基准标准,整条溯源链需定期复现。
  • 每台仪器的定标系数应赋有溯源编号和有效期,超期后禁止用于交付性测量。

3.3 遥感影像质量规范(工程项目常见)

验收指标 典型要求
几何精度(CE90) 平原地区 ≤ 1 像元(精度等级依需求)
辐射误差(绝对) 互差 ≤ 5%(相比高精度标准光谱)
信噪比(SNR) 典型条件下 SNR ≥ 100
坏点率 覆盖目标的像元坏点率 ≤ 0.5%
云量 覆盖有效目标区的无云比例 ≥ 90%(遥感卫星)

四、数据管理与交付规范

4.1 文件命名规范

推荐采用包含关键信息的结构化命名:

{设备编号}_{日期}_{飞行/序列号}_{波段范围}_{处理等级}.格式

示例:CAM01_20260303_F012_VNIR_L2.tif

4.2 数据处理等级定义

遥感及工业测量中通常沿用以下等级划分:

等级 名称 内容
L0 原始数据 未处理的 DN 值,含完整时戳与辅助数据
L1A 辐射校正 完成暗场/平场校正,DN → 辐射亮度
L1B 几何校正 在 L1A 基础上完成几何纠正
L2 高级产品 大气校正后的地表反射率 / 专题类别图
L3 时序/合成产品 多时相合成、时间序列分析产品

4.3 交付物清单(示例)

一个典型项目的数据交付包通常包括: - 原始数据(L0,只读存档) - 处理产品(如 L1B GeoTIFF 或 L2 反射率) - 标定参数文件(增益/偏置 JSON,含版本号与有效期) - 质量报告(SNR、坐标精度检验、坏点统计) - 处理软件版本记录(代码 Git hash)


参考资料

  • ISO 19101/19115 地理信息元数据标准
  • CEOS(地球观测卫星委员会)数据互操作性规范
  • ENVI 用户手册(Harris Geospatial)

更新时间

2026-03-03