11.4 数据标准与评测规范¶
光电系统产生的图像、光谱、点云等多类数据,若缺乏统一的格式标准和评测规范,将导致多系统对接困难、算法迁移成本高、产品验收无客观依据。本节梳理工程中常见的数据格式标准与系统评测规范体系。
一、图像数据格式标准¶
1.1 通用图像格式¶
| 格式 | 特点 | 适用场景 |
|---|---|---|
| TIFF(含 BigTIFF) | 无损,支持 16/32 bit 及多波段 | 科研级高光谱原始存储、遥感正射影像 |
| PNG | 无损压缩,支持透明通道 | 标注掩模图、可见光结果输出 |
| JPEG / JPEG XL | 有损压缩,尺寸小 | 可视化预览,禁止用于定量分析数据 |
| RAW(DNG / 私有格式) | 传感器原始 DN 值,未经 ISP | 辐射定标分析、算法研发 |
| HDF5 | 层次化大数据容器,支持任意维度 | 卫星高光谱立方体、多时相数据 |
| NetCDF | 自描述科学数据格式,自带坐标及元数据 | 大气、海洋、遥感数据 |
1.2 高光谱数据格式(ENVI BSQ/BIL/BIP)¶
ENVI 格式将图像数据与头文件(.hdr)分离,通过波段排列方式区分三种内存布局:
BSQ(Band Sequential): 数据按波段顺序连续存放,同一波段空间访问快
BIL(Band Interleaved by Line):一行内各波段交替,空间与光谱均衡
BIP(Band Interleaved by Pixel):每像素所有波段紧挨,光谱向量读取快
头文件中必须记录:波段数、行列数、数据类型、波段波长列表、坐标投影信息等元数据。
二、元数据与互操作规范¶
2.1 EXIF / XMP¶
消费级相机和部分工业相机在 JPEG/TIFF 文件头中嵌入 EXIF 元数据,包含拍摄时间、曝光、焦距、GPS 坐标等,是图像数据与采集参数溯源的基础,不应在处理过程中被抹除。
2.2 OGC 规范(遥感领域)¶
- WMS/WCS/WFS:OGC 定义的地图/覆盖/要素服务接口,用于地理空间数据的互操作共享。
- GeoTIFF:在 TIFF 文件头中内嵌投影坐标系(EPSG 代码)和仿射变换参数,使图像具备地理参考能力,是遥感产品分发的标准格式。
2.3 标注数据格式¶
| 格式 | 用途 |
|---|---|
| COCO JSON | 目标检测 + 实例分割(业界最通用) |
| Pascal VOC XML | 经典检测格式,逐文件存储 |
| YOLO TXT | 每行一个框(类别 x_c y_c w h,归一化) |
| GeoJSON | 地理要素标注(与遥感配合) |
| ISAT JSON | SAM 辅助标注工具的输出格式 |
三、系统级评测规范¶
3.1 图像质量评测规范¶
主要依据 ISO 12233(分辨率)、EMVA 1288(传感器噪声与动态范围),具体测试方法见第 10.4 节。在产品出货验收时,应以这两项标准约定各纬度的最低合格阈值。
3.2 辐射测量溯源规范¶
- 绝对辐射定标须能追溯到国家计量院(如 NIM、NIST)的基准标准,整条溯源链需定期复现。
- 每台仪器的定标系数应赋有溯源编号和有效期,超期后禁止用于交付性测量。
3.3 遥感影像质量规范(工程项目常见)¶
| 验收指标 | 典型要求 |
|---|---|
| 几何精度(CE90) | 平原地区 ≤ 1 像元(精度等级依需求) |
| 辐射误差(绝对) | 互差 ≤ 5%(相比高精度标准光谱) |
| 信噪比(SNR) | 典型条件下 SNR ≥ 100 |
| 坏点率 | 覆盖目标的像元坏点率 ≤ 0.5% |
| 云量 | 覆盖有效目标区的无云比例 ≥ 90%(遥感卫星) |
四、数据管理与交付规范¶
4.1 文件命名规范¶
推荐采用包含关键信息的结构化命名:
4.2 数据处理等级定义¶
遥感及工业测量中通常沿用以下等级划分:
| 等级 | 名称 | 内容 |
|---|---|---|
| L0 | 原始数据 | 未处理的 DN 值,含完整时戳与辅助数据 |
| L1A | 辐射校正 | 完成暗场/平场校正,DN → 辐射亮度 |
| L1B | 几何校正 | 在 L1A 基础上完成几何纠正 |
| L2 | 高级产品 | 大气校正后的地表反射率 / 专题类别图 |
| L3 | 时序/合成产品 | 多时相合成、时间序列分析产品 |
4.3 交付物清单(示例)¶
一个典型项目的数据交付包通常包括: - 原始数据(L0,只读存档) - 处理产品(如 L1B GeoTIFF 或 L2 反射率) - 标定参数文件(增益/偏置 JSON,含版本号与有效期) - 质量报告(SNR、坐标精度检验、坏点统计) - 处理软件版本记录(代码 Git hash)
参考资料¶
- ISO 19101/19115 地理信息元数据标准
- CEOS(地球观测卫星委员会)数据互操作性规范
- ENVI 用户手册(Harris Geospatial)
更新时间¶
2026-03-03