基于高光谱技术的复杂背景下血指纹图像分割方法研究
朱镥文, 蔡竞
浙江警察学院刑事科学技术系,杭州 310053

第一作者简介:朱镥文(1997—),女,浙江永康人,本科在读,研究方向为刑事图像技术。E-mail:290748820@qq.com

摘要

血指纹是刑事案件犯罪现场中较为常见的痕迹物证之一,往往是案件侦破的重要线索。本文提出了一种基于高光谱技术的复杂背景下血指纹图像的分割方法。该方法利用高光谱成像仪对不同复杂背景下的血指纹进行光谱数据采集,之后选取感兴趣区域,利用血液的光谱特性对图像进行光谱分解,从而实现目标血指纹图像的分割提取。实验表明,该方法能有效剔除复杂背景干扰,且适用范围广、分割效果好、操作具备可重复性,相较于其他传统方法具有一定优势。

关键词: 高光谱成像技术; 血指纹; 复杂背景; 图像分割
中图分类号:DF794.1 文献标志码:A 文章编号:1008-3650(2017)06-0441-05
Hyperspectral Imaging to Segment the Blood Fingerprint Image with Complicate Background
ZHU Luwen, CAI Jing
Department of Forensic Science, Zhejiang Police College, Hangzhou 310053, China
Abstract

Blood fingerprint, one of the most common physical evidence in crime scene, plays an important role in criminal investigation although it requires to unveil clearly from the disturbance of background. This article proposes a method for extracting the blood fingerprint with complicate background by hyperspectral imaging. Firstly, the spectral data were collected from the blood fingerprints under different and complicate backgrounds by a hyperspectral imaging system. Then the region of interest (ROI) was selected out of the spectral image, decomposing and segmenting the fingerprint-carried spectral components from blood according to its distinctive spectral characteristics so that the blood fingerprint images were effectively obtained of good quality. Compared with the traditional methods, the proposed method here permits a repeatable elimination of the interference from complicate background. Therefore, it can be applied widely in extracting blood fingerprint image.

Key words: hyperspectral imaging; blood fingerprint; complicate background; image segmentation

指纹作为一种普遍、唯一、稳定的生物特征, 在刑事侦查领域素有“ 物证之王” 之称, 而在恶性刑事案件尤其是命案中, 血指纹又是犯罪现场较为常见的痕迹物证, 因此对其的显现和提取一直以来都是法庭科学研究的热点问题。但是由于提取技术方法落后和客体表面图案纹理的影响, 复杂背景下血指纹的提取往往比较困难。目前常见的方法是采用Photoshop等软件剔除指纹图像中的复杂背景[1, 2], 或用拍照法和图像处理法消除或减弱背景干扰[3, 4, 5] 等。然而此类方法往往受到参数不可控、经验要求高等因素的影响, 处理效果有限且不具备普适性。因此, 寻找一种稳定有效的新技术、新方法实现复杂背景下血指纹的无损提取显得尤为重要。

高光谱技术融合了传统成像技术和先进的光谱技术等优点, 所获得的高光谱图像同时包含了图像信息和光谱信息。该技术具有操作速度快、操作方法简便、准确无损、绿色环保等优点, 在许多方面已有较为成熟的应用。目前国外利用高光谱技术在血迹方面的研究较为广泛, Leeuwen及其研究团队[6]演示了高光谱技术在犯罪现场检测识别远程血迹的可行性, Kuula等人[7]利用高光谱技术探究了血迹的物理化学特性, Cadd等人[8]则成功利用高光谱技术实现了潜血指纹的显现。但是, 国内利用高光谱技术对血指纹的研究尚处于摸索阶段, 相关文献较少。

本文利用高光谱成像仪研究了血迹的光谱信息和图像信息, 提出了一种复杂背景下的血指纹图像分割方法, 通过对血指纹样本的高光谱数据采集, 利用ENVI软件选取感兴趣区域, 并采用MISystem光谱影像分析软件进行光谱分解、人工分析及效果叠加, 从而实现复杂背景下血指纹图像的提取与分割。该方法有效避免了复杂背景对指纹提取造成的干扰, 为后续的指纹录入及识别创造了有利条件。

1 高光谱成像技术原理

高光谱成像技术能将数字成像与光谱技术相结合, 对于实际图像上的每个像素点, 均包含有高光谱相机获取的连续上百个光谱波段的辐亮度值, 即每个像素点都对应相应连续的光谱曲线, 其中包含的丰富的光谱信息可用来精准区分、提取和分析被拍摄物的物理化学性质。

高光谱图像, 是对样品的每一个空间点在多个离散或连续波长下扫描得到的, 在光学焦面的垂直方向上面阵CCD探测器作y轴方向的横向扫描。透过狭缝的平行光线经过分光元件分光后投射在感光元件上, 从而获得了目标条带场景在各波长下的灰度影像并记录下了每个像素的高光谱信息。其横向是x轴方向上的像素点, 纵向是各像元所对应的光谱信息, 即y轴方向。随着被检测物体在电动线扫平台上移动, 排列的探测器将会扫出一条带状轨迹, 从而完成z轴方向的纵向扫描。将横轴与纵轴方向扫描的信息相结合, 最终输出被检测物体的三维高光谱立方体数据。最终输出被检测物体的三维高光谱立方体数据如图1所示[9]

图1 高光谱成像技术原理图Fig.1 Schematic for the principle of hyperspectral imaging

2 实验环境
2.1 实验仪器

本次实验所采集到的高光谱数据是由美国Headwall Photonics公司生产的高光谱成像仪主机Hyperspec VNIR-E系列, 如图2所示, 使用的可见近红外高光谱成像系统主要包括:Starterkit室内线扫平台(由Headwall公司集成, 含150 W卤素灯及稳流控制器、250 mm线性步进导轨、单轴直流控制器、反射率标准板等), 高光谱影像数据采集软件(HyperspecIII, 美国Headwall Photonics公司), 和光谱影像数据分析软件(ENVI, 北京星图环宇科技有限公司; MISystem, 广州星博科仪有限公司), 高性能计算机等。其中Hyperspec VNIR-E系列高光谱成像仪采用的是同轴反射式全息光栅分光的像差校正光路设计, 数值孔径为F/2.0, 光谱分辨率约为4 nm, 光谱范围为400~1000 nm。设置相机曝光时间为40 ms, 平台移动速度为3.72 mm/s, 扫描范围为80~150 mm, 从而保证扫描的高光谱图像数据具有较高的成像质量。

图2 高光谱成像系统Fig.2 The hyperspectral imaging system

2.2 实验样本

手指蘸取血液, 在不同材质(油光纸、彩色书写纸、胶版纸等易留有指纹的纸张)、不同颜色复杂程度(黑色、红色、紫色、蓝色、彩色等易遮盖或混淆血迹颜色)的背景上捺印清晰的指纹, 将每块含有血指纹的区域进行相同规格的裁剪, 依次平放于线扫平台上进行高光谱图像数据采集。

3 实验步骤
3.1 血迹光谱分析

血迹的鉴别方法很多, 如常见的物理观察法虽然对检材无损, 但只能提供该物质的物理信息, 属于定性分析方法, 专属性差。而化学试剂法可能会在一定程度上破坏血迹中的DNA成分, 影响后续检测。为实现检材的无损检测及血指纹图像的准确分割, 本文首先探索研究了血迹在可见光及近红外波段内的光谱特性。

将滴有酱油、红色指甲油、唇油、血液、血红蛋白、血清的白色滤纸置于高光谱仪上扫描, 把得到的图像利用ENVI光谱影像分析软件进行分析。

白色滤纸上的血清、血红蛋白、血迹、红色指甲油、唇油、酱油在复合光下的RGB图像如图3所示, 其在400~1000 nm波段的光谱曲线如图4所示。由图上数据可知, 以上6种物质在400~1000 nm波段下对光的反射率各不相同。高光谱成像效果受被检物质的成分影响较大, 而受物质颜色的影响较小, 使用高光谱成像技术记录5种颜色易与血迹混淆的物质, 发现血迹和其他物质的光谱峰及形状有明显的差异, 从而为血指纹的分割提取提供了可能性。

图3 6种介质的RGB图像(a.酱油; b.红色指甲油; c.唇油; d.血液; e.血红蛋白; f.血清)Fig.3 RGB images of six different samples (a. soybean, b. nail polish, c. lip balm, d. blood, e. hematocrystallin, f. serum)

图4 6种介质的光谱曲线图Fig.4 Spectral curves of the six different samples in Fig.3

3.2 血指纹图像分割流程

本实验通过搭建高光谱实验平台, 利用高光谱成像技术采集血指纹样本的图谱信息, 采用ENVI、MISystem两种光谱影像分析软件进行血指纹图像提取及背景分离, 其具体流程如图5所示。

图5 血指纹图像分割流程图Fig.5 Flowchart to segment the blood fingerprint image

3.2.1 样本高光谱数据采集

对复杂背景下的血指纹进行采集前, 先提前3 min打开光源进行预热直至光源稳定。为了防止采集到的图像模糊不清或变形失真, 需要根据相机镜头与物体的距离(物距)调节光圈和焦距的大小。为了消除光源强度的差异在各波段下分布不均及摄像头中暗电流噪声的影响, 需要对采集到的光谱图像进行黑白校准, 如式(1)所示。

(1)

其中, R是校正后的图像, L是原始高光谱图像, B是黑板校正图像, W是白板校正图像。

3.2.2 感兴趣区域选取

感兴趣区域(Region of Interest, ROI)的合理选取是至关重要的一个步骤, 其结果将直接影响后续处理效果。图像校正过后, 运用ENVI 5.1软件提取高光谱图像中血指纹样本的光谱信息, 将完整血指纹所在最小矩形区域作为ROI, 将ROI内的光谱信息的平均值作为对应样本的光谱值。ROI选取可去除周边无关信息干扰, 提升系统分析速度, 为后续的血指纹分割提取打下基础。操作如图6所示。

图6 ENVI软件ROI处理效果图Fig.6 Selecting ROI (Region of Interest) by ENVI

3.2.3 图像光谱分解

将已计算反射率的数据导入MISystem光谱影像分析软件进行人工分析, 即对目标图像上不同成分点的样本分别进行人工取样, 将遗留在每一处背景上的微量血迹, 即该处背景客体的成分与血迹成分进行叠加, 利用两者的光谱特性, 寻找两种物质形成反差的波段, 然后输出血指纹呈现强吸收且复杂背景呈现强反射的各波段叠加的灰度图, 进行光谱分解分析, MISystem能够根据灰度图大致判断物质遗留在客体上的轮廓形状, 由此达到对遗留在复杂背景上的指纹进行提取固定的目的。操作如图7所示。

图7 MISystem软件取样后的血指纹分析图Fig.7 The extracted blood fingerprint image from the sample by MISystem

本实验共取样了6种不同成分物质, 每一种取若干像素点, 如图7所示取样完成后进行人工分析, 软件进行目标识别并分析运算后会得到6个分别以标记的6个区域呈现亮色的波段。随后则对各个波段的显现灰度图进行选择性叠加 , 本实验选取了“ 蓝色” 区域、“ 红色” 区域、“ 青色” 区域为反射强度最强, “ 绿色” 区域、“ 黄色” 区域、“ 紫色” 区域为吸收程度最强时候的波段数据, 最后得到效果图并输出。

3.2.4 目标图像分割

根据样本物质成分的吸收和反射状态, 输出各波段叠加的灰度图并进行人工分析, 选择理想波段下对应的灰度图像进行合成, 选择血指纹与复杂背景分离效果最好的图像输出存储, 最终实现复杂背景下血指纹的准确分割。

4 实验结果分析

通过对油光纸、彩色书写纸、胶版纸等复杂客体表面的血指纹图像分割效果进行比对, 发现分割效果均较为显著, 并未受到客体的材料及背景的复杂程度等因素的影响。

图8列出了三组利用MISystem软件提取复杂背景下的血指纹的处理结果, 并将其与Photoshop软件处理结果进行了比较。其中Photoshop软件的处理主要通过RGB各通道的反色叠加及透明度调整来实现血指纹分割。

图8 MISystem光谱影像分析软件与Photoshop图像处理软件分割对比图(a.原图像; b. MISystem软件处理结果; c.Photoshop软件处理结果)Fig.8 The fingerprint images processed by MISystem (b) or Photoshop (c) (a. the original images)

由图可看出, 本文提出的方法有效避免了复杂背景的干扰, 较为完整地提取出了目标血指纹。在有多种颜色混合或是存在红色等与血迹颜色相近的背景干扰下, Photoshop软件的处理效果远没有MISystem理想。这是由于光谱图像数据是具有“ 图谱合一” 特点的三维数据立方体, 因此与传统的相机拍摄图像相比所包含的数据量更大, 且其光谱信息准确反应了血迹的物理及化学性质, 具有区别于酱油、红色指甲油、唇油等易与血迹混淆的物质的光谱特性, 为后续的光谱分解打下基础。

此外, ENVI软件通过对血指纹图像感兴趣区域的选取大大降低了图像的处理数据, MISystem光谱影像分析软件提供了针对性更强的物证识别、光谱分解、光谱分析等主要功能, 选择能够代表目标物质的感兴趣区域后, 可以利用物质对光的反射吸收差异对图像进行像素点的采集、人工分析, 图像合成叠加, 从而达到有效且无损提取复杂背景下血指纹的目的。而Photoshop操作方法更适用于处理多色客体上的汗液指纹、粉末指纹、茚三酮指纹等, 拍摄照片时需要使相机光轴与两种被摄客体的角度保持一致, 否则两幅图像无法重合[1, 2], 因此Photoshop更多依赖于操作者的经验, 且只能单纯根据像素色彩进行区分。当背景色彩较多, 或是分割目标与背景颜色相近时无法达到理想的分割效果, 处理不当还会使指纹图像的细节信息丢失, 直接影响后续的比对结果。

5 结论和展望

本文提出了一种复杂背景下的血指纹分割方法, 通过光谱仪采集数据的光谱图像信息, 利用ENVI软件选取感兴趣区域, 采用MISystem光谱影像分析软件进行像素采集、人工分析及效果叠加, 从而实现目标血指纹与复杂背景的分离, 为血指纹样本的无损提取检测提供了一种新的方法和思路。

由于血迹在紫外及红外波段下表现出特有的性质, 而紫外光谱成像技术和红外光谱成像技术也日渐成熟并开始广泛应用于各个领域, 因此下一步的工作重点是探索基于紫外波段和红外波段光谱成像技术实现复杂背景下的血指纹分割提取的可行性。

The authors have declared that no competing interests exist.

作者已声明无竞争性利益关系。

参考文献
[1] 匡政文, 陈志鹄, 罗文楠. 利用Photoshop消除指纹图像中杂乱背景的探讨[J]. 刑事技术, 2002(4): 46-47. [本文引用:2]
[2] 聂文君. 运用Photoshop软件处理指纹图像方法的实践与探索[J]. 铁道警官高等专科学校学报, 2009, 19(4): 84-87. [本文引用:2]
[3] 吴炳钦, 巴曦, 高原. 数字图像复杂背景的分离方法研究[J]. 警察实战训练研究, 2011(1): 99-106. [本文引用:1]
[4] 韩书娜, 幺宏伟, 范剑英, . 指纹图像分割与增强算法[J]. 哈尔滨理工大学学报, 2011, 16(1): 98-101. [本文引用:1]
[5] 赵明富, 夏曦, 张政委, . 基于高光谱图像技术的指纹识别研究[J]. 激光杂志, 2013, 34(1): 45-47. [本文引用:1]
[6] LEEUWEN T G V, AALDERS M C G. Hyperspectral imaging of the crime scene for detection and identification of blood stains[C]// SPIE Defense, Security, and Sensing, 2013: 87430A. [本文引用:1]
[7] KUULA J, PUUPPONEN H H, PÖLÖNEN I, et al. The challenges of analysing blood stains with hyperspectral imaging[C]// SPIE Sensing Technology + Applications, 2014: 91120W. [本文引用:1]
[8] CADD S, LI B, BEVERIDGE P, et al. The non-contact detection and identification of blood stained fingerprints using visible wavelength reflectance hyperspectral imaging: Part 1[J]. Science & Justice, 2016, 56(3): 181-190. [本文引用:1]
[9] PIZZOLANTE R, CARPENTIERI B. Visualization, Band Ordering and Compression of Hyperspectral Images[J]. Algorithms, 2012, 5(4): 76-97. [本文引用:1]