高光谱数据的预处理方法有哪些?
发布时间:2023-06-30
浏览次数:579
高光谱成像仪结合光谱技术和图像技术的优势,能够很好的捕获光谱信息和图像信息。其丰富的光谱信息能够有效的提取样品内部特征,被广泛的应用于果蔬无损检测等领域。那么,高光谱数据的预处理方法有哪些?
高光谱成像仪结合光谱技术和图像技术的优势,能够很好的捕获光谱信息和图像信息。其丰富的光谱信息能够有效的提取样品内部特征,被广泛的应用于果蔬无损检测等领域。那么,高光谱数据的预处理方法有哪些?
由于采集到的三维高光谱数据中的光谱信息除了含有有用的信息外,还含有其他大量的随机噪声和与样本性质无关的信息(如仪器噪音、杂光散射和基线漂移等),这些因素都会对光谱信息产生一定的干扰,甚至会影响所建模型的性能和预测效果。因此,有效地消除光谱信息中的噪声和无关信息是建立良好的分析预测模型的关键。
通过对光谱信息进行有效的预处理可以减弱甚至消除其他与样本性质无关的信息对光谱信息的影响,为后续建立预测精度高、稳健性好的分类判别模型奠定基础。目前,常用的预处理方法有变量标准化算法、多元散射校正算法、导数算法、基线校正、平滑算法和去趋势法等。
1.变量标准化算法(SNV)
变量标准化(Standard Normalized Variate,简称SNV)主要是用来消除由光散射所引起的光谱误差。SNV校正认为,在每一条光谱中各波长点的吸光度值应满足一定的分布规律。在这一假设的前提下,SNV是在原始光谱减去该条光谱曲线的平均光谱值,然后除以该条光谱曲线的标准偏差,其实质是使原始光谱数据标准正态化处理,即:
2.附加散射校正算法(MSC)
附加散射校正(Multiplicative Scatter Correction,简称MSC)是由Geladi等人提出,其主要目的是通过消除因颗粒大小及颗粒分布不均匀产生的散射影响,增强与成分含量相关的光谱吸收信息,并获得较“理想”的光谱。MSC方法认为,每一条光谱都应该与“理想”的光谱成线性关系,但真正“理想”的光谱是无法得到,所以一般用校正集的平均光谱来近似。即,每个样品的任意波长点下的反射吸光度值与其平均光谱的相应吸光度的光谱是近似线性关系,而且可以通过光谱集线性回归获得该直线的截距和斜率,并用来校正每条光谱。截距大小可以用来反应样品独特反射作用,而斜率大小则用来反映样品的均匀性。
3.平滑算法(Smoothing)
由光谱仪采集到的光谱信息中常常叠加着很多的随机误差,而平滑算法是常用来消除噪声的方法。其基本思路是通过多次选取平滑点前后的特定点进行平均或拟合来降低噪声,从而提高信噪比。常用的平滑方法有:Savitzky-Golay卷积平滑法、移动平均平滑法和指数平均平滑。
4.去趋势法(De-trending)
去趋势算法(De-Trending)一般可以用于消除经SNV处理后的光谱的基线漂移,也可以单独使用。该算法比较直接,先按多项式将光谱x;的吸光度和波长拟合出一条趋势线di,再从原始光谱中减掉趋势线(xi-di)。经过去趋势法处理后,其波峰和波谷的特征更加明显。
5.基线校正(Baseline)
在光谱分析中,由于样品自身的不均性、仪器背景或其他因素等影响,导致所测样品的谱图经常会出现倾斜或漂移现象,若不加处理,会影响校正模型的性能和对未知样品预测结果的准确性。
相关产品
-
荧光光谱分析测试或分析方法原理
荧光光谱技术是一种通过测量物质吸收光后发射的荧光光谱来研究物质性质的技术。本文根据《JY-T 0571-2020》,简单总结了荧光光谱分析测试或分析方法原理。..
-
红外光谱的定性分析和定量分析
红外光谱分析方法通则中,规定了用红外光谱仪定性定量分析有机物及无机物的通用规则,适用于波数范围为7 800cm\'~350cm「(波长1.28 gm~28.57..
-
全球高光谱成像系统(HSI)市场发展情况
高光谱成像系统(High Spectral Imaging,HSI),是一种能够获取并处理从紫外到红外波段范围内多个连续窄波段图像的技术,广泛应用于农业、医疗健..
-
全球首款百通道百万像素高光谱实时成像器件问世
中国工程院院士、北京理工大学教授张军团队首创片上光谱复用感知架构,自主研制了全球首款百通道百万像素高光谱实时成像器件,光能利用率创造世界纪录。..