高光谱成像仪光谱数据的预处理方法有哪些?
发布时间:2023-11-30
浏览次数:402
高光谱成像仪在采集数据的过程中容易受到类似仪器性能、样本背景、电噪音等因素的影响,这导致获得的光谱信号受噪音的干扰。所以,在得到所有样品的原始光谱以后,需要对其进行预处理来提高光谱数据的信噪比,这也是为了更高效地挖掘光谱数据仅为保证预测模型的精度、稳定性和可靠性。那么,高光谱成像仪光谱数据的预处理方法有哪些?
高光谱成像仪在采集数据的过程中容易受到类似仪器性能、样本背景、电噪音等因素的影响,这导致获得的光谱信号受噪音的干扰。所以,在得到所有样品的原始光谱以后,需要对其进行预处理来提高光谱数据的信噪比,这也是为了更高效地挖掘光谱数据仅为保证预测模型的精度、稳定性和可靠性。那么,高光谱成像仪光谱数据的预处理方法有哪些?
S-G平滑处理法:
噪声常常干扰光谱信号,也容易在建立模型时产生过拟合的现象。平滑处理通过对平滑点周边一定窗口大小范围内的数据点进行平均或拟合处理,可以求得平滑点的最佳估计值。这样就减少了噪声对数据点的干扰,提高了信噪比。常用的平滑处理包括移动平均平滑法和卷积平滑法,卷积平滑法基于最小二乘拟合的系数来建立滤波函数,对移动窗口内的光谱进行最小二乘多项式拟合。因此与简单的平均计算相比,该算法具有较大的优势。
多元散射校正处理法:
多元散射校正能够有效消除散射的影响,进而增强和成分含量对应光谱的吸收信息。该算法首先需要建立待测样品的“理想光谱”,即光谱的变化值与样品的成分含量满足线性关系。然后,基于该“理想光谱”对其他样品的光谱进行修正。可实际应用中,获取“理想光谱”非常困难,所以常常取所有样品光谱的平均值来近似代替。相应的算法步骤如下:
(1)根据最小二乘法确定α和β值,把所有待测样品的光谱A(λ)变换成假想的基准粒度光谱A0(λ)。假设这两个参数的推定值为α'和β',根据公上式变换可得到下式:
(2)基于整体样品的平均光谱值求得α'和β'的基准粒度光谱,如下式所示:
(3)线性回归方程:
式中A表示校正集光谱数据矩阵,Ai表示第i个样品的光谱,通过最小二乘回归算法求得α和β。通过调整α和β,既可以减小光谱的差异性,又尽可能保留了原始光谱中和样品成分含量相关的有效信息。因此该算法大大提高了光谱的信噪比。
变量标准化处理方:
变量标准化可以用来校正样品间由于散射引起的光谱误差。由于每条光谱其波长点的吸光度符合一定的分布(比如正态分布),该算法每一条原始光谱值进行标准正态化处理,处理后的光谱数据均值为0,标准差为1。计算式为:Zi=(xi-μ)/σ。
式中,xi为原始光谱的吸光度,μ为所有光谱的平均值,σ为原始光谱的标准偏差。由于该算法是对每条光谱数据进行单独校正,因此对于样品间差异较大的光谱数据,采用变量标准化算法对其进行预处理十分有效。
相关产品
-
荧光光谱分析测试或分析方法原理
荧光光谱技术是一种通过测量物质吸收光后发射的荧光光谱来研究物质性质的技术。本文根据《JY-T 0571-2020》,简单总结了荧光光谱分析测试或分析方法原理。..
-
红外光谱的定性分析和定量分析
红外光谱分析方法通则中,规定了用红外光谱仪定性定量分析有机物及无机物的通用规则,适用于波数范围为7 800cm\'~350cm「(波长1.28 gm~28.57..
-
全球高光谱成像系统(HSI)市场发展情况
高光谱成像系统(High Spectral Imaging,HSI),是一种能够获取并处理从紫外到红外波段范围内多个连续窄波段图像的技术,广泛应用于农业、医疗健..
-
全球首款百通道百万像素高光谱实时成像器件问世
中国工程院院士、北京理工大学教授张军团队首创片上光谱复用感知架构,自主研制了全球首款百通道百万像素高光谱实时成像器件,光能利用率创造世界纪录。..