![点击分享此内容可以赚币 分享](/master/images/share_but.png)
基于残差生成对抗网络的光谱数据域适应研究.pdf
《基于残差生成对抗网络的光谱数据域适应研究.pdf》由会员分享,可在线阅读,更多相关《基于残差生成对抗网络的光谱数据域适应研究.pdf(3页珍藏版)》请在咨信网上搜索。
1、信息通信基于残差生成对抗网络的光谱数据域适应研究元文浩,陈强,刘杰”黄光造?(1.温州医科大学,浙江温州32 50 0 0;2.温州大学,浙江温州32 50 0 0)摘要:在实际应用中,不同光谱仪测得的光谱数据往往属于不同的数据分布,而对光谱数据的标定,通常需要拥有充实知识背景的专业人士来完成,且标注周期长、工作量大。因此,如何寻找来自不同测量仪器的光谱数据的相似性,并将不同分布的数据迁移至同一分布中,就可以有效解决跨域光谱数据的分析和建模问题,并减轻专业人士标注数据的工作量。在本文中,提出了一种基于残差模块的生成对抗网络对光谱数据进行域自适应,它通过生成器实现两个不同分布的数据集之间的迁移,
2、并在生成器中加入残差模块以确保模型训练的稳定性。最后使用玉米的近红外光谱数据集验证了所提方法的有效性。实验结果表明,所提方法对无监督回归域迁移具有一定的效果。关键词:生成对抗网络;残差模块;域自适应中图分类号:TP181文献标识码:AStudy on domain adaptation of Spectral databased on Generative Adversarial NetworkYUAN Wenhao,CHEN Qiang,LIU Jie,HUANG Guangzao?(1.Wenzhou Medical University,Wenzhou 325000,China;2.We
3、nzhou University,Wenzhou 325000,China)Abstract:In practical applications,the spectral data measured by different spectrometers often belong to other data distributions,and the calibration of spectral data usually requires professionals with sufficient knowledge background to complete,the labelingper
4、iod is long and the workload is significant.Therefore,how to find the similarity of spectral data from different measurementinstruments and migrate the data from other distributions to the same distribution can effectively solve the analysis and modelingproblem of cross-domain spectral data and redu
5、ce the workload of professionals in labeling data.In this paper,a generative ad-versarial network based on the residual module is proposed for domain adaptation of spectral data,which implements migrationbetween two datasets with different distributions through a generator.It incorporates the residu
6、al module in the generator to en-sure the stability of the model training.Finally,the effectiveness of the proposed method is verified using the NIR spectral datasetof maize.The experimental results show that the proposed method is effective for unsupervised regression domain migration.Keywords:Gene
7、rative adversarial network;residual block;domain adaptation0引言目前,随着云计算、大数据、人工智能、物联网、区块链等的飞速发展,人工智能在各个领域的应用发生了翻天覆地的变化,例如图像识别、文本分类以及语音识别技术等。并且,其在光谱回归分析(Spectral RegressionAnalysis)领域上也取得了重要应用。光谱回归分析是一种利用光谱数据进行化学物质成分分析的技术 2 。它起源于光谱学,在2 0 世纪6 0 年代初期在化学、生物学、环境科学和材料科学等领域得到了广泛的应用3。随着计算机技术的发展,光谱回归分析逐渐从传统的线性
8、回归方法转向了更先进的非线性回归方法,如人工神经网络(ANN)、支持向量机(SVM)等。然而,在实际对人工智能各类模型的运用中,为了保证训练所得模型性能,理论上通常对模型所用的数据有一定的假设要求,即训练数据和测试数据的特征空间和分布必须相同。但是,对于光谱数据,不同光谱仪测的数据基本上属于不同的分布,若能将两个不同光谱仪测得的光谱数据迁移至同一分布,如此,就能保证各类模型能在光谱数据中使用,这可以大大减轻专业人士对光谱数据进行标注的工作量,有着重要的意义。收稿日期:2 0 2 3-0 2-2 0基金项目:国家自然科学基金项目名称:无目标食品掺假的近红外光谱单类分类检测研究(项目编号:6 2
9、10 52 45);温州市科技局项目,项目名称:基于自注意力生成对抗网络的域自适应骨龄评估方法研究(项目编号:G20220003)。作者简介:元文浩(19 8 8-),男,浙江乐清人,工程师,硕士研究生,温州医科大学信息技术中心,研究方向:数据挖掘;陈强(19 9 1-),男,浙江温州人,硕士研究生,工程师,研究方向:信号处理;刘杰(19 8 4-),男,浙江温州人,硕士研究生,高级工程师,研究方向:大数据;黄光造(19 8 7-),男,浙江温州人,博士研究生,副教授,研究方向:机器学习。292023年第0 5期(总第2 45期)文章编号:2 0 9 6-9 7 59(2 0 2 3)0 5-
10、0 0 2 9-0 3近年来,生成对抗网络(GenerativeAdversarialNetworks,GAN)采用零和博奔思想,生成了超优质的样本数据,它能够有效地学习各类数据的分布,由IanJ.Goodfellow于2 0 14年首次提出。与传统的生成模型不同,GAN不是直接对样本空间中每个样本点进行概率密度估计,而是通过生成器G对样本分布进行隐式表达5。因此,本文探索通过使用GAN强大的对抗学习数据分布的能力,将两个不同分布的数据进行转移。1基本原理与方法1.1生成对抗网络的基本理论生成对抗网络由两个神经网络组成:生成器(Generator)和判别器(Discriminator)。生成器
11、的任务是生成一些看起来很像真实数据的虚假数据,判别器的任务是将真实数据与虚假数据进行分类 6 。这两个网络互相博奔,生成器试图生成越来越真实的数据,使得判别器难以识别;判别器则试图提高识别准确度,使得生成器生成的数据越来越不真实。GAN的目标函数如(1)所示:ming maxD VcAN(D,)=Ex-pa log(x)+Ezp:(1og(1-(G(2)(1)Changjiang Information&Communications其中,z表示从特定分布pz(z)中随机采样所得的向量,pPaa(x)表示真实样本数据的概率分布。但是GAN的训练过程可能比较复杂,容易出现模型不稳定等问题,目前,深
12、度卷积生成对抗网络(Deepconvolutionalgenerative adversarial networks,DCGAN)采用反卷积神经网络与卷积神经网络分别构造生成模型与判别模型,并对如何建立一个稳定的网络提供了实验性的指导,因此本文的模型中采用DCGAN结构。1.2域适应的基本理论在迁移学习中,当源域和目标域的数据分布不同,但两个任务相同时,这种特殊的迁移学习叫做领域自适应(DomainAdaptation,DA)7 。因为其任务相同,域适应属于一种直推式迁移学习。在计算机视觉中,域适应是一个常见要求,因为带有标注的数据集很容易取得,但是获得的数据集和我们最终应用的数据集来源的域往
13、往是不同的。域适应是机器学习的一个子学科,它处理的场景是,在不同(但相关)的目标分布的背景下,使用在源分布上训练的模型。通常,域适应使用一个或多个源域中的标记数据来解决目标域中的新任务。因此,源域和目标域之间的关联程度通常决定了适应的成功程度。1.3实验数据的来源与预处理本次实验所用的玉米近红外光谱数据集包含在3种不同的NIR光谱仪(m5、mp 5和mp6)上测量的8 0 个玉米样品。波长范围为110 0-2 49 8 纳米,间隔为2 纳米,预测值分别为每个样品的水分、油分、蛋白质和淀粉的属性值。在本研究中,与m5相关的数据被视为源数据,与mp5相关的数据被视为目标数据,取蛋白质为预测值,所有
14、近红外光谱图及物性信息均不经过预处理,仅归一化至 0,1。2实验与方法2.1基于生成对抗网络的玉米光谱数据域适应在深度卷积生成对抗网络中,生成器G是用高斯噪声z和m5光谱数据相结合,作为输入数据进行数据的生成,目标是能生成以假乱真的mp5光谱数据,鉴别器D则对生成的mp5光谱数据和真实的mp5数据进行判断真假。具体的模型架构已经显示在图1中。RealFakemp5(real)m5G是一个残差反卷积神经网络,中间的加入了3层残差反卷积层,各层的激活函数为LeakyReLU函数,其中输出层的激活函数为Sigmoid函数。鉴别器D是一个卷积神经网络,元文浩等:基于残差生成对抗网络的光谱数据域适应研究
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 基于 生成 对抗 网络 光谱 数据 适应 研究
![提示](https://www.zixin.com.cn/images/bang_tan.gif)
1、咨信平台为文档C2C交易模式,即用户上传的文档直接被用户下载,收益归上传人(含作者)所有;本站仅是提供信息存储空间和展示预览,仅对用户上传内容的表现方式做保护处理,对上载内容不做任何修改或编辑。所展示的作品文档包括内容和图片全部来源于网络用户和作者上传投稿,我们不确定上传用户享有完全著作权,根据《信息网络传播权保护条例》,如果侵犯了您的版权、权益或隐私,请联系我们,核实后会尽快下架及时删除,并可随时和客服了解处理情况,尊重保护知识产权我们共同努力。
2、文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为仲裁依据,平台无法对文档的真实性、完整性、权威性、准确性、专业性及其观点立场做任何保证或承诺,下载前须认真查看,确认无误后再购买,务必慎重购买;若有违法违纪将进行移交司法处理,若涉侵权平台将进行基本处罚并下架。
3、本站所有内容均由用户上传,付费前请自行鉴别,如您付费,意味着您已接受本站规则且自行承担风险,本站不进行额外附加服务,虚拟产品一经售出概不退款(未进行购买下载可退充值款),文档一经付费(服务费)、不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
4、如你看到网页展示的文档有www.zixin.com.cn水印,是因预览和防盗链等技术需要对页面进行转换压缩成图而已,我们并不对上传的文档进行任何编辑或修改,文档下载后都不会有水印标识(原文档上传前个别存留的除外),下载后原文更清晰;试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓;PPT和DOC文档可被视为“模板”,允许上传人保留章节、目录结构的情况下删减部份的内容;PDF文档不管是原文档转换或图片扫描而得,本站不作要求视为允许,下载前自行私信或留言给上传者【自信****多点】。
5、本文档所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用;网站提供的党政主题相关内容(国旗、国徽、党徽--等)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
6、文档遇到问题,请及时私信或留言给本站上传会员【自信****多点】,需本站解决可联系【 微信客服】、【 QQ客服】,若有其他问题请点击或扫码反馈【 服务填表】;文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“【 版权申诉】”(推荐),意见反馈和侵权处理邮箱:1219186828@qq.com;也可以拔打客服电话:4008-655-100;投诉/维权电话:4009-655-100。