基于人工智能的地球物理参数反演范式理论及判定条件.pdf
《基于人工智能的地球物理参数反演范式理论及判定条件.pdf》由会员分享,可在线阅读,更多相关《基于人工智能的地球物理参数反演范式理论及判定条件.pdf(11页珍藏版)》请在咨信网上搜索。
1、2023 年 6 月 第 5 卷 第 2 期Jun.2023 Vol.5,No.2智慧农业(中英文)Smart Agriculture基于人工智能的地球物理参数反演范式理论及判定条件毛克彪1,2,3*,张晨阳4,施建成5,王旭明2,郭中华2,李春树2,董立新6,吴门新7,孙瑞静6,武胜利6,姬大彬3,蒋玲梅8,赵天杰3,邱玉宝3,杜永明3,徐同仁8(1.中国农业科学院农业资源与农业区划研究所 北方干旱半干旱耕地高效利用全国重点实验室,北京 100081;2.宁夏大学 物理与电子电气工程学院,宁夏银川 750021;3.中国科学院空天信息创新研究院 遥感科学国家重点实验室,北京 100094;4
2、.北京大学 环境科学与工程学院,北京 100871;5.中国科学院国家空间科学中心,北京 100190;6.国家卫星气象中心,北京 100081;7.国家气象中心,北京 100081;8.北京师范大学 地理科学部,北京 100875)摘要:目的目的/意义意义人工智能(Artificial Intelligence,AI)技术已在学术和工程应用领域掀起了研究高潮,在地球物理参数和农业气象遥感参数反演方面也表现出了强大的应用潜力。目前大部分AI技术在地学和农学的应用还是“黑箱”,没有物理意义或缺乏可解释性及通用性。为了促进AI在地学和农学的应用和培养交叉学科的人才,本研究提出基于AI耦合物理和统计
3、方法的地球物理参数反演范式理论。方法方法首先基于物理能量平衡方程进行物理逻辑推理,从理论上构造反演方程组,然后基于物理推导构建泛化的统计方法。通过物理模型模拟获得物理方法的代表性解以及利用多源数据获得统计方法代表性的解作为深度学习的训练和测试数据库,最后利用深度学习进行优化求解。结果和讨论结果和讨论判定形成具有通用性和物理可解释的范式条件包括:(1)输入与输出变量(参数)之间必须存在因果关系;(2)输入和输出变量(参数)之间理论上可以构建闭合的方程组(未知数个数少于或等于方程组个数),也就是说输出参数可以被输入参数唯一确定。如果输入参数(变量)和输出参数(变量)之间存在很强的因果关系,则可以直
4、接使用深度学习进行反演。如果输入参数和输出参数之间存在弱相关性,则需要添加先验知识来提高输出参数的反演精度。此外,本研究以农业气象遥感中的关键参数地表温度、发射率、近地表空气温度和大气水汽含量联合反演作为案例对理论进行了证明,分析结果表明本理论是可行的,并且可以辅助优化设计卫星传感器波段组合。结论结论本理论和判定条件的提出在地球物理参数反演史上具有里程碑意义。关键词:人工智能;深度学习;反演范式;物理逻辑推导;可解释;农业气象遥感中图分类号:TP181;P313.3文献标志码:A 文章编号:SA202304013引用格式:毛克彪,张晨阳,施建成,王旭明,郭中华,李春树,董立新,吴门新,孙瑞静,
5、武胜利,姬大彬,蒋玲梅,赵天杰,邱玉宝,杜永明,徐同仁.基于人工智能的地球物理参数反演范式理论及判定条件J.智慧农业(中英文),2023,5(2):161-171.DOI:10.12133/j.smartag.SA202304013MAO Kebiao,ZHANG Chenyang,SHI Jiancheng,WANG Xuming,GUO Zhonghua,LI Chunshu,DONG Lixin,WU Menxin,SUN Ruijing,WU Shengli,JI Dabin,JIANG Lingmei,ZHAO Tianjie,QIU Yubao,DU Yongming,XU Ton
6、gren.The paradigm theory and judgment conditions of geophysical parameter retrieval based on artificial intelligenceJ.Smart Agriculture,2023,5(2):161-171.DOI:10.12133/j.smartag.SA202304013(in Chinese with English abstract)1 引 言以ChatGPT为代表的生成式人工智能(Artificial Intelligence,AI)的出现和升级使得AI进一步受到人们的广泛关注,AI成
7、为新一轮产业变革的核心驱动力,将进一步释放科技创新的巨大能量,并创造新的强大引擎。AI与具体的行业结合将催生新技术和新产品,深刻改变人类思维和生产模式,实收稿日期:2023-04-24基金项目:风云卫星应用先行计划(FY-APP-2022.0205);第二次青藏高原综合科学考察研究(2019QZKK0206XX-02);遥感科学国家重点实验室开放基金(OFSLRSS202201)*通信作者:毛克彪,博士,研究员,研究方向为人工智能在地学和农学中的应用。E-mail:Vol.5,No.2智慧农业(中英文)Smart Agriculture现社会和行业生产力的整体跃迁。深度学习是目前AI领域最重要
8、的技术之一,在学术领域和工程应用掀起了研究高潮,并在自然语言生成模型、计算机视觉、语音识别等多个领域取得了显著的研究成果。鉴于深度学习在地学和农学领域的应用潜力和重要性,为促进AI在地学和农业领域的应用,必须加快 AI 与遥感技术的深度融合,为气象预报、农情监测和农业灾害预报等提供关键技术支撑1-5,为全球灾害监测和国家粮食安全服务。根据2022年国家统计年鉴,中国年均农业气象灾害受灾面积达1207.16万公顷,仅2022年气象灾害造成的直接经济损失就高达2386亿人民币。因此,快速准确获取农业气象关键参数信息对于科学指导农业气象防灾减灾、作物估产确保国家粮食安全等具有重要意义6-8。美国、日
9、本和欧盟等相继研发气象卫星关键参数反演系统,中国自20世纪90年代开始研究气象卫星参数反演技术,虽然都已经取得了很大的进展,但仍然遇到一些瓶颈,如未知数多于方程的个数、相对入射角变化和混合像元等问题9。近年来,在计算机硬件技术和 AI技术迅速发展相互辅助下,AI显示出了强大的优势10。因此研究如何将AI技术与地学,特别是与农业气象遥感参数传统反演物理和统计方法结合,发展具有物理意义和可解释的AI算法对提升遥感参数反演精度和对完善地球物理参数反演范式理论具有重要意义,同时为智慧农业和智慧地球提供关键的监测参数11-14。2 地球物理参数反演范式理论与判定条件 建立学科体系知识一般遵循三个步骤:首
10、先从物理角度观察现象,其次用数学方法描述物理现象,最后从工程的角度去解决数学问题。“AI地球物理参数反演范式理论”可以表述为:如果目标信息(问题)在理论或物理逻辑上可以用数学方程描述(即可以在空间中可以形成唯一的解曲线),那么AI方法可以通过大数据学习和优化计算耦合物理方法和统计方法求解方程。这使得耦合方法不但具有物理方法和统计方法各自的优势,同时充分利用了深度学习的优化计算能力,最大限度地提高了地球物理参数的反演精度。这样保证了反演范式不仅具有通用性,而且具有物理意义和可解释性。具体地,本研究提出的地球物理参数反演范式理论是使深度学习的输入参数(变量)和输出参数(变量)之间可以构建一套完整的
11、闭合方程组。如果输入参数(变量)和输出参数(变量)之间存在强因果关系,则可以直接使用深度学习进行反演并获得高精度的反演结果。如果输入参数和输出参数之间存在弱相关性,则需要添加强相关性的先验知识和交叉迭代来提高输出参数的反演精度。可以通过物理模型模拟得到物理方法的大量代表性解,然后使用深度学习通过训练获得解的曲线函数。因此通过大数据模式的深度学习可以重复该物理方法。同时很多物理方法不能描述所有情况,为了克服物理方法的不足,基于物理逻辑推理,进一步构建泛化的统计方法,并通过多源数据获得统计方法的解来弥补物理方法的不足。其实从信息流传递的角度来说,深度学习网络更能符合现实情况,物理方法和统计方法是其
12、中的部分表现形式。这些方法本质上一致,均是人们用来认识世界的一种手段,在不同认知程度上解读和解决现实问题。判定基于深度学习的地球物理参数反演形成是否具有通用性和物理可解释范式的条件有两个:(1)深度学习的输入与输出变量(参数)之间必须存在因果关系,即在其他条件不变的情况下,改变任何一个输入变量,输出变量会发生变化。设深度学习输入变量为xi,输出变量为yj,则因果关系表示为公式(1)。yj=f(xi)(1)其中,i=1,2,n;j=1,2,m;f表示某种因果关系函数。(2)深度学习的输入和输出变量(参数)之间理论上可以构建闭合的方程组(未知数个数少于或等于方程组个数),也就是说输出参数可以被输入
13、参数唯一确定,用数学方程可以表示为公式(2)。F(x,y)=0(2)其中,x=x1,x2,xn;y=y1,y2,ym;F表示一个由k个方程组成的向量函数。为了使输出参数可以被输入参数唯一确定,需要满足k m这个条件。为论证深度学习的使用具162毛克彪等:基于人工智能的地球物理参数反演范式理论及判定条件Vol.5,No.2有物理意义,在研究时必须进行物理逻辑推理。输入变量和输出变量之间存在因果关系且理论上也能构造足够的方程组时,如果输入变量和输出变量之间存在强相关性,则可以进行直接反演计算且可以保持高精度;但如果输入变量和输出变量之间是弱关系,要保证获得较高精度则需要利用强相关性变量作为先验知识
14、。深度学习的应用不能脱离具体的问题或对象,如图1所示,本研究在解决某个应用问题时,首先要对问题对象进行物理逻辑推理,从理论上构造方程,确定输入变量和输出变量之间的因果关系;其次从方程里面的未知数个数确定方程组的个数,也就是确定几个输入参数能唯一确定输出变量;再次通过分析确定利用物理模型是否可以模拟得到所有代表性的解,如果得不到,则构建基于物理逻辑推理的泛化的统计方法10,12,利用多源数据补充代表性的解;然后利用大数据技术和深度学习优化求解物理和统计方法解的空间曲线函数;最后进行验证和反复迭代,达到精度后停止优化计算12,13,15。如果应用深度学习时,没有证明或不能证明存在上述两个条件,则一
15、般认定深度学习的应用为“黑箱”16,17。如果能证明输入和输出参数之间肯定不存在闭合的关系(未知数个数大于方程组个数),那么这样的应用只适合于局部区域,不能通用和很难具备移植性,因此不能称为范式。图1 地球物理参数反演范式理论与判定条件Fig.1 The paradigm theory and judgment conditions of geophysical parameter retrieval163Vol.5,No.2智慧农业(中英文)Smart Agriculture3 地球物理参数反演范式理论案例分析论证 3.1 物理逻辑推理农业气象遥感关键参数是地球物理参数的重要组成部分,本研究
16、以农业气象遥感关键参数为例对地球物理参数反演范式理论进行论证。首先进行物理逻辑推理。地表热辐射在通过大气达到卫星传感器的过程中,主要受地表类型和土壤水分(Soil Mositure,SM)、地表温度(Land Surface Temperature,LST)、近 地 表 空 气 温 度(Near Surface Air Temperature,NSAT)和大气水汽含量(Water Vapor Content,WVC)等的影响。地表温度和土壤水分反演是基于地表热辐射传导及其通过大气到达传感器的传送物理过程,其反演方程通常可以用公式(3)描述,如图2所示。公式(3)中,B(T)(已知数)为卫星接收
17、的星上辐射,(1-()(1+(1-)()B(Ta)为大气辐射贡献,B(Ts)()为地表辐射。其中,()为大气透过率(未知数),Ts为地表温度(未知数),Ta为近地表空气温度(未知数),为地表发射率(未知数),即一个方程至少有4个未知数。需要说明的是观测角度其实也是一个未知数,每个像元中不同地物的组合导致相对入射角变化很大,很难被准确地确定。由于地球物理参数之间存在内在的制约关系,可以利用卫星参数之间的相互制约关系减少一个未知数18-21。从图2可以看出,不同的参数之间是相互影响和纠缠的。氮、磷、钾溶解在土壤水分里面,土壤水分的变化影响介电常数变化,从而改变发射率,发射率变化影响地表的辐射效率,
18、而地表温度变化决定土壤水分的蒸发速度,从而影响与近地表空气的能量交换和改变近地表空气温度以及大气剖面温度。理论上讲,土壤水分的变化也会影响热红外波段发射率的变化,但传统算法中没有考虑到这一点,一般认为热红外波段的发射率是相对不变的,其实也随土壤和植被含水量的变化而变化。因此在降雨比较多的地方,热红外遥感传统方法反演地表温度的精度波动相对较大,但AI方法可以克服这个困难。近地表空气温度的变化影响大气剖面,从而影响大气平均作用温度。在地表热辐射经过大气时,被大气水汽吸收,然后到达卫星传感器。因此,从物理逻辑推理可知9,10,12,14,单个方程中有4个未知数。如果没有先验知识,必须至少有4个热红外
19、窗口波段从理论上构建反演方程;如果有大气水汽作为先验知识,也可以只需要3个热红外波段。以往大部分研究主要是针对单个参数进行反演,由于不同参数之间相互纠缠,利用AI方法进行联合反演和交叉迭代可以提高反演精度9,10。在进行物理逻辑推理后确定物理方法的理论构建后,在实际应用研究中发现,只利用物理模型建立的方法精度不是十分可靠,因为物理模型对真实世界进行了简化,而且很多地学模型也只适合部分情况1-5。因此,为了尽可能地满足更多的情况,还要基于物理逻辑推理进一步建立泛化的统计方法,这样才能保证方法的完整性和精度的可靠性7-13。MODIS卫星传感器是目前热红外波段数量和质量最好的传感器之一,本研究将针
20、对MODIS的热红外波段进行模拟和论证分析。选定MODIS波段 27/28/29/31/32/33(6.513.5 m),其中 MODIS波段 27、28 和 29 在是热红外波段的水汽吸收区,波段31和32在热红外波段的窗口区,33波段在热红外波段窗口区的边缘上。将利用JPL(http:/speclib.jpl.nasa.gov)测量的地物波普曲线在MODIS波段 27/28/29/31/32/33 的发射率作为 MODTRAN4 的输入参数,地表温度变化范围为273325 K,近地表空气温度变化范围为273320 K,大气水汽含量注:参数为土壤水分、地表温度、近地表空气温度和大气水汽含量图
21、2 农业气象遥感参数之间的关系Fig.2 The relationship between agricultural meteorological remote sensing parameters164毛克彪等:基于人工智能的地球物理参数反演范式理论及判定条件Vol.5,No.2变化范围0.14.0 g/cm2,模拟观测角为045。当模拟观测角度过大时,由于斜路径上的水汽过大导致透过率过低,因此对这部分模拟数据进行了去除。将模拟数据随机分成两部分:训练数据45,650组,测试数据16,550组。根据传感器上获得不同参数信息量的多少,将不同的参数反演划分成三组,分别对地球物理参数理论和判别条件
22、进行论证分析。第一组反演地表温度和发射率,主要分析和论证输入变量和输出变量之间的方程组个数和因果关系对反演精度影响;第二组反演近地表空气温度,主要分析和论证利用输入和输出变量之间强相关性变量作为先验知识,提高弱关系反演变量的精度;第三组反演大气水汽含量,主要分析论证当输入和输出变量之间存在强相关性时,添加先验知识可以提高反演稳定性,但对精度提高不明显。3.2 地表温度和发射率反演在3.1节的物理逻辑推理中可知,反演地表温度至少需要4个热红外波段组成辐射传输方程组,意味着当输入热红外波段少于4个时,反演精度不高。表1是MODIS波段29、31和32组合在给定条件下的理论反演精度。从表1中可以看出
23、,当隐含层是9层且每层隐含节点都为700时,平均理论精度最高为 1.13 K,标准差为 1.17 K,相关系数为0.988。表 2 是 MODIS 波段 28-29-31-32 组合反演的误差信息表。从表2中可以看出,当隐含层是9并且每层节点为 800 时反演精度最高。最高平均精度为 0.45 K,标准差为 0.53 K 和相关系数为 0.998。从表 1 和表 2 可以看出,当用 4 个热红外波段时,平均精度提高了0.68 K。MODIS波段28是水汽吸收波段,增加热红外水汽吸收波段可以提高反演精度。当只用两个热红外波段(波段31和32)反演时,反演误差接近2 K,因此传统劈窗算法必须获得大
24、气水汽和地表发射率作为先验知识。而反演精度要达到1 K以内,至少需要4个热红外波段,或者2个热红外波段加高精度的地表发射率和水汽作为先验知识,也就证明了基于AI的热红外遥感地表温度高精度反演需要理论上满足方程闭合的条件。表3是MODIS波段27-28-29-31-32波段组合时反演的地表温度误差信息表,从表3中可以看出当隐含层数9、每层隐含节点是900时,反演精度最高。平均最高精度是0.44 K,标准差是0.52 K,相关系数是0.999。MODIS 27波段也是水汽波段,增加水汽吸收波段能够提高水汽的精度,理论上可以提高整体反演精度。这里精度提高不明显,主要原因是波段27的地面辐射几乎很难穿
25、透达到传感器,也就说透过率非常低,星上亮温主要包含的是高空大气水汽信息,因此对地表温度反演精度贡献不是非常大,但增加了反演的稳定性。表 4 是 MODIS 波段 27-28-29-31-32-33 作为输入参数时的反演误差信息表,当隐含层是8并且每表1 波段29-31-32组合时地表温度反演误差Table 1 Retrieval errors of surface temperature for band 29-31-32 combination隐含层78910隐含节点600M/K1.511.421.331.27SD/K1.411.321.252.04R0.9120.9250.9320.912
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 基于 人工智能 地球物理 参数 反演 范式 理论 判定 条件
1、咨信平台为文档C2C交易模式,即用户上传的文档直接被用户下载,收益归上传人(含作者)所有;本站仅是提供信息存储空间和展示预览,仅对用户上传内容的表现方式做保护处理,对上载内容不做任何修改或编辑。所展示的作品文档包括内容和图片全部来源于网络用户和作者上传投稿,我们不确定上传用户享有完全著作权,根据《信息网络传播权保护条例》,如果侵犯了您的版权、权益或隐私,请联系我们,核实后会尽快下架及时删除,并可随时和客服了解处理情况,尊重保护知识产权我们共同努力。
2、文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为仲裁依据,个别因单元格分列造成显示页码不一将协商解决,平台无法对文档的真实性、完整性、权威性、准确性、专业性及其观点立场做任何保证或承诺,下载前须认真查看,确认无误后再购买,务必慎重购买;若有违法违纪将进行移交司法处理,若涉侵权平台将进行基本处罚并下架。
3、本站所有内容均由用户上传,付费前请自行鉴别,如您付费,意味着您已接受本站规则且自行承担风险,本站不进行额外附加服务,虚拟产品一经售出概不退款(未进行购买下载可退充值款),文档一经付费(服务费)、不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
4、如你看到网页展示的文档有www.zixin.com.cn水印,是因预览和防盗链等技术需要对页面进行转换压缩成图而已,我们并不对上传的文档进行任何编辑或修改,文档下载后都不会有水印标识(原文档上传前个别存留的除外),下载后原文更清晰;试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓;PPT和DOC文档可被视为“模板”,允许上传人保留章节、目录结构的情况下删减部份的内容;PDF文档不管是原文档转换或图片扫描而得,本站不作要求视为允许,下载前自行私信或留言给上传者【自信****多点】。
5、本文档所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用;网站提供的党政主题相关内容(国旗、国徽、党徽--等)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
6、文档遇到问题,请及时私信或留言给本站上传会员【自信****多点】,需本站解决可联系【 微信客服】、【 QQ客服】,若有其他问题请点击或扫码反馈【 服务填表】;文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“【 版权申诉】”(推荐),意见反馈和侵权处理邮箱:1219186828@qq.com;也可以拔打客服电话:4008-655-100;投诉/维权电话:4009-655-100。