-
摘要: 合成孔径雷达三维成像技术(3D SAR)能通过孔径维度扩展实现三维成像能力,但数据维度大、系统实现难、成像分辨率低。压缩感知稀疏重构技术在简化3D SAR系统、提升成像质量等方面展现出巨大潜力,但面临计算复杂度高、参数设置困难、弱稀疏场景适应差等新问题,制约了其实际应用。针对上述问题,该文结合卷积神经网络的特征学习及迭代算法的深度展开理论,提出了基于自学习稀疏先验的3D SAR成像方法。首先,探讨了常规3D SAR稀疏成像中矩阵向量线性表征模型的局限性,引入成像算子提升成像算法处理效率。其次,讨论了迭代算法映射网络的深度展开模型和实现方式,包括网络拓扑结构设计、算法参数的优化约束及网络的训练方法。最后,通过仿真数据和地面实验,证明了所提方法在提升成像精度的同时,其运行时间较传统稀疏成像算法降低一个数量级。Abstract: The development of 3D Synthetic Aperture Radar (SAR) imaging is currently hampered by issues such as high data dimension, high system complexity, and low imaging processing efficiency. Sparse SAR imaging has grown in importance as a research branch in SAR imaging due to the high potential of sparse signal processing techniques based on Compressed Sensing (CS) to show high potential in reducing system complexity and improving imaging quality. However, traditional sparse imaging methods are still constrained by high computational complexity, nontrivial parameter tuning, and poor adaptability to weakly sparse scenes. To address these issues, we propose a new 3D SAR imaging method based on learned sparse priors inspired by the deep unfolding concept. First, the limitations of the matrix-vector linear representation model are discussed, and an imaging operator is introduced to improve the algorithm’s imaging efficiency. Furthermore, this research focuses on algorithm network details, such as network topology design, the problem of complex-valued propagations, optimization constraints of algorithm parameters, and network training details. Finally, through simulations and measured experiments, it is proved that the proposed method can improve the imaging accuracy while reducing the running time by more than one order of magnitude compared with the conventional sparse imaging algorithms.
-
Key words:
- 3D SAR /
- Deep learning /
- Deep unfolding /
- Sparse representation /
- Sparse imaging
-
1. 引言
城市环境下的反恐作战、灾害救援等行动中,作战、救援人员往往需要深入陌生建筑物内部,缺少建筑物内部结构信息将对行动的顺利开展以及人员的安全产生较大威胁。因此,研究建筑物内部结构的穿透探测,具有重要的现实意义和研究价值。在不破坏现场的情况下,声波、红外、低频电磁波等探测技术均能够不同程度地实现穿透探测,这其中,低频电磁波探测在可穿透墙体类型、探测范围、探测精度等指标上最为突出,因此成为建筑物内部结构穿透探测的研究热点[1]。本文将围绕基于低频电磁波的建筑物内部结构穿透探测技术,回顾21世纪初以来科研人员在该领域中所做出的努力。
利用低频电磁波的穿透特性获取建筑物内部信息的典型代表是穿墙雷达技术,由于建筑物本身几乎不存在任何运动,因此利用穿墙雷达进行合成孔径雷达(Synthetic Aperture Radar, SAR)成像来获得大面积高分辨率图像成为自然而然的选择。考虑到建筑物本身的特性,穿墙探测中的SAR扫描往往沿着建筑物的外墙进行,研究人员由此开展了多种观测模式的研究,例如沿单侧外墙扫描的单视角观测模式[2]、沿垂直和水平侧外墙扫描的多视角观测模式[3]、单视角下的多高度基线观测模式[4,5]、固定位置下的多斜视角观测模式[6]、多极化观测模式[7]等。这些研究的主要目的是获得建筑物内部结构的成像结果,其核心是基于反射波测量的穿墙雷达成像技术,雷达系统的收发天线往往位于建筑物同一外侧,通过运动收集建筑物内部物体的反射回波,最后利用穿墙雷达成像技术来估计建筑物内部结构。
除此之外,基于透射波测量的射频层析成像(Radio Tomographic Imaging, RTI)技术[8]与基于多径信号的墙体位置估计技术[9],也因在建筑物结构探测中具有各自独特的优势而为人关注。前者的收发天线分置于建筑物不同外侧,信号从建筑物的某一外侧出发,穿过建筑物并被另一外侧的接收系统采集,最后通过反演信号衰减率的空间分布来获得建筑物内部结构信息;后者的雷达固定在某个位置,以凝视模式探测室内运动目标,利用目标真实运动轨迹与其多径信号形成的虚假轨迹之间的几何关系来估计室内墙体位置。
基于穿墙雷达成像技术的建筑物结构穿透探测是目前主流的探测方案,墙后静止目标成像则是其核心内容[10,11]。有鉴于此,本文将首先简要介绍穿墙雷达墙后目标的成像原理,然后讨论基于穿墙雷达的建筑物内部结构观测模式的发展历程,接着介绍典型的基于穿墙雷达成像技术的建筑物内部结构重建方法,之后介绍RTI与基于多径信号的墙体位置估计这两种探测技术,最后对建筑物内部结构穿透探测这一领域的发展特点进行总结。
2. 穿墙雷达墙后静止目标成像原理
穿墙透视成像与其他成像技术的区别在于,穿墙探测时,墙体会改变信号的传播路径。图1给出了建筑物内部结构探测过程中信号传播路径的常用简化模型,天线被设置为沿着平行于墙体的方向运动,信号由A点发出后,经B点进入墙体,又经C点离开后到达目标D处,经目标反射的回波经C点再次进入墙体,并从B点离开后回到天线A处。
根据穿墙探测中常用的墙体折射模型[12],
${\rm{D}}$ 处的静止理想点目标回波可以被简写为S(f,m)=σexp(−j4πflAB(m)+√εlBC(m)+lCD(m)c) (1) 其中,
$f$ 为工作频率,$\sigma $ 为目标反射系数,$m$ 为方位向采样序号,$\varepsilon $ 为墙体相对介电常数,${\rm{c}}$ 为光速,${l_{\rm{AB}}}\left( m \right)$ 为${\rm{A}}$ 点到${\rm{B}}$ 点的直线距离,其余符号以此类推。墙体的存在,除了对信号造成直接衰减之外,还导致目标在回波中存在额外时延(相对于自由空间传播模型)。站在傅里叶变换的角度来看,${\rm{D}}$ 处的目标成像结果为I(D)=M−1∑m=0∫fvadS(f,m)exp(j4πfrAD(m)c)df (2) 其中,
$M$ 是方位向采样数,${f_{\rm{vad}}}$ 为系统有效工作频段,${r_{\rm{AD}}}\left( m \right)$ 是根据成像模型设定的信号传播路径长度。当${\rm{D}}$ 点遍历场景所有的网格坐标时,利用式(2)即获得了建筑物内部结构的成像结果。式(2)为后向投影(Back Projection, BP)成像方法的实现原理。在传统的SAR成像中,${r_{\rm{AD}}}\left( m \right)$ 一般被假设为${\rm{A}}$ 点到${\rm{D}}$ 点的直线距离,但在穿墙成像中,受墙体折射效应影响,墙后目标的回波信号传播路径长度要大于${\rm{A}}$ 点到${\rm{D}}$ 点的直线距离,如图1所示,在未知墙体参数的情况下,直接采用传统的SAR成像模型会造成墙后目标图像散焦与错位。因此获取建筑物的几何布局和介质参数是实现室内目标精准定位的前提。3. 基于穿墙雷达的建筑物内部结构观测模式的发展
机载与车载SAR系统是最早引入建筑物内部结构探测的穿墙雷达系统,这些大型穿墙雷达具有良好的机动性,在观测规模与效率上具有明显优势。但其缺陷也很明显,即只能工作在建筑物外部进行远距离探测。由于信号每穿透一层墙体,都将发生一定的衰减和变形,穿透的层数越多,累积的衰减与变形越严重,前墙拖尾以及多径等影响也越严重,信号被接收与复原的难度也越大。因此对于结构较为复杂的建筑物,仅依赖外部探测很难正确估计建筑物的内部结构。一种解决手段是逐层推进深入建筑物内部进行观测,虽然其效率较低,但往往能获得更好的观测性能。为此,雷达系统需要被设计得体积更小、重量更轻、功耗更低。一些原本用于室内人员探测的小型多输入多输出(Multi-Input Multi-Output, MIMO)穿墙雷达因而也被应用于探测建筑物的内部结构,相比于大型穿墙雷达,小型MIMO穿墙雷达更为灵活,能够被操作员带入室内环境使用,有效扩大了建筑物内部结构的可观测范围。另一些被设计搭载在小型机器人平台上的穿墙雷达则进一步扩展了雷达操作的灵活性,此类穿墙雷达甚至能进入操作员无法到达的某些位置进行探测。
3.1 室外主动雷达观测模式的发展
美国斯坦福国际研究院Falconer等人[13]于2000年就提出了基于机载SAR的平面图雷达(Floor Plan Radar, FPR)穿墙探测方案。FPR可以获得任意高度下的探测结果,因此是高层建筑物穿墙探测的有效解决方案,但受限于当时的低空飞行器技术,FPR的实现复杂度与成本较高,其性价比明显低于车载平台,此后并未见后续报道。
车载平台上,最早具有实用意义的建筑物内部结构成像系统是2008年由美国陆军实验室Nguyen等人[2]所公布的超宽带同步脉冲重构(Synchronous Impulse REconstruction, SIRE)车载穿墙雷达系统,SIRE工作在侧视SAR模式,沿着建筑物的某一墙体基线运动,从而得到建筑物的单视角观测结果。实验室研究人员还给出了多份针对复杂封闭建筑物内部结构探测的仿真报告[14,15]。单视角观测无法直接得到垂直视角上的结构信息,2008年美国维拉诺瓦大学Ahmad等人[3]提出了穿墙成像中的多视角观测融合技术,首先使雷达沿两个相互垂直的墙体基线进行扫描,得到不同视角下的子图像,而后引入指数因子来实现子图像融合,不过Ahmad等人并没有给出最优指数因子的选取方法。次年,美国陆军实验室的Le等人[16,17]给出了SIRE在多视角探测模式下的实测结果,采用了非相干叠加的方式实现子图像之间的融合,最终获得了相对完整的建筑物结构成像结果,如图2所示。
由于并非任何时候都能够沿不同的墙体基线进行扫描,2011年澳大利亚伍伦贡大学Seng等人[4,5]提出了基于俯仰向的多视角观测方案,在某一面墙上设置多个高度基线对墙后场景进行观测,他们同时也提出了基于模糊逻辑的图像融合方法,多高度基线的观测方式虽然只能获得单一方向的测绘结果,但却能够有效降低室内场景在不同视线上的拖尾污染。2013年,加拿大国防研发部的Sévigny等人[6]提出沿着同一侧墙体以不同斜视角进行照射,即多斜视角融合也能够提升成像性能。同一时期,多极化探测也被引入穿墙探测之中[7],Seng等人考虑到室内目标具有不同的极化特性,因此将HH, HV, VH, VV 4种极化探测的穿墙结果进行融合,最终得到高信杂比的增强成像结果。除了设法提高墙体本身的成像质量之外,墙角信息在建筑物结构中的特殊地位也引起了研究人员的注意,2016年成都理工大学的Jia等人[18]提出了一种基于MIMO穿墙雷达的单边双点观测模式,仅需将雷达摆放在两个不同的观测视角对建筑物进行斜视探测,就可对建筑物的4个墙角以及内部目标同时进行成像,结果如图3所示。
为了更高效地获得建筑物内部结构信息,研究人员开始在穿墙探测中引入MIMO-SAR模式,MIMO阵列内部不存在运动误差,对空间采样点的数目与密度要求也远低于传统SAR模式,因此逐渐受到研究人员的青睐。2009年荷兰应用科学院deWit等人[19,20]报告了使用极化干涉相控阵合成孔径雷达装备(Synthetic Aperture Polarimetric PHased array Interferometer Radar Equipment, SAPPHIRE)的建筑物3D成像结果,如图4所示。SAPPHIRE在方位向上采用直线SAR扫描模式,在俯仰向上采用MIMO虚拟阵列模式,通过对场景中墙体、不同墙体交汇形成的二面角、墙体与地板形成的三面角等主要散射体的定位与识别,来获取建筑物的三维结构。2010年美国俄亥俄州立大学Browne等人[21]则设计了一款可携带的3D穿墙成像雷达,采用小型二维MIMO阵列,通过设置若干快拍点的形式进一步简化了方位向的扫描过程。相比于传统SAR模式,MIMO-SAR模式有效提高了探测效率,但也带来了栅瓣与非均匀采样等问题,国防科技大学Song等人[22]针对MIMO-SAR的观测特点,提出了基于功率谱相干因子加权的增强成像方法,降低栅瓣对室内场景的污染,并在国防科技大学自研的建筑物可视化雷达上得到了验证。
3.2 室内主动雷达观测模式的发展
上述探测均在室外进行,即雷达系统布设于建筑物之外,信号经由外墙向室内辐射的过程中会不断衰减,雷达的探测距离往往受限于信号经过的墙体数目,难以有效探测具有复杂结构的建筑物。为了解决多层墙体的探测问题,一种简单的思路是由外向内逐层推进探测,因此需要雷达系统具有小型化、可移动、低功耗等特征,从而便于在室内环境中工作。
美国国家标准与技术研究院Braga等人[23]于2009年设计出了一款可用于室内穿墙成像的雷达系统,如图5所示,雷达搭载于小型移动平台之上,以SAR模式对其他房间进行扫描,可以实现高分辨的静止场景成像。类似的思路可以追溯到2000年由Falconer等人[24]提出的基于机器人平台的穿墙成像雷达。除了设计专门的小型移动平台外,扩展面向室内运动目标探测的小型便携式MIMO穿墙雷达的使用功能,使其具备对建筑物内部结构的探测也是一种可行的思路[25]。
Braga等人只是将雷达系统由室外搬移到了室内,并没有改变观测过程本身。与上述研究不同,2010年Sakamoto等人[26]仅利用位于建筑内部的单发单收天线所采集的墙体散射回波,通过找到回波时延与传播路径的最佳匹配组合,进而估计出了建筑内部的几何布局,并基于仿真试验验证了该方法的可行性。2016年美国密歇根大学Yektakhah等人[27]则提出了全方向(all-directions)穿墙雷达建筑物结构探测方案,全方向穿墙雷达系统工作于室内环境,其发射单元固定在中心位置,接收单元围绕发射单元进行圆周运动,探测圆圈外的建筑物布局。全方向探测的一大优势是雷达在各个角度上保持了相同的方位向分辨率,有效避免了不同方位上目标在成像中产生的畸变。在后续的研究成果中他们给出了这一方案的实验样机与初步的实验结果[28,29],如图6所示。
3.3 被动雷达观测模式
上述观测模式都是以主动雷达为基础,即雷达平台本身承担了发射信号照射场景的任务。除此之外,基于被动合成孔径雷达(Passive Synthetic Aperture Radar, PSAR)技术的穿墙探测方案也被研究人员提出[30],由于可以采用广泛存在的电视广播等第三方信号,基于PSAR技术的建筑物内部结构探测具备良好的研究与应用前景。
4. 基于穿墙雷达成像技术的建筑物内部结构重建方法
基于穿墙雷达成像技术的建筑物内部结构重建方法,在算法模型或重建过程中依赖雷达成像技术,不过受分辨率、栅旁瓣、外墙拖尾、多径等因素影响,直接进行雷达成像处理的结果往往难以辨识,特别是对于一些内部面积狭小、结构复杂的建筑物,还需要辅以其他处理技术,才能得到相对清晰完整的建筑物内部结构布局图。典型的重建技术包括电磁仿真拟合技术、图像增强技术、基于图理论的最优估计技术以及稀疏重构技术等。
4.1 基于电磁仿真拟合技术的建筑物内部结构重建
2006年美国国防高级研究计划局(Defense Advanced Research Projects Agency, DARPA)Baranoski等人[31]做了名为VisiBuilding项目的专题报告,分析了建筑物布局信息对城市巷战的重要意义,提出了机载、车载、单兵等多套系统相组合的建筑物布局探测模型[32],如图7所示。VisiBuilding项目中的基于模型的建筑物3D结构反演技术,设想在多系统的穿墙成像结果与电磁仿真模型之间形成闭环迭代结构,通过不断降低实测回波与电磁仿真模型之间的差异,最终得到精确的建筑物墙体、楼梯、门等的3D结构。2008年美国密西根理工学院Subotic等人[33]参照这一设想进行了相关的电磁仿真实验。执类似想法的还有意大利SELEX Sistemi Integrati公司的Buonanno等人[34],设想利用全波模型来生成与实际回波匹配的仿真模型,从而反推建筑物结构。相比于具体的技术,建筑物3D结构反演更接近于一种方案设想,其实现难度如此之大,以至于到目前都没有看到相关后续报道。
4.2 基于图像增强技术的建筑物内部结构重建
典型的基于图像增强技术的建筑物内部结构成像技术,是2009年由斯洛伐克Košice技术大学Aftanas等人[35,36]提出的,利用图像处理中的边缘检测与Hough变换来处理穿墙成像结果,通过提取墙体的直线结构来获得相对直观的建筑物结构信息,如图8所示。
另一种以图像增强技术为基础的建筑物内部结构重建技术是由电子科技大学贾勇等人[37]于2013年提出的M-N-K检测器,M-N-K检测器首先被成功应用于电磁仿真数据,在将各子视角的成像结果归一化后利用M-N-K检测器进行融合,并结合Hough变换去除融合结果中的毛刺。2014年M-N-K检测器在实测数据上得到了验证[38],如图9所示。M-N-K检测器不需要知晓墙体参数,容易与传统雷达成像方法结合,具有很强的实用性,但也正因为不考虑墙体参数补偿,最终得到的建筑物布局相对粗糙。2015年,电子科技大学姚雪[39]提出了灰度线变换结合频域滤波的建筑物内部结构图像优化方法,对多视角融合成像时的子视角不均衡问题进行了改善。
为解决单一尺度域下图像增强成像效果不佳的缺点,桂林电子科技大学唐茜等人[40]于2019年提出了一种基于多方位多尺度的建筑布局成像方法。该方法首先对方位向进行二维匹配滤波,再通过非下采样Contourlet变换将多视角下不同频率成分按照不同融合准则进行融合。仿真与实测数据的处理结果表明该方法能够有效增强建筑布局图像的轮廓和细节信息,如图10所示。
此外,2019年成都理工大学的Jia等人[41]提出了基于生成对抗网络的建筑物结构重建方法,将深度学习思想引入以图像处理技术为基础的建筑物内部结构重建技术中。该方法通过训练生成对抗网络,建立原始雷达图像与标签清晰结构图像之间的映射关系,实现多径和栅旁瓣鬼影干扰在原始雷达图像中空间分布特征的解析,进而生成期望的清晰结构图像,电磁仿真结果如图11所示,初步验证了生成对抗网络在简单标准建筑物结构重建方面的优异性能,不过对于复杂建筑物结构和实际雷达成像数据的处理性能,还需要进一步验证和优化。
4.3 基于图理论的建筑物内部结构最优估计技术
基于图理论的建筑物内部结构最优估计技术在2014年由国防科技大学陈波等人[42-44]提出,在详细分析了墙角散射的空变特性后,他们利用最小生成树(Minimum Spanning Tree, MST)算法获得了建筑物内部结构的最优估计,如图12所示。与其他方法相比,这一方法能够获得高精度的建筑物内部结构矢量图。
4.4 基于稀疏重构技术的建筑物内部结构重建
压缩感知技术兴起后,西班牙加泰罗尼亚理工大学Lagunas联合美国维拉诺瓦大学Amin等人[45]在2012年开始尝试利用稀疏重构技术在回波域直接重建墙体回波,以降低雷达成像时墙体拖尾对墙后目标的污染,不过仅依赖稀疏约束容易造成目标割裂,他们进一步采用直线结构来辅助墙体的重建[46],仿真数据验证了这一方法对建筑物内部结构成像的改善,结果如图13所示。
2018年,国防科技大学金添等人[47]提出了单侧墙体方向观测模式下的建筑结构稀疏成像方法,利用传统雷达成像技术中的相干因子(Coherence Factor, CF)加权算法来提高稀疏重建中支撑集选取的稳定性与准确性,实测数据的处理结果表明,该方法可以在较少的迭代次数下获得高质量的建筑物结构成像结果,如图14所示。
2019年桂林电子科技大学的Zhao等人[48]提出了基于全变差(Total Variation, TV)正则化的建筑物结构稀疏重构方法,降低了墙后目标结构差异导致的重构损失,仿真实验结果如图15所示。
雷达成像往往是一个病态的逆问题[49],基于雷达成像技术的建筑物内部结构重建算法,虽然种类众多,但本质上都是在成像过程中或成像之后加入额外的正则化约束,从而使重建结果变得稳定,只不过相比于其他的重建方法,稀疏重构技术在算法模型上将这一点体现得更为明显。在重构模型中如何通过增加其他约束,以应对更加复杂的建筑物内部结构,可能是该领域未来的一个研究方向。
5. 其他建筑物内部结构探测技术
除了穿墙成像技术之外,还有两种新型建筑物内部结构探测技术,即RTI技术与基于多径信号的墙体位置估计技术,本节将介绍这两类技术的发展。
5.1 基于RTI的建筑物结构反演技术
RTI主要利用接收信号强度(Received Signal Strength, RSS)信息来反演信号衰减率的空间分布。场景中不同物体对信号存在不同程度的遮蔽作用,信号强度因此会产生额外的衰减,所以信号衰减率的空间分布即是对建筑物内部结构的一种刻画。严格来说,RTI并非雷达技术,甚至与雷达技术有本质区别。RTI接收处理的是透射波,获得的是场景的传输特性,而雷达接收处理的是反射波,获得的是场景的散射特性[8]。将RTI技术应用于室内运动目标探测的研究起步较早,国内外均有研究者提出通过布设多组无线传感器来监测RSS的变化来估计室内目标的运动信息[8,50-52]。相比于运动目标探测,静止场景的RTI难度更大,需要更多的传感器节点以及更为复杂的反演技术。
2008年美国新墨西哥大学Mostofi等人[53]结合压缩感知技术建立了静止场景RSS分布的压缩映射模型,即在传统的线性RTI模型中增加了稀疏正则化约束,提出利用合作的移动无线传感器节点,低成本获得场景的RSS分布。2011年Mostofi[54]利用这一模型,将WiFi网卡搭载在小型机器人身上作为探测平台,成功得到了一个T型柱子的平面结构。2013年Mostofi进入美国加州大学工作,此后Mostofi等人[55-58]在利用压缩感知技术进行RTI的研究中,尝试了多种改进方案,包括TV约束下的稀疏重建、贝叶斯压缩感知技术、基于Rytov线性近似的TVAL3 (TV minimization by Augmented Lagrangian and Alternating Direction Algorithms)算法等,最终得到了建筑物二维平面布局信息,如图16所示。
2017年,Karanam等人[59]利用两台小型无人机对建筑物进行同步绕飞来获取探测数据,再结合温特尔-克拉默斯-布里渊(Wentzel-Kramers-Brillouin, WKB)线性近似方法,将三维结构反演问题转化为最小化三维全变差(3D Total Variation, 3D TV)问题,进一步得到了静止建筑物的三维成像结果,如图17所示。
除了稀疏正则化约束之外,其他类型的正则化约束也出现在RTI的研究中。例如2012年美国佐治亚理工学院Hamilton等人[60]提出了射频层析成像与非合作分析(RF Exploitation for Tomographic Imaging and Non-cooperative Analysis, RETINA)算法,在反演模型中追加了Tikhonov正则化约束,RETINA可以同时获得建筑物结构布局与室内运动目标的分布信息,并在仿真实验中表现出了优异的性能,如图18所示。2013年他们又根据建筑物结构中墙体具有互相垂直等特性,将Tikhonov正则化约束替换成了椭圆协方差约束,从而在仿真实验中得到了更高质量的建筑物结构反演结果[61]。
Hamilton等人的反演模型虽然只在仿真实验中得到了验证,但给予了后继研究者很多启发。2018年北京理工大学Xu等人[62]就在Hamilton等人提出的椭圆协方差约束的基础上,利用定向天线取代全向天线以获得更高的信号质量,并进一步加入了像素衰减非负约束,最终在实测实验中获得了更好的反演性能,如图19所示。
2020年中国科学院Guo等人[63]则结合了Mostofi等人与Hamilton等人的研究,利用墙体的厚度与长度具有明显差异的特征,提出使用重新加权全变差(Reweighted Total Variation, RTV)约束代替传统的TV约束,同时借助墙体往往只有水平和垂直这两个方向的先验信息,提出了重新加权全变差与先验信息联合(Reweighted Total Variation and Prior Information, RTV-PIR)算法,RTV-PIR在RTV模型中增加了椭圆协方差约束,进一步改善了反演结果中墙体的不规则现象。
为解决多介质场景成像问题,2020年,电子科技大学Zhang等人[64]在单介质场景成像的研究基础上,考虑将各介质的电磁参数作为先验灰度向量融入迭代求解算法中,提出了一种先验信息约束下的代数重建技术(Priori Information Constrained Algebraic Reconstruction Technology, PIC-ART)算法,在每一轮迭代求解的过程中,加入了各像素值与先验灰度向量的误差约束。相较传统的TV约束方法,所提算法不仅提高了运行效率,同时改善了多介质场景的成像质量,结果如图20所示。
上述针对RTI的研究工作主要利用的是RSS信息,缺少信号的相位信息,难以解决电磁波的多径传播问题,导致直接成像效果较差。为此,2019年电子科技大学的Chen等人[65]尝试将线性调频信号替代窄带信号,并通过对时延谱分析完成了收发天线之间直达路径提取,基于电磁仿真数据实现了建筑结构的反演。次年,中国科学院Guo等人[66]通过所提的时延估计算法完成了基于传播时延的建筑结构层析成像实测验证,结果如图21所示。
除了在建筑物外布设无线传感器节点之外,研究人员也尝试利用建筑物内部的辐射源进行RTI处理。2017年德国慕尼黑工业大学的Holl等人[67]借鉴光学全息成像的思路,将辐射源布置于建筑物内部,在建筑外部部署二维阵面记录电磁波的波前复振幅,通过角谱传播得到了任意深度的二维全息成像结果,如图22所示。电磁仿真结果表明该方法不仅可以获得建筑物的三维成像结果,而且可以实现对辐射源的定位。
总体而言,RTI成像求解过程往往比传统雷达成像更为病态,反演过程更为复杂,但是RTI技术在传感器成本、系统复杂度和布设灵活度等方面,相较于穿墙雷达成像技术具有明显优势,因此具有广阔的发展前景。
5.2 基于多径信号的墙体位置估计技术
基于多径信号的墙体位置估计技术依然属于雷达探测领域,这一技术需要室内存在运动目标。2014年,美国杜克大学Li等人[9]提出了一种基于多径信号的目标定位与建筑布局联合估计方法,首先建立了目标与环境中点散射体和面散射体的参数化位置关系,进而通过多周期多假设跟踪方法同时求解目标位置与散射体位置参数,最终实现了目标位置与建筑布局的同时估计,实验结果如图23所示。
电子科技大学的刘剑刚等人[68,69]于2015年采用一个小孔径穿墙雷达,在单站凝视模式下探测室内人员目标与其多径虚假目标的运动轨迹,再分析真实轨迹与虚假目标轨迹之间的几何关系,最终反向重构侧墙的位置分布,如图24所示。2018年开始,电子科技大学的研究人员对MIMO穿墙雷达中的多径效应[70]、L拐角处的多径效应[71,72]进行了深入研究,为复杂建筑物结构中的墙体位置估计提供了进一步研究的依据。
利用多径定位墙体的方法需要室内运动目标的合作,不可能在任何情况下都实现,但这一方法所需的雷达系统结构简单,易于操作与实现,为建筑物内部结构穿透探测提供了非常新颖的思路。
6. 结束语
本文对建筑物内部结构探测领域近20年来的发展情况进行了简要梳理。从FPR到全方向穿墙雷达,从直接进行雷达成像到复杂的RTI处理,以及利用室内目标的运动信息间接获取建筑物内部结构,无论是探测平台,还是重建方法,建筑物内部结构穿透探测已经取得了许多振奋人心的成果。当然就现有结果而言,目前获得的建筑物内部结构信息还较为简单,只适合提供一些初步的辅助参考服务,不过随着探测系统与重建算法的不断更新发展,这一领域非常有可能出现新的突破。
从本文梳理的结果来看,虽然国外在该领域的研究起步早于国内,但在国内研究人员的努力之下,国内也涌现出很多新颖高效的建筑物内部结构探测方法。不过也应注意到,国内在该领域的创新依然弱于国外,一个非常显著的特点是国外研究人员侧重于系统架构与处理算法的综合改进,国内则更倾向于单纯的算法创新。不过伴随着国内器件水平的提高与制造成本的下降,我们有理由相信,未来国内在该领域的研究将可能取得非常显著的突破。
建筑物内部结构穿透探测有着广阔的应用前景与研究价值,结合目前的发展情况与应用需求来看,一些可能的发展趋势是:
(1) 探测平台将更加轻型化与多样化,特别是结合当前机器人、无人机等技术的发展,未来的穿墙探测会具有更高的空间探测自由度,针对高层建筑物以及地下建筑物等目前几乎尚未涉及的探测对象,开展内部结构穿透探测将变得更加容易;
(2) 多种探测技术的融合将提高建筑物内部结构的探测性能,现有的雷达成像技术与RTI等技术,除了各自独立发展之外,未来将可能出现融合上述技术的探测平台与结构重建方法,从而实现技术互补;
(3) 目前建筑物内部结构探测领域还主要依赖于研究人员手工设计成像模型与方法,而在与之紧密相关的室内人员目标探测领域,已经出现了大量使用人工智能技术的研究成果,未来这些研究很可能会迁移到建筑物内部结构穿透探测领域。
-
算法1 基于核函数的ISTA稀疏成像算法 Alg. 1 ISTA sparse imaging algorithm based on
kernel functions输入:稀疏降采样回波E,相位传播矩阵P,迭代步长$\tau $,迭代
层数T输出:稀疏成像结果$ {{\boldsymbol{X}}^{\left( T \right)}} $ 初始化:$t = 1$, ${{\boldsymbol{X}}^{\left( 0 \right)}} = {\mathcal{M}^{\text{H}}}\left( {{\boldsymbol{E}},{{\bar {\boldsymbol{P}}}}} \right)$; 循环开始 (1) 更新迭代残差:$ {{\boldsymbol{V}}^{\left( t \right)}} = {\boldsymbol{E}} - \mathcal{M}\left( {{{\boldsymbol{X}}^{\left( {t - 1} \right)}},{\boldsymbol{\bar P}}} \right) $; (2) 梯度下降粗估计:$ {{\boldsymbol{R}}^{\left( t \right)}} = {{\boldsymbol{X}}^{\left( {t - 1} \right)}} + \tau {\mathcal{M}^{\text{H}}}\left( {{{\boldsymbol{V}}^{\left( t \right)}},{\boldsymbol{P}}} \right) $; (3) 软阈值收缩去噪: ${ {\boldsymbol{X} }^{\left( t \right)} } = {{\rm{soft}}} \left( { { {\boldsymbol{R} }^{\left( t \right)} },\lambda } \right)$, $t = t + 1$; (4) 迭代判定:若$t \le T$,则重复步骤(1)—步骤(4);否则,结束循环。 循环结束 算法2 LSISTA网络稀疏成像算法 Alg. 2 LSISTA network-based sparse imaging algorithm 输入:稀疏降采样回波E,相位传播矩阵P; 输出:稀疏成像结果$ {{\boldsymbol{X}}^{\left( T \right)}} $ 初始化:加载卷积核预训练权重,$ \left\{ {{w_1},{b_1},{w_2},{b_2}} \right\} $; 循环开始 (1) 根据式(14),由$ \left\{ {{w_1},{b_1},{w_2},{b_2}} \right\} $计算$ {\tau ^{\left( t \right)}} $和$ {\lambda ^{\left( t \right)}} $; (2) 更新迭代残差:$ {{\boldsymbol{V}}^{\left( t \right)}} = {\boldsymbol{E}} - \mathcal{M}\left( {{{\boldsymbol{X}}^{\left( {t - 1} \right)}},{\boldsymbol{\bar P}}} \right) $; (3) 梯度下降粗估计:$ {{\boldsymbol{R}}^{\left( t \right)}} = {{\boldsymbol{X}}^{\left( {t - 1} \right)}} + {\tau ^{\left( t \right)}}{\mathcal{M}^{\text{H}}}\left( {{{\boldsymbol{V}}^{\left( t \right)}},{\boldsymbol{P}}} \right) $; (4) 软阈值收缩去噪:
${ {\boldsymbol{X} }^{\left( t \right)} } = \tilde {\mathcal{T} }\left( {{\rm{soft}}} \left( {\mathcal{T}\left( { { {\boldsymbol{R} }^{\left( t \right)} } } \right),{\lambda ^{\left( t \right)} } } \right) \right)$, $t = t + 1$;(5) 迭代判定:若$t \le T$,则重复步骤(1)—步骤(5);否则,结束循环。 循环结束 表 1 各算法在不同采样率情况下的MAE值
Table 1. MAEs of different algorithms in cases of sampling rate being 70% and 30%, respectively
算法 Profile #1 Profile #2 Profile #3 70% 30% 70% 30% 70% 30% RMA 0.064 0.104 0.075 0.118 0.063 0.105 ISTA 0.024 0.038 0.037 0.058 0.025 0.041 RMIST-Net 0.014 0.022 0.023 0.034 0.015 0.024 LSISTA 0.005 0.012 0.006 0.017 0.005 0.013 表 2 各算法在不同SNR情况下的MAE值
Table 2. MAEs of different algorithms in cases of SNR being 10 dB and 0 dB, respectively
算法 Profile #1 Profile #2 Profile #3 10 dB 0 dB 10 dB 0 dB 10 dB 0 dB RMA 0.089 0.118 0.102 0.135 0.085 0.118 ISTA 0.038 0.071 0.056 0.093 0.038 0.072 RMIST-Net 0.018 0.026 0.030 0.046 0.020 0.029 LSISTA 0.005 0.008 0.006 0.015 0.005 0.009 表 3 仿真和实测系统参数
Table 3. Parameters in simulations and real experiments
参数 三维SAR仿真值 实测系统值 载频(GHz) 77 78.8 带宽(GHz) 4 3.6 孔径尺寸(cm) 100×100 40×40 采样间隔(mm) x : 7.8; z : 7.8 x : 1; z : 2 距离(m) 15 具体指定 表 4 三维SAR成像仿真在不同降采样率下各算法的图像熵评估
Table 4. Image entropy of different algorithms with different sampling rates in simulated 3D SAR imaging
算法 50% 30% Time (s) (CPU/GPU) RMA 2.757 3.128 0.336/— ISTA 0.363 0.387 13.561/— RMIST-Net 0.087 0.062 1.522/0.026 LSISTA 0.299 0.289 7.054/0.033 表 5 三维SAR成像仿真在信噪比下各算法的图像熵评估
Table 5. Image entropy of different algorithms with different SNRs in simulated 3D SAR imaging
算法 10 dB 0 dB Time (s) (CPU/GPU) RMA 2.789 3.155 0.337/— ISTA 0.548 0.884 14.523/— RMIST-Net 0.377 0.632 1.630/0.030 LSISTA 0.379 0.419 6.931/0.036 表 6 图9成像实验中各算法的图像熵评估
Table 6. Image entropy of different algorithms in the experiment of Fig. 9
算法 50% 30% Time (s) (CPU/GPU) RMA 4.530 4.761 0.176/— ISTA 1.125 0.948 6.604/— RMIST-Net 0.749 0.584 0.156/0.010 LSISTA 0.586 0.429 3.461/0.013 表 7 图10成像实验中各算法的图像熵评估
Table 7. Image entropy of different algorithms in the experiment of Fig. 10
算法 50% 30% Time (s) (CPU/GPU) RMA 6.141 5.960 0.135/— ISTA 3.567 3.058 6.086/— RMIST-Net 2.719 2.159 0.115/ 0.009 LSISTA 2.376 1.845 3.103/0.013 表 8 各算法计算复杂度
Table 8. Computational complexity of different algorithms
算法 FLOPs RMA ${N_y}{N_s}\left( {10{{\log }_2}{N_s} + 12} \right)$ ISTA ${N_{{\rm{iter}}} }{N_y}{N_s}\left( {10{ {\log }_2}{N_s} + 12} \right)$ RMIST-Net $ T{N_y}{N_s}\left( {10{{\log }_2}{N_s} + 12} \right) $ LSISTA $ T{N_s}\left( {{N_y}\left( {10{{\log }_2}{N_s} + 12} \right) + 2846} \right) $ 表 9 各算法在不同目标点数时的MAE评估值
Table 9. MAEs in cases of the different number of target points
目标点数 ISTA RMIST-Net LSISTA 99422(37.9%) 0.125 0.121 0.094 24896(9.5%) 0.027 0.026 0.022 6203(2.4%) 0.005 0.005 0.003 -
[1] 杨建宇. 雷达对地成像技术多向演化趋势与规律分析[J]. 雷达学报, 2019, 8(6): 669–692. doi: 10.12000/JR19099YANG Jianyu. Multi-directional evolution trend and law analysis of radar ground imaging technology[J]. Journal of Radars, 2019, 8(6): 669–692. doi: 10.12000/JR19099 [2] 吴一戎, 朱敏慧. 合成孔径雷达技术的发展现状与趋势[J]. 遥感技术与应用, 2000, 15(2): 121–123. doi: 10.3969/j.issn.1004-0323.2000.02.012WU Yirong and ZHU Minhui. The developing status and trends of synthetic aperture radar[J]. Remote Sensing Technology and Application, 2000, 15(2): 121–123. doi: 10.3969/j.issn.1004-0323.2000.02.012 [3] CURLANDER J C and MCDONOUGH R N. Synthetic Aperture Radar[M]. New York: Wiley, 1991. [4] DONOHO D L. Compressed sensing[J]. IEEE Transactions on Information Theory, 2006, 52(4): 1289–1306. doi: 10.1109/TIT.2006.871582 [5] SHI Wuzhen, JIANG Feng, LIU Shaohui, et al. Image compressed sensing using convolutional neural network[J]. IEEE Transactions on Image Processing, 2019, 29: 375–388. doi: 10.1109/TIP.2019.2928136 [6] YANG Xianjun, TAO Xiaofeng, DUTKIEWICZ E, et al. Energy-efficient distributed data storage for wireless sensor networks based on compressed sensing and network coding[J]. IEEE Transactions on Wireless Communications, 2013, 12(10): 5087–5099. doi: 10.1109/TWC.2013.090313.121804 [7] POTTER L C, ERTIN E, PARKER J T, et al. Sparsity and compressed sensing in radar imaging[J]. Proceedings of the IEEE, 2010, 98(6): 1006–1020. doi: 10.1109/JPROC.2009.2037526 [8] CAMLICA S, GURBUZ A C, and ARIKAN O. Autofocused spotlight SAR image reconstruction of off-grid sparse scenes[J]. IEEE Transactions on Aerospace and Electronic Systems, 2017, 53(4): 1880–1892. doi: 10.1109/TAES.2017.2675138 [9] PU Wei and WU Junjie. OSRanP: A novel way for radar imaging utilizing joint sparsity and low-rankness[J]. IEEE Transactions on Computational Imaging, 2020, 6: 868–882. doi: 10.1109/TCI.2020.2993170 [10] DONOHO D L, MALEKI A, and MONTANARI A. Message-passing algorithms for compressed sensing[J]. Proceedings of the National Academy of Sciences of the United States of America, 2009, 106(45): 18914–18919. doi: 10.1073/pnas.0909892106 [11] BOYD S, PARIKH N, CHU E, et al. Distributed optimization and statistical learning via the alternating direction method of multipliers[J]. Foundations and Trends® in Machine Learning, 2011, 3(1): 1–122. doi: 10.1561/2200000016 [12] BECK A and TEBOULLE M. A fast iterative shrinkage-thresholding algorithm for linear inverse problems[J]. SIAM Journal on Imaging Sciences, 2009, 2(1): 183–202. doi: 10.1137/080716542 [13] ZHAO Lifan, WANG Lu, YANG Lei, et al. The race to improve radar imagery: An overview of recent progress in statistical sparsity-based techniques[J]. IEEE Signal Processing Magazine, 2016, 33(6): 85–102. doi: 10.1109/MSP.2016.2573847 [14] FANG Jian, XU Zongben, ZHANG Bingchen, et al. Fast compressed sensing SAR imaging based on approximated observation[J]. IEEE Journal of Selected Topics in Applied Earth Observations and Remote Sensing, 2014, 7(1): 352–363. doi: 10.1109/JSTARS.2013.2263309 [15] JIANG Chenglong, ZHANG Bingchen, FANG Jian, et al. Efficient ℓq regularisation algorithm with range–azimuth decoupled for SAR imaging[J]. Electronics Letters, 2014, 50(3): 204–205. doi: 10.1049/el.2013.1989 [16] GREGOR K and LECUN Y. Learning fast approximations of sparse coding[C]. The 27th International Conference on International Conference on Machine Learning, Haifa, Israel, 2010: 399–406. [17] PU Wei. SAE-Net: A deep neural network for SAR autofocus[J]. IEEE Transactions on Geoscience and Remote Sensing, 2022, 60: 5220714. doi: 10.1109/TGRS.2021.3139914 [18] WANG Mou, WEI Shunjun, SHI Jun, et al. CSR-Net: A novel complex-valued network for fast and precise 3-D microwave sparse reconstruction[J]. IEEE Journal of Selected Topics in Applied Earth Observations and Remote Sensing, 2020, 13: 4476–4492. doi: 10.1109/JSTARS.2020.3014696 [19] HU Xiaowei, XU Feng, GUO Yiduo, et al. MDLI-Net: Model-driven learning imaging network for high-resolution microwave imaging with large rotating angle and sparse sampling[J]. IEEE Transactions on Geoscience and Remote Sensing, 2021, 60: 5212617. doi: 10.1109/TGRS.2021.3110579 [20] WEI Yangkai, LI Yinchuan, DING Zegang, et al. SAR parametric super-resolution image reconstruction methods based on ADMM and deep neural network[J]. IEEE Transactions on Geoscience and Remote Sensing, 2021, 59(12): 10197–10212. doi: 10.1109/TGRS.2021.3052793 [21] WEI Shunjun, LIANG Jiadian, WANG Mou, et al. AF-AMPNet: A deep learning approach for sparse aperture ISAR imaging and autofocusing[J]. IEEE Transactions on Geoscience and Remote Sensing, 2021, 60: 5206514. doi: 10.1109/TGRS.2021.3073123 [22] WANG Mou, WEI Shunjun, ZHOU Zichen, et al. Efficient ADMM framework based on functional measurement model for mmW 3-D SAR imaging[J]. IEEE Transactions on Geoscience and Remote Sensing, 2022, 60: 5226417. doi: 10.1109/TGRS.2022.3165541 [23] WANG Mou, WEI Shunjun, LIANG Jiadian, et al. TPSSI-Net: Fast and enhanced two-path iterative network for 3D SAR sparse imaging[J]. IEEE Transactions on Image Processing, 2021, 30: 7317–7332. doi: 10.1109/TIP.2021.3104168 [24] PU Wei. Deep SAR imaging and motion compensation[J]. IEEE Transactions on Image Processing, 2021, 30: 2232–2247. doi: 10.1109/TIP.2021.3051484 [25] WANG Mou, WEI Shunjun, LIANG Jiadian, et al. Lightweight FISTA-inspired sparse reconstruction network for mmW 3-D holography[J]. IEEE Transactions on Geoscience and Remote Sensing, 2021, 60: 5211620. doi: 10.1109/TGRS.2021.3093307 [26] WANG Mou, WEI Shunjun, LIANG Jiadian, et al. RMIST-Net: Joint range migration and sparse reconstruction network for 3-D mmW imaging[J]. IEEE Transactions on Geoscience and Remote Sensing, 2021, 60: 5205117. doi: 10.1109/TGRS.2021.3068405 [27] ZHANG Jian and GHANEM B. ISTA-Net: Interpretable optimization-inspired deep network for image compressive sensing[C]. The 2018 IEEE/CVF Conference on Computer Vision and Pattern Recognition, Salt Lake City, USA, 2018: 1828–1837. [28] ZHOU Yulong, ZHONG Yu, WEI Zhun, et al. An improved deep learning scheme for solving 2-D and 3-D inverse scattering problems[J]. IEEE Transactions on Antennas and Propagation, 2021, 69(5): 2853–2863. doi: 10.1109/TAP.2020.3027898 [29] LOPEZ-SANCHEZ J M and FORTUNY-GUASCH J. 3-D radar imaging using range migration techniques[J]. IEEE Transactions on Antennas and Propagation, 2000, 48(5): 728–737. doi: 10.1109/8.855491 期刊类型引用(4)
1. 全英汇,吴耀君,段丽宁,徐刚,薛敏,刘智星,邢孟道. 基于稀疏恢复的雷达信号处理研究综述. 雷达学报. 2024(01): 46-67 . 本站查看
2. 聂林,韦顺军,李佳慧,张浩,师君,王谋,陈思远,张鑫焱. 基于区域特征细化感知学习的星载SAR图像有源压制干扰抑制方法. 雷达学报. 2024(05): 985-1003 . 本站查看
3. 张群,张宏伟,倪嘉成,罗迎. 合成孔径雷达深度学习成像研究综述. 信号处理. 2023(09): 1521-1551 . 百度学术
4. 刘裕洲,蔡天倚,李亚超,宋炫,王选琪,安培赟. 联合距离方位二维NCS的星弹双基前视SAR成像算法. 雷达学报. 2023(06): 1202-1214 . 本站查看
其他类型引用(4)
-