无人机航拍建筑物视图网络融合目标识别分析

发布时间:2023-08-22  

基金项目:江西省教育厅科学技术研究项目,项目编号:GJJ2208301

本文引用地址:

城市道路坍塌事故随着城市地下空间资源开发程度不断增加而持续增加。通过调研得出,地下隐性病害是造成道路坍塌的主要因素,这点可通过调查大量路面质量所得[1]。作为道路病害检测的重要手段,无人机航拍技术可实现快速无损检测地下介质分布,以电磁波反射作为主要依据[2]

李海峰等[3]融合了GPR 与B-scan 三维数据特征,充分利用卷积神经网络,实现高效率识别机场跑道病害。Moalla等[4]在检测埋藏危险物时选取视图方向为横断面和纵断面,利用GPR 三维数据以及CNN 和递归神经网络CNN。方法以试图融合为基础,三维数据由无人机航拍获取,视图特征主要运用该方法提取,获取得到3 个2DCNN 并融合,有利于促进准确率的提高。

应用方法实现地下多目标分类主要应用3DGPR 数据。2DCNN 的输入包含GPR 三维数据的俯视图、侧视图及正视图立方体,实施特征分类时需充分融合3 个2DCNN 的特征。相比于B-scan 图像方法,现有三平面方法经实验证明表现出的多目标分类性能更好。室内实验数据数量较小时,GPR 实测数据集被标记的数量较少。为了对方法性能进行验证分析,十分有必要利用多种CNN 架构和大量实测数据。

1 原理

作为一种通用的网络体系结构,将2DCNN 与视图融合方法相结合。为验证该方法性能,2DCNN 由VGG16 和Alexnet 两个深度神经网络的主干网络构成,均具有全连接层[6]。分别按照227×227×K、224×224×K(K 为通道数)调整Alexnet 网络、VGG16 网络的输入图像大小,为减少特征图尺寸和提取特征,需要通过池化层和利用连续卷积实现[7]

2 实验方案

2.1 数据采集

步进频连续波GPR 系统以VN A 为基础,完成三维数据的采集实验。设定步进频步长为8 MHz,频率处于(1.8~5)GHz。在干沙表面放置收发天线,高5~10 cm,中心距离为18 cm。共有5 种地下目标:无埋地物背景、多芯电力电缆4 根、含水量不同的塑料瓶、聚氯乙烯(PVC)塑料管1 根、金属管共2 根。模含水地下空洞选用含水塑料瓶实现。本次实验中涉及的场景有14 个,深度和位置不一致,采用随机方式在内部埋入2~3 个目标,采集的B-scan 图像为平行状态,共20个,231×74×20(深度× 长度× 宽度)为GPR 原始3D 数据的采集尺寸。

2.2 控制流程

Alexnet 网络各层数据大小情况如1 所示。首先,依次按照227×227×60、227×227×30 及227×227×5尺寸采用双线性插值法调整输入视图立方体。2D 图像的通道数在前两个2DCNN 分支中依次为正视图立方体宽度和侧视图立方体长度,在第3 个2DCNN 分支中是俯视图立方体深度。然后再依次按照11×11×60、11×11×30 和11×11×5 大小设置第1 个卷积层在3 个分支中的内核尺寸。FC4 层重组(Concatenation)FC1、FC2 和FC3 这3 个全连接层的输出,经3 个2DCNN 分支获取视图立方体,充分融合3 种网络分支的特征。最后利用softmax 函数在分类层输出,FC4 通过FC5 实现。对比分析传统方法与本文方法,按4 096 的标准设置各层神经元数量,包括FC1、FC2、FC3 及FC5,softmax层所含神经元因分类目标有5 种数量也为5。

1692695005188362.png

图1 基于Alexnet网络的视图融合方法示意图

3 结果分析

对比分析基于B-scan 图像的传统方法与单视图方法。评估分类性能时主要以F-score 准确度和平均值作为重要参考依据。利用Alexnet 结构调整所有方法。如表1 所示,测试集和训练集在不同方法下显示的数据。测试集和训练集在选用单视图法和视图融合法时的数量依次为250 和750。但是当立方体宽带为w,选用传统方法以B-scan 图像为基础时,将w 乘以250 和750 作为训练集与测试集的数量。

表1 不同宽度下的训练集和测试集数量

1692695106356516.png

3D 立方体不同宽度采用不同方法获取的数据如下表2 所示。通过对比分析得出,不论是从F-score 还是从准确度数据结果来看,视图融合方法显优势较为突出。大量信息提取方式采用视图融合方法完成,保证分类结果更佳。相比于基于B-scan 图像的传统方法,在分类性能方面侧视图立方体与正视图立方体占据更大优势,大量目标空间信息可通过组合多个D-scan 图像与B-scan 图像获取。

表2 各方法在不同宽度下的分类结果

1692695175204568.png

4 结束语

本文开展了无人机航拍建筑物视图网络融合目标识别分析,研究得到如下结果:

1)不论是从F-score 还是从准确度数据结果来看,视图融合方法显优势较为突出,保证分类结果更佳。

2)相比于基于B-scan 图像的传统方法,在分类性能方面侧视图立方体与正视图立方体占据更大优势。

参考文献:

[1] 张力文, 聂俊丽. 利用改进的f-k滤波方法压制无人机航拍中的线性干扰[J].电子学报, 2022, 50(6): 1444-1450.

[2] 杜文静, 刘庆华, 欧阳缮. 一种复块稀疏贝叶斯无人机航拍成像算法[J].现代雷达, 2022, 44(5): 33-39.

[3] LI H,LI N,WU R,et al.GPR-RCNN: an algorithm of subsurface defect detection for airport runway based on GPR[J].IEEE Robotics and Automation Letters,2021,6(2):3001-3008.

[4] MOALLA M, FRIGUI H, KAREM A, et al. Application of convolutional and recurrent neural networks for buried threat detection using ground penetrating radar data[J].IEEE Transactions on Geoscience and Remote Sensing,2020,58(10):7022-7034.

[5] 丁晓雯,丁强,顾君垚,等.基于1DCNN-DS的冷水机组故障诊断[J].低温与超导,2022,50(7): 69-76.

[6] 金守峰,侯一泽,焦航,等.基于改进AlexNet模型的抓毛织物质量检测方法[J].纺织学报,2022,43(6):133-139.

[7] 杜翠,王宁,刘杰,等.无人机航拍铁路检测大数据多线程并行处理方法[J].铁道建筑,2022,62(4):126-129.

(本文来源于《电子产品世界》杂志2023年8月期)

文章来源于:电子产品世界    原文链接
本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。

相关文章

    的遥感高光谱技术为了得到更高的光谱分辨率,在成像方式与过程中,牺牲了空间分辨率与成像速度,导致了高光谱图像空间特征不明显、实时成像水平低等问题。近年来,随着无人机与地面观测平台系统以及基于空间光谱信息联合目标检测......
    会有相关黑客工具流传,届时,很快无人机被骇造成的灾情就会上报纸头条;此外,军警政府方面越来越常使用无人机来监控犯罪与抗议活动,这也使得这些公家机关的无人机成为可能遭下手的目标。 商用无人机目......
    的OAK-D Pro空间人工智能摄像头采用了艾迈斯欧司朗的Belago 1.1红外点阵投射器,并通过人工智能快速提供准确的目标检测。Luxonis开源软件开发包允许快速灵活地集成到各种应用环境之中。采用......
    安装和 OpenCV 计算机视觉库的移植。在此基础上完成了对于服务器的测试、Web 网页登录与注册的测试、视频采集测试、视频网络传输与视频播放测试。通过OpenCV计算机视觉库完成了对于图像中目标检测......
    雨、任少卿、孙剑等人提出的ResNet,何恺明后来去了Facebook (Meta),最近又回MIT教书,基本上何凯明引领了计算机目标检测视觉的发展潮流,真正的大神。 自动驾驶需要走的路还很长,感知......
    的背景差分法和帧间差分法为算法,并与GSM模块相结合,设计并实现了一种应用于家居环境或私人办公室无人值守的运动目标检测系统。提出了系统设计的总体方案,并详细介绍了系统软硬件平台的设计流程,最后对系统进行了测试。 随着......
    要实现交通系统的智能化和自动化运行,就要将大量的交通信息利用计算机视觉技术进行处理,例如车牌识别、车辆识别与流量统计、无人驾驶等[1]。目前,深度学习技术被广泛运用到目标检测领域。为了提高驾驶的便捷性和安全性,自动......
    JetsonTX2的无人机实时目标检测方法[J].兵器装备工程学报,2022,43(4):204-210. [2] 梁赟. 基于机器视觉的产品识别与定位方法研究[D].哈尔滨:哈尔滨工业大学,2020. [3......
    与识别,把返回的结果通过物联网接入网络,进而达到隔空控物的效果。。   2.主要的功能:实现物联网与人机交互的进一步融合,可以有几种形式体现:   1.基于手势识别的智能家居控制终端   2.基于目标检测......
    觉3D目标检测任务榜单,并将关键性指标NuScenes DetecTIon Score(NDS)提高至62.4% 。那么,未来自动驾驶感知技术究迈向如何的路径发展, 逐步实现大规模的量产落地? 本文......

我们与500+贴片厂合作,完美满足客户的定制需求。为品牌提供定制化的推广方案、专属产品特色页,多渠道推广,SEM/SEO精准营销以及与公众号的联合推广...详细>>

利用葫芦芯平台的卓越技术服务和新产品推广能力,原厂代理能轻松打入消费物联网(IOT)、信息与通信(ICT)、汽车及新能源汽车、工业自动化及工业物联网、装备及功率电子...详细>>

充分利用其强大的电子元器件采购流量,创新性地为这些物料提供了一个全新的窗口。我们的高效数字营销技术,不仅可以助你轻松识别与连接到需求方,更能够极大地提高“闲置物料”的处理能力,通过葫芦芯平台...详细>>

我们的目标很明确:构建一个全方位的半导体产业生态系统。成为一家全球领先的半导体互联网生态公司。目前,我们已成功打造了智能汽车、智能家居、大健康医疗、机器人和材料等五大生态领域。更为重要的是...详细>>

我们深知加工与定制类服务商的价值和重要性,因此,我们倾力为您提供最顶尖的营销资源。在我们的平台上,您可以直接接触到100万的研发工程师和采购工程师,以及10万的活跃客户群体...详细>>

凭借我们强大的专业流量和尖端的互联网数字营销技术,我们承诺为原厂提供免费的产品资料推广服务。无论是最新的资讯、技术动态还是创新产品,都可以通过我们的平台迅速传达给目标客户...详细>>

我们不止于将线索转化为潜在客户。葫芦芯平台致力于形成业务闭环,从引流、宣传到最终销售,全程跟进,确保每一个potential lead都得到妥善处理,从而大幅提高转化率。不仅如此...详细>>