“村镇规划与建设智能化”专题

基于深度学习和数学形态学的经济欠发达地区农村住房智能识别研究

  • 劳春华 ,
  • 林燕慧
展开
  • 广东工业大学 管理学院,广州 510520

劳春华(1986—),男,广东茂名人,讲师,博士,主要从事土地科学方面的相关研究,(E-mail)

收稿日期: 2022-09-30

  修回日期: 2022-11-26

  网络出版日期: 2023-02-28

基金资助

国家自然科学基金项目(41901312)

广东省基础与应用基础研究基金项目(2020A1515010677)

Intelligent Identification of Rural Housing in Economically Underdeveloped Areas Based on Deep Learning and Mathematical Morphology

  • Chunhua Lao ,
  • Yanhui Lin
Expand
  • School of Management, Guangdong University of Technology, Guangzhou 510520, China

Received date: 2022-09-30

  Revised date: 2022-11-26

  Online published: 2023-02-28

本文亮点

中国大部分农村住房处于一种无规划的自发性建设状态。这种无序扩张是对土地资源的严重浪费,尤其是耕地资源,因此需要通过对农村住房监测来规范农房建设,同时保护耕地资源。而中国目前的农村住房监测手段主要以全国土地调查人工巡查为主,该方法收集到的信息缺乏实时性和可靠性。针对该问题,文章提出一个基于深度学习和数学形态学的经济欠发达地区农村住房智能识别模型,该模型基于高分辨率遥感影像数据和PaddlePaddle框架,创新性地引入数学形态学的膨胀腐蚀方法,并与MobileNetV2进行松散耦合,其在农村住房识别监测中的平均精度达到84.5%,且具有一定的泛化性。与ResNet34模型进行对比,该模型平均识别精度比ResNet34模型高10.6%,对地类边界的提取效果更精细,对农村住房轮廓的识别效果更好。

本文引用格式

劳春华 , 林燕慧 . 基于深度学习和数学形态学的经济欠发达地区农村住房智能识别研究[J]. 热带地理, 2023 , 43(2) : 179 -189 . DOI: 10.13284/j.cnki.rddl.003628

Highlights

With the rapid growth of China's economy and the supportive government policies and funds, the demand for and the expansion of rural housing in China are on the rise, which tightens requirements for rural housing. However, most of the present rural housing suffers from unplanned growth. The sprawl of rural housing adversely affects the quantity and quality of land resources, in particular, productive agricultural lands; therefore, it is necessary to regulate the growth of rural housing and protect farmlands through spatiotemporally continuous monitoring. Currently, the monitoring of rural housing in China is mainly conducted via in-situ inspection of the national land survey, which is restricted by unfavorable conditions (e.g., weather, outbreaks, and traffic) as well as impairing real-time and reliable control over information collected. To resolve this issue, this study proposed an intelligent model to recognize rural housing in underdeveloped areas based on deep learning and mathematical morphology (MobileNet-MM). The model was based on high-resolution remote sensing data, MobileNetV2 (a convolutional neural network architecture well performing on mobile devices), and mathematical morphology. First, the obtained data were segmented and manually screened and tagged to construct a training dataset. Second, the training dataset was used to train MobileNet-MM, with the expansion operation being used to compensate for identification errors of deep learning. Finally, the accuracy of MobileNet-MM to identify and monitor rural housing was tested, resulting in 84.5% accuracy. The comparison of the accuracies of MobileNet-MM and ResNet34 (a state-of-the-art image classification model) indicated that ResNet34 misclassified a large area of rural housing that was mainly distributed on the edge of the region as well as cropland and vegetation as rural housing, with its weak ability to recognize actual rural housing. The MobileNet-MM model predicted rural housing accurately and land boundary precisely, with the misclassified area being scattered, and its average accuracy, is 10.6% higher than that of ResNet34. The novelties of this study were two-fold: (1) a high-resolution training dataset of rural housing in underdeveloped areas was generated, which provides data support for the development of subsequent models; and (2) an intelligent model to recognize rural housing in underdeveloped areas (MobileNet-MM) based on deep learning and mathematical morphology was proposed.

随着中国经济的高速发展以及政府在政策和资金上的支持,农村住房的需求量和建设量开始不断增大。2000—2020年,广东省农村建设量增长迅速,平均每年增长16.569万户,其中2019和2020年的增长速度较快,高于平均水平的75.38%和65.25%(《广东农村统计年鉴》编辑委员会,2021)。当前,由于中国的农村村庄规划指导性较弱,大部分农村住房仍处于一种无规划的自发性建设状态,建设随意性较大(王晶 等,2016胡典雄,2018)。农民盲目占用耕地资源新建住房,导致大量耕地面积被占用,耕地总量明显下降,农村住房建设的无序扩张与耕地占用是对耕地资源的严重浪费(赵其国 等,2006)。作为人均耕地面积不足世界平均水平40%的人口第一大国,当前迫切需要进行农村住房监测以减少耕地占用现象,并促进农村住房集约利用,这对中国耕地资源的可持续性发展和粮食安全具有重要意义。
中国当前农村住房监测的主要手段是全国土地调查,传统的数据获取方法以人工实地测绘及地方上报等方式为主,这种方式因为工作量大而耗费大量的人力与时间,导致巡查效率较低、难以满足即时性需求(武东海 等,2018)。并且由于专业素养和主观认知的差异,所获取的建筑物数据质量不一,还容易漏检,其信息真伪性和实效性得不到保障。如果在调查过程中遇到疫情、恶劣天气、交通状况、当地实际情况等不可抗拒力因素的影响,巡查的可靠性也难以得到保障。
近年来,深度学习技术迅猛发展,在多个领域均取得良好的应用效果,如人脸识别、语音识别、目标识别、自动驾驶、机器翻译、图像识别及分类等(张号逵 等,2018林倩 等,2019郑远攀 等,2019刘娟宏 等,2020贺丰收 等,2020朱向雷 等,2021余璀璨 等,2021),为农村住房识别提供新的思路。农村住房识别的本质是图像分类问题,可以通过学习大量的样本数据对图形进行特征提取,从而智能化地得到农村住房识别结果。卷积神经网络(Convolutional Neural Networks, CNN)是一种典型的深度学习图像分类算法,一般由一个或多个卷积层、池化层以及全连接层组成,其提取的效果更胜于传统人工特征与传统浅层分类器,是遥感地类目标检测、图像分类与识别、图像分割等领域的研究热点(张慧 等,2017)。
卷积神经网络在图像识别中常用的模型有AlexNet(Abdel-rahman et al., 2011)、VGGNet(Karen et al., 2014)、GoogleNet(Szegedy et al., 2015)、ResNet(He et al., 2016)、MobileNet(Howard et al., 2017)等。其中,AlexNet网络最早用于数字识别,其优点是使用ReLU作为激活函数从而加快收敛速度,使用dropout避免过拟合,使用data augmentation扩增数据集,缺点是参数过多,计算量较大;VGGNet网络的优点是结构非常简洁,通过不断加深网络结构提升其自身性能,缺点是需要耗费较多计算资源,并且比较占内存;GoogleNet网络的优点是模型既准又轻,用GAP代替全连接层,在便于迁移学习的同时提高准确率,缺点是网络不够深、迁移能力不足;ResNet是2015年ImageNet竞赛的冠军,优点是可有效解决深度学习神经网络难以训练的问题,缺点是ResNet前后层之间的短接没有很好的复用各层之间的特征图,因此导致模型随着层数的增加,参数量也快速增加;MobileNet是典型的轻量化网络,被广泛应用于工业界。2017年推出的MobileNetV1(Howard et al., 2017)卷积神经网络,以深度可分离卷积替换标准卷积的方式降低网络结构的大小及计算复杂度,并在略微降低精度的情况下大幅度减小模型的运算量,降低对用户硬件环境的要求,从而提升用户体验、提高访问的灵活性。其不足是在训练过程中深度可分离卷积的参数值为0,导致训练结果不理想。而MobileNetV2(Sandler et al., 2018)网络在MobileNetV1的基础上进行改进,新增层之间的线性瓶颈、瓶颈之间的连接捷径功能,具有体积小、计算量少、速度高及准确率高等特点。一些学者采用MobileNetV2对遥感影像的建筑物进行提取,如王华俊等(2022)提出使用轻量级网络MobileNetV2替换DeepLabv3+的主干网络Xception的方法,该方法不仅减少参数量和训练时间,而且有效提高建筑物的提取精度。许博鸣等(2019)通过Keras框架获取MobileNet瓶颈层并进行迁移学习从而实现建筑物识别,该模型具有较高识别率且降低模型权重空间的优点。于坤等(2021)将MobileNet和U-net耦合,解决了建筑物特征提取过程中低维信息丢失,边缘提取效果不佳等问题,在视觉效果上表现优异。综上,MobileNetV2是对目标检测和分割的有效特征提取器,同时是一个高效的移动端模型。构建基于MobileNetV2的农村住房识别模型并开发基于该模型的桌面端和移动端应用,能够极大提升农村住房监测的内业处理与外业巡查效率与智能化水平,具有重要的应用价值,因此本文选用该模型从高分辨率遥感影像自动提取农村住房。
美国地理学家W R Tobler在1970年提出地理学第一定律(Tobler, 1970),该定律指出“任何事物都相关,只是相近的事物关联更紧密”,即地理事物或属性在空间分布上互为相关(李小文 等,2007)。因此中国的农村住房也具有空间相关性(李郇 等,2022),利用MobileNetV2模型识别农村住房区域时,有可能会出现漏提现象,导致提取结果的形态相对破碎,因此需采用新的方法改善。数学形态学是一门建立在格论和拓扑学基础上、以形态结构元素为基础对图像进行分析的数学工具(陈晨 等,2019),数学形态学检测中最基本的形态算符包括膨胀算符、腐蚀算符。膨胀和腐蚀(邓仕超 等,2017)是灰度图像的初等形态运算,其作用是消除噪声、分割出独立的图像元素或在图像中连接相邻的元素,寻找图像的明显极大值区域或极小值区域、求出图像的梯度等。因此,可将数学形态学上的膨胀腐蚀方法作为补充,根据中国农村住房的空间相关性,将农村住房识别结果进行像素分割或像素连接,弥补部分深度学习识别错误的情况。
因此,本文基于高分辨率遥感影像数据,耦合MobileNetV2和数学形态学方法,以茂名市为例,采集茂名市高分辨率遥感卫星影像样本库进行训练,得到一个基于深度学习的经济欠发达地区农村住房智能识别模型(MobileNet-MM)。以期为中国农村住房监测提供技术支持。

1 方法

1.1 MoblieNet V2网络模型原理

为了最大程度降低模型训练成本,使其适用于移动端等轻量工业化业务应用场景,谷歌团队开发了MobileNet网络模型。2018年,Mark Sandler对MobileNetV1进行改进并提出MobileNetV2模型,MobileNetV2引入具有线性瓶颈的倒置残差模块(Sandler et al., 2018),借鉴了MobileNetV1和ResNet的优点,依然保持良好的计算速度和较小的存储需求,不仅在MobileNetV1深度可分离卷积的基础上加入多个逐点卷积,并且借鉴ResNet网络结构,提升网络结构性能并降低计算复杂度。但存在两点不足:一是参数调节问题,二是依赖于优化策略。其网络结构如表1所示。
表1 MobileNet V2网络结构

Table 1 MobileNet V2 network structure

Input Opertator t c n s
224 2 × 3 conv2d 32 1 2
112 2 × 32 bottleneck 1 16 1 1
112 2 × 16 bottleneck 6 24 2 2
56 2 × 24 bottleneck 6 32 3 2
28 2 × 32 bottleneck 6 64 4 2
14 2 × 64 bottleneck 6 96 3 1
14 2 × 96 bottleneck 6 160 3 2
7 2 × 160 bottleneck 6 320 1 1
7 2 × 320 conv2d 1×1 1280 1 1
7 2 × 1280 avgpool 7×7 1
1 × 1 × 1280 conv2d 1×1 k

注:Input为农村住房地块的遥感影像,t是扩展因子,c是输出特征矩阵深度(channel),n是倒残差结构(bottleneck)的重复次数,即当n=2时,对应的bottleneck需要重复2遍),s是步距,代表每个block(多个bottleneck组成)第一层bottleneck的步距。

MobileNetV2神经网络是深度可分离卷积网络,首先用1×1卷积过ReLU提升通道数,再用Depthwise的3×3空间卷积过ReLU进行卷积,最后用1×1卷积过ReLU恢复通道,并和输入相加(图1)。MobileNetV2具有参数数目较少、效率更优、硬件要求更低的特点,适用于农村住房识别研究。
图1 MobileNet V2结构单元示意

Fig.1 Structural units of MobileNet V2

1.2 数学形态学的膨胀与腐蚀方法

马瑟荣(Ripley et al., 1975)和赛拉(Serra, 1986)将数学形态学(mathematics morphology)引入图像处理领域。数学形态学由膨胀、腐蚀、开运算和闭运算构成。膨胀(dilation)是使物体边界扩张的过程,而腐蚀(erosion)的作用则与膨胀相反,其概念是缩小图像,去除小沟壑细节的一种操作。在图像处理过程中,两者经常被混合使用,形成开运算与闭运算。开运算指先腐蚀后膨胀,即先消除细点处的分离物体,继而平滑较大的物体边界。相反,闭运算则是先膨胀后腐蚀,即先将图像的细小空洞进行填空,再抑制比结构元小的暗细节。膨胀和腐蚀的目的是消除噪声,在进行膨胀腐蚀操作前需先定义一个卷积核,将卷积核与待测图像进行卷积计算从而得到膨胀和腐蚀后的结果(图2)。
图2 腐蚀膨胀示意

Fig.2 Corrosion expansion diagram

图2表示结构A被卷积核腐蚀,移动结构卷积核,如果卷积核能与结构A完全重叠,则保留该位置点,最终得到结构A的腐蚀结果(结构B);卷积核在结构B上进行卷积操作,移动卷积核,如果卷积核与结构B存在重叠区域,则记录该区域位置,最终得到结构B的膨胀结果(结构C)。结构C与结构A相比,去除了部分小地物,填充了部分小空洞。

1.3 耦合MobileNetV2和数学形态学的农村住房识别模型

首先,构建高分辨率遥感影像农村住房样本库;然后,构建农村住房智能识别模型;最后,将该模型应用于经济欠发达地区农村住房自动提取。利用PaddlePaddle人工智能基础平台,搭建耦合MobileNetV2神经网络与数学形态方法的农村住房图像分类模型,技术路线如图3所示。
图3 农村住房识别模型技术路线

Fig.3 Technical route of rural housing identification model

为了充分利用高分辨率影像丰富的地物信息,并且取得与原影像一致的分辨率识别结果,采用逐点切割方式进行农村住房识别。首先,从高分辨率卫星遥感影像中获取遥感数据并进行图片处理、分割从而得到样本库;其次,运用MobileNetV2神经网络对收集的样本库进行训练,得到经济欠发达地区农村住房识别模型;然后,用生成的模型对遥感影像进行逐点化测试,并得到测试结果图,逐点化是指以待测试图的某点为中心,向四周取一个64×64像素大小的正方形,用生成的模型对正方形进行测试,并将测试结果作为该点的识别结果。其中,将返回结果为“农村住房”的正方形地块标记为“1”,剩余的其他地形结果标记为相应的标签(“2、3、4、5、6、7”),最后合并为标签“0”,以此类推,得到逐点化后的结果图;最后,对识别结果进行数学形态学的膨胀腐蚀处理,从而得到最终的农村住房结果图。

2 模型的实现与结果

2.1 样本库构建

茂名市位于广东省西南部,全市行政区域土地总面积11 427.63 km2,属于经济欠发达城市。粤西地区的村域面积较大,各自然村之间的距离较远,农村住房分布较为松散;且农村住房的空间布局随意性较大,村内巷道蜿蜒曲折,植被掺杂,巷道脉络不清晰(谭庆扬 等,2018)。仅用农村住房标签与背景信息构建模型,信息过于复杂,对模型效果影响较大。因此,给模型提供更为丰富的地物类别标签,可降低模型构建的难度,提高模型的训练精度。为更好地识别农村住房,在数据获取过程中采集农村住房、耕地、裸地、水体、植被5类地形,并根据耕地的纹理细分成3种不同类型的耕地,将这7类地类按照数字“1~7”依次做好标签,即:农村住房(“1”)、耕地a(“2”)、耕地b(“3”)、耕地c(“4”)、裸地(“5”)、水体(“6”)、植被(“7”)。数据集中图像均为RGB格式,分辨率为18级,即0.55 m分辨率。由于影像数据本身的分辨率、云层覆盖等干扰因素的客观存在,需对采集到的大地块影像图进行初步筛查,对由于数据源缺失而产生的不同时态不同分辨率影像相互“拼接”的低质量遥感影像进行剔除。
初步筛选出的遥感影像形状和尺寸大小各异,如果直接应用于模型训练,必然效果很差。为了便于存储和切片,保证训练的高效性与模型的有效性,需通过图像分割进行再次精选,将每类地形的遥感影像分割为大小统一的规则小地块。利用python将上述7类地物切割为64×64像素的正方形小切片。最终收集的数据为每个地类的各1 000张图片,控制每一类型的图片数量相等以提高训练精度,总计7 000张图片。将数据集分为两类:训练集和验证集。对于构建的大数据样本,随机选择80%的数据用于训练模型。另外,20%用于验证模型的有效性,即每个模型有5 600张训练集,1 400张测试集。将处理好的图像进行清洗、整理、人工筛选出高质量的样本数据,并对数据进行归类处理,将原标签“农村住房”归类为“农村住房”,标签为1,将“耕地a、耕地b、耕地c、裸地、水体、植被”归类为“非农村住房”,分别将标签设为2、3、4、5、6、7,从而构建满足人工智能学习的“农村住房提取”样本数据(图4),为后续的模型训练提供数据支撑。
图4 样本库构建流程

Fig.4 Construction process of image sample database

2.2 MobieNet V2网络构建

在训练开始前,需调整最佳训练参数,其中,初始学习率是对整个训练过程影响比较大的参数,学习速率过大会导致模型收敛程度差,学习速率过小又会导致训练过程中耗时过长,本模型将学习率设定为0.002。并将“continue_train”设置为“False”,表示在训练时不使用预训练模型。在不断的摸索中最后确定训练次数“num_epochs”设置为20次,“good_acc1”设置为0.95,即当训练精度连续20次达到0.95时结束训练。采用64位windows7系统作为测试环境,内存为8GB,利用百度飞浆(PaddlePaddle)框架搭建CPU(酷睿I7 7700)环境测试平台,模型训练平均历时20 min。此外,图像增强可以达到提升模型泛化能力以及鲁棒性的效果,因此,启用图像颜色增强、增加随机角度以及增加水平随机翻转等措施。
选用经济欠发达地区(农村)的高分辨率遥感地块影像,并在图中直接获取地类数据进行模型训练得到模型MobileNet-MM 1,识别结果见图5图6图5的局部放大。为了验证模型的稳定性与泛化性,另选用5张遥感地块影像(图7-a2~6)进行对比实验,依次得到模型MobileNet-MM 2~6,将6个模型的训练精度与测试精度进行汇总。由表2可知,模型的平均训练精度为98.9%,将20%的数据集用于测试,得到的平均测试精度为98.2%,效果较理想。由于本文选择的样本为纯地物样本,且用地类型相对简单,各类用地的特征差异明显,在卷积神经网络下容易区分,所以部分模型训练与测试精度达到100%是有可能的。将训练的模型应用于整幅影像,影像切片的类型大部分不是纯地物,因此整体识别精度会下降,具体见表3所示。
图5 1号影像识别结果与精度对比

Fig.5 Recognition results and accuracy of No.1 image

图6 1号影像农房识别结果局部放大

Fig.6 Partial zoom-in of farm house recognition results from No.1 image

图7 MobileNet-MM模型识别结果

注:1~6表示所识别遥感影像地块的序号。

Fig.7 Recognition results of MobileNet-MM model

表2 模型训练精度与测试精度 (%)

Table 2 Models' training accuracy and test accuracy

模型名称 训练精度 测试精度
MobileNet-MM 1 100.0 99.2
MobileNet-MM 2 100.0 100.0
MobileNet-MM 3 96.7 90.8
MobileNet-MM 4 96.7 99.7
MobileNet-MM 5 100.0 99.5
MobileNet-MM 6 100.0 100.0
表3 模型识别精度对比 (%)

Table 3 Comparison of models' identification accuracy

影像

序号

MobileNet-MM 模型精度(a) ResNet34 模型精度(b) 精度对比 (a比b)
方差 0.02
1 86.0 71.6 +14.4
2 83.3 65.5 +17.8
3 82.5 74.0 +8.5
4 85.5 81.8 +3.7
5 86.2 72.0 +14.2
6 83.3 78.2 +5.1

2.3 农村住房智能识别

根据上述得到的6个模型分别提取对应遥感影像的农村住房。以MobileNet-MM 1为例,采用训练好的MobileNet-MM 1对1号遥感影像(图5-a)进行农村识别,识别结果如图5-b所示,最终得到MobileNet-MM 1的识别精度为86.0%(见表3)。为验证MobileNet-MM模型对农村住房的识别效果,利用ResNet34模型对同样的样本库进行训练。为使对比更具说服力,控制两类模型的参数变量,在控制逐点切割步长(均设置为5)不变的情况下,将2个模型的训练次数“num_epochs”设置为20次,“good_acc1”设置为0.95。并将ResNet34模型批量大小“batch_size”的值设置为8。经过训练,得到ResNet34模型的农村住房识别结果,将人工识别结果与ResNet34模型识别结果叠加,计算得出ResNet34模型的农村住房识别精度为71.6%,两类模型的精度对比结果如图5所示。
为分析MobileNet-MM 1模型与ResNet34模型识别效果差异,将图5-d、e与f的识别结果局部放大,如图6所示。
图6中,图6-b、c、d分别是图5-e、f、d的局部放大图。区域1~3中,ResNet34模型漏识的农村住房区域面积较大,主要分布在区域的边缘,而MobileNet-MM 1模型正确识别的面积较多,漏识的面积较小,漏识区域分布较为分散。区域2中,ResNet34模型将耕地、植被误判为农村住房,对于农村住房的提取效果偏弱;而MobileNet-MM 1模型对地类边界的提取效果更精细,对农村住房轮廓的识别效果更好。MobileNet-MM 1的识别精度达到86%,而ResNet34模型仅为71.6%。从提取精度和空间分布看,MobileNet-MM 1模型优于ResNet34模型。
为验证MobileNet-MM模型的稳定性,设计了2种方案,第一种方案是在不同的农村建立不同的模型,测试其精度的方差;第二种方案是把不同的农村样本合并建立一个模型,测试其在不同农村精度的方差。方差越小,模型越稳定。针对第一种方案,利用MobileNet-MM 2-6模型识别并提取对应遥感影像(图7-a2~6)的农村住房,并将识别结果与ResNet34模型进行对比(图7)。
运用MobileNet-MM模型测试得到1-6幅图的测试精度分别为86.0%、83.3%、82.5%、85.5%、86.2%和83.3%,平均精度为84.5%,方差仅为0.02%(见表3),这表明,MobileNet-MM模型精度具有稳定性,其测试精度基本维持在83%~86%,可满足农村住房智能提取模型的精度要求。ResNet34模型所得到的1-6幅图精度分别为71.6%、65.5%、74%、81.8%、72.0%和78.2%,平均精度为73.9%。经过对比,本文提出的MobileNet-MM模型平均精度比ResNet34模型高10.6%,基本满足经济欠发达地区的农村住房提取精度要求。
针对第二种方案,将MobileNet-MM 1-6的样本库进行汇总,训练得到一个总模型,命名为MobileNet-MM A;将MobileNet-MM 1-3的样本库进行汇总,训练得到模型1-3的总模型,命名为MobileNet-MM B。用MobileNet-MM A和MobileNet-MM B分别识别1-6幅遥感影像地块,得到的识别精度如表4所示。可知,利用MobileNet-MM A模型识别1~6号遥感影像,精度的方差仅为0.03%,平均识别精度为83.8%,比MobileNet-MM 1~6的平均精度低0.7%;利用MobileNet-MM B模型识别1~3号遥感影像,精度的方差仅为0.02%,平均识别精度为83.5%,比MobileNet-MM 1~3的平均精度低0.4%。这说明将样本合并训练一个模型,并应用于不同的农村(影像),精度相差较小,表明模型具有稳定性;与独立样本训练的模型相比,精度降低较小,但合并样本训练一个模型可显著降低模型构建的速度,在农村数量特别多的区域,效率更高。
表4 汇总模型精度对比 (%)

Table 4 Summary model accuracy comparison

影像

序号

MobileNet-MM A 与MobileNet-MM 1-6对比(左比右) MobileNet-MM B 与MobileNet-MM 1-6对比(左比右)
方差 0.03

0.02

(影像1-3)

1 80.3 -5.7 81.7 -4.3
2 84.0 +0.8 84.7 +1.5
3 85.1 +2.6 84.1 +1.6
4 85.2 -0.3 83.3 -2.2
5 85.0 -1.2 87.6 +1.4
6 83.0 -0.3 80.3 -3.0
经济欠发达地区的农村住房影像特征具有一定的相似性,但不同农村的影像特征也有差别。用一个农村提取的样本所生成的模型识别另一个农村的住房,其精度需要验证。为了验证模型的泛化性,利用MobileNet-MM B模型识别4~6号遥感影像,得到的平均识别精度为83.7%,与MobileNet-MM 4~6的平均精度相比,前者与后者精度差异很小,仅比后者低1.3%。模型B并没有用农村4~6的样本数据,识别结果仅比采用样本数据的模型精度降低1.3%,说明对于经济欠发达地区的农村,本文模型有一定的泛化性。
综上,对于某个城市经济欠发达农村的住房识别,可随机抽取部分农村建立样本库,合并样本库训练一个模型,再对整个城市经济欠发达的农村住房进行识别。

3 结论与讨论

本文采用高分辨率遥感影像数据,构建经济欠发达地区农村住房样本库,搭建MobileNet-MM网络模型。结果显示,MobileNet-MM模型对农村住房的平均提取精度达到84.5%,基本可满足农村住房智能识别精度要求。将MobileNe-MM模型与ResNet34模型进行精度对比,发现MobileNet-MM模型的识别精度高于ResNet34模型。分别将MobileNet-MM 1~6与MobileNet-MM 1~3的样本库进行汇总并训练得到MobileNet-MM A与MobileNet-MM B,利用生成的新模型识别遥感影像地块,发现新模型精度与原模型精度差异较小,精度比较稳定,说明MobileNet-MM模型具有一定的泛化性。
本文创新性地引入数学形态学的膨胀腐蚀方法,与MobileNetV2进行松散耦合,构建基于MoibileNetV2和数学形态学方法的经济欠发达地区农村住房识别模型(MobileNet-MM),该模型精度较高且具有一定的泛化性。并且,本文生成一套高分辨率经济欠发达地区农村住房样本库,可为后期模型的构建提供数据支撑。
利用深度学习技术进行农村住房监测是可行的,但目前的技术框架还存在不足。首先,人工智能技术需要有高质量的样本库作为支撑,但目前在样本收集过程中存在一些被云层遮挡的遥感影像数据,还有一些由于遥感数据缺乏成像时间、卫星参数和分辨率等关键信息而产生的不同时态不同卫星拍摄影像进行拼接处理得到的低质量遥感影像,这些影像为深度学习样本库的构建过程增加困难。其次,随着科技的发展,遥感数据处于不断更新变化的过程,新的卫星数据不断涌现,因此本文构建的农村住房样本也存在局限性,需要在后续的应用中不断丰富和完善。最后,本文没有对切片大小做敏感性分析,后续可做敏感性分析,得到最优的切片大小。

脚注

劳春华:研究框架设计,论文设计,论文修改、图表精修、论文质量把控;

林燕慧:数据收集;实验开展;初稿攥写,图表制作。

Abdel-rahman Mohamed, George E Dahl, and Geoffrey Hinton. 2011. Acoustic Modeling Using Deep Belief Networks. Institute of Electrical and Electronics Engineers (IEEE), 20(1): 14-22.

陈晨,王红军,王大森,田爱玲,刘丙才,朱学亮,刘卫国. 2019. 基于稀疏矩阵的光学元件表面疵病检测. 中国激光,46(4):182-190.

Chen Chen, Wang Hongjun, Wang Dasen, Tian Ailing, Liu Bingcai, Zhu Xueliang and Liu Weiguo. 2019. Detection of Surface Defects of Optical Elements Based on Sparse Matrix. Chinese Journal of Lasers, 46(4): 182-190.

邓仕超,黄寅. 2017. 二值图像膨胀腐蚀的快速算法. 计算机工程与应用,53(5):207-211.

Deng Shichao, and Huang Yin. 2017. A Fast Algorithm for Dilation and Corrosion of Binary Images. Computer Engineering and Applications, 53(5): 207-211.

《广东农村统计年鉴》编辑委员会. 2021. 广东农村统计年鉴. 北京:中国统计出版社.

Editorial Board of Guangdong Rural Statistical Yearbook. 2021. Guangdong Rural Statistical Yearbook. Beijing: China Statistics Press.

贺丰收,何友,刘准钆,徐从安. 2020. 卷积神经网络在雷达自动目标识别中的研究进展. 电子与信息学报,42(1):119-131.

He Fengshou, He You, Liu Zhunga, and Xu Congan. 2020. Research Progress of Convolutional Neural Network in Radar Automatic Target Recognition. Journal of Electronics and Information Technology, 42(1): 119-131.

He Kaiming, Zhang Xiangyu, Ren Shaoqing, and Sun Jian. 2016. Deep Residual Learning for Image Recognition. In: IEEE. Conference on Computer Vision and Pattern Recognition. Piscataway N J: IEEE Computer Society, 770-778.

Howard Andrew G, Zhu Menglong, Chen Bo, Kalenichenko Dmitry, Wang Weijun, Weyand Tobias, Andreetto Marco, and Adam Hartwig. 2017. Mobilenets: Efficient Convolutional Neural Networks for Mobile Vision Applications. (2017-04-17) [2022-05-17]. https://doi.org/10.48550/arXiv.1704.04861.

胡典雄. 2018. 新型城镇化下的农村住宅建筑与设计理念研究. 中国住宅设施,(4):10-11.

Hu Dianxiong. 2018. Research on Rural Residential Architecture and Design Concept under New Urbanization. China Residential Facilities, (4): 10-11.

Karen Simonyan, and Andrew Zisserman. 2014. Very Deep Convolutional Networksfor Large-Scale Image Recognition.(2014-09-04) [2022-05-19]. https://doi.org/10.48550/arXiv. 1409.1556.

李小文,曹春香,常超一. 2007. 地理学第一定律与时空邻近度的提出. 自然杂志,(2):69-71.

Li Xiaowen, Cao Chunxiang, and Chang Chaoyi. 2007. The First Law of Geography and the Proposal of Spatio-Temporal Proximity. Chinese Journal of Nature, (2): 69-71.

李郇,许伟攀,黄耀福,陈浩辉,秦小珍,李颖,邓明亮,姜俊浩,秦雅雯. 2022. 基于遥感解译的中国农房空间分布特征分析. 地理学报,77(4):835-851.

Li Xun, Xu Weipan, Huang Yaofu, Chen Haohui, Qin Xiaozhen, Li Ying, Deng Mingliang, Jiang Junhao, and Qin Yawen. 2022. Analysis of Spatial Distribution Characteristics of Rural Houses in China Based on Remote Sensing Interpretation. Acta Geographica Sinica, 77(4): 835-851.

林倩,刘庆,苏劲松,林欢,杨静,罗斌. 2019. 神经网络机器翻译研究热点与前沿趋势分析. 中文信息学报,33(11):1-14.

Lin Qian, Liu Qing, Su Jinsong, Lin Huan, Yang Jing, and Luo Bin. 2019. Research Hotspots and Trends of Neural Network Machine Translation. Journal of Information Technology, 33(11): 1-14.

刘娟宏,胡彧,黄鹤宇. 2020. 端到端的深度卷积神经网络语音识别. 计算机应用与软件,37(4):192-196.

Liu Juanhong, Hu Yu and Huang Heyu. 2020. End-to-End Deep Convolutional Neural Network Speech Recognition. Computer Applications and Software, 37(4): 192-196.

Ripley B D, and Matheron G. 1975. Random Sets and Integral Geometry. Journal of the Royal Statistical Society, 139(2): 277-278.

Sandler Mark, Howard Andrew, Zhu Menglong, Zhmoginov Andrey, and Chen Liang-Chieh. 2018. MobileNetV2: Inverted Residuals and Linear Bottlenecks. In: IEEE. Conference on Computer Vision and Pattern Recognition. Piscataway N J: IEEE Computer Society, 4510-4520.

Serra Jean. 1986. Introduction to Mathematical Morphology.Computer Vision Graphics & Image Processing, 35(1): 283-305.

Szegedy Christian, Liu Wei, Jia Yangqing, Sermanet Pierre, Reed Scott, Anguelov Dragomir, Erhan Dumitru, Vanhoucke Vincent, and Rabinovich Andrew. 2015. Going Deeper with Convolutions. IEEE. Conference on Computer Vision and Pattern Recognition. Piscataway, NJ: IEEE Computer Society, 1-9).

谭庆扬,张骆琳. 2018. 广东乡村建筑空间布局特征及其规划引导研究. 东莞理工学院学报,25(5):91-99.

Tan Qingyang, and Zhang Luolin. 2018. Spatial Layout Characteristics and Planning Guidance of Rural Buildings in Guangdong. Journal of Dongguan University of Technology, 25(5): 91-99.

Tobler Waldo. 1970. A Computer Model Simulation of Urban Growth in the Detroit Region. Economic Geography, 46(2): 234-240.

王华俊,葛小三. 2022. 一种轻量级的DeepLabv3+遥感影像建筑物提取方法. 自然资源遥感,34(2):128-135.

Wang Huajun, and Ge Xiaosan. 2022. A Lightweight Building Extraction Method from DeepLabv3+ Remote Sensing Images. Remote Sensing of Natural Resources, 34(2): 128-135.

王晶,王亮,朱沁萱. 2016. 农村住宅建筑节能改善策略研究. 制冷与空调,30(1):26-29,32.

Wang Jin, Wang Liang, and Zhu Qinxuan. 2016. Research on Energy Conservation Improvement Strategies of Rural Residential Buildings. Refrigeration and Air Conditioning, 30(1): 26-29, 32.

武东海,朱岩. 2018. 浅析如何做好第三次全国土地调查工作. 国土资源,(4):56-57.

Wu Donghai, and Zhu Yan. 2018. Brief Analysis on How to Do the Third National Land Survey Well. Land and Resources, (4): 56-57.

许博鸣,刘晓峰,业巧林,张福全,周京正. 2019. 基于卷积神经网络面向自然场景建筑物识别技术的移动端应用. 南京师范大学学报(工程技术版),19(3):37-44.

Xu Boming, Liu Xiaofeng, Ye Qiaolin, Zhang Fuquan, and Zhou Jingzheng. 2019. Mobile Application of Convolutional Neural Network for Building Recognition in Natural Scenes. Journal of Nanjing Normal University (Engineering and Technology Edition), 19(3): 37-44.

余璀璨,李慧斌. 2021. 基于深度学习的人脸识别方法综述. 工程数学学报,38(4):451-469.

Yu Cuican, and Li Huibin. 2021. A Survey of Face Recognition Methods Based on Deep Learning. Journal of Engineering Mathematics, 38(4): 451-469.

于坤,王贺封,焦月正,李武乾. 2021. 基于语义分割的遥感影像建筑物提取. 测绘与空间地理信息,44(10):50-54.

Yu Kun, Wang Hefeng, Jiao Yuezheng, and Li Wuqian. 2021. Building Extraction from Remote Sensing Images Based on Semantic Segmentation. Geomatics and Spatial Geoinformation, 44(10): 50-54.

张号逵,李映,姜晔楠. 2018. 深度学习在高光谱图像分类领域的研究现状与展望. 自动化学报,44(6):961-977.

Zhang Haokui, Li Ying, and Jiang Yenan. 2018. Research Status and Prospect of Deep Learning in Hyperspectral Image Classification. Acta Automatica Sinica, 44(6): 961-977.

张慧,王坤峰,王飞跃. 2017. 深度学习在目标视觉检测中的应用进展与展望. 自动化学报,43(8):1-17.

Zhang Hui, Wang Kunfeng, and Wang Feiyue. 2017. Progress and Prospect of Deep Learning in Object Visual Detection. Acta Automatica Sinica, 43(8): 1-17.

赵其国,周生路,吴绍华,任奎. 2006. 中国耕地资源变化及其可持续利用与保护对策. 土壤学报,43(4):662-672.

Zhao Qiguo, Zhou Shenglu, Wu Shaohua, and Ren Kui. 2006. Changes of Cultivated Land Resources in China and Its Sustainable Utilization and Protection Strategies. Acta Pedologica Sinica, 43(4): 662-672.

郑远攀,李广阳,李晔. 2019. 深度学习在图像识别中的应用研究综述. 计算机工程与应用,55(12):20-36.

Zheng Yuanpan, Li Guangyang, and Li Ye. 2019. Review on the Application of Deep Learning in Image Recognition. Computer Engineering and Applications, 55(12): 20-36.

朱向雷,王海弛,尤翰墨,张蔚珩,张颖异,刘爽,陈俊洁,王赞,李克秋. 2021. 自动驾驶智能系统测试研究综述. 软件学报,32(7):22.

Zhu Xianglei, Wang Haichi, You Hanmo, Zhang Weiheng, Zhang Yingyi, Liu Shuang, Chen Junjie, Wang Zan, and Li Keqiu. 2021. Review of Intelligent System Testing for Autonomous Driving. Journal of Software, 32(7): 22.

文章导航

/