CN111179217A - 一种基于注意力机制的遥感图像多尺度目标检测方法 - Google Patents

一种基于注意力机制的遥感图像多尺度目标检测方法 Download PDF

Info

Publication number
CN111179217A
CN111179217A CN201911229726.1A CN201911229726A CN111179217A CN 111179217 A CN111179217 A CN 111179217A CN 201911229726 A CN201911229726 A CN 201911229726A CN 111179217 A CN111179217 A CN 111179217A
Authority
CN
China
Prior art keywords
attention
remote sensing
target
sensing image
features
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911229726.1A
Other languages
English (en)
Inventor
于瑞国
汪嫱
王臣汉
李雪威
喻梅
姜汉
高洁
刘志强
应翔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianjin University
Original Assignee
Tianjin University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianjin University filed Critical Tianjin University
Priority to CN201911229726.1A priority Critical patent/CN111179217A/zh
Publication of CN111179217A publication Critical patent/CN111179217A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10032Satellite or aerial image; Remote sensing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20092Interactive image processing based on input by user
    • G06T2207/20104Interactive definition of region of interest [ROI]

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • Biomedical Technology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开一种基于注意力机制的遥感图像多尺度目标检测方法,针对遥感图像背景复杂、小目标众多,目标尺寸多样化的特点,采用特征金字塔网络进行不同尺度目标的预测。为了更加准确地关注到目标所在区域,在网络中引入注意力机制,有效地提高目标检测精度。其中,包括全局空间注意力模块和像素特征注意力模块。全局空间注意力模块通过从浅层特征中提取空间位置相关信息,并与深层特征融合,强化深层特征的位置表达能力。像素特征注意力模块以多尺度卷积核产生与输入同尺寸的特征图,并以通道注意力的方式为每层特征图赋予权值,得到细节信息表现良好的像素级注意力图在不增加计算量的同时增加了感受野。

Description

一种基于注意力机制的遥感图像多尺度目标检测方法
技术领域
本发明属于人工智能、深度学习和计算机视觉领域,涉及目标检测和显著特征提取技术,尤其是一种基于注意力机制的遥感图像目标检测技术。
背景技术
目前在相关技术中,目标检测技术主要是针对自然图像,方法主要分为两类:一种是two-stage的目标检测方法,应用较为广泛。Two-stage的方法以Faster R-CNN、FPN等方法为代表,将目标检测分为两个阶段:区域生成和目标分类。先利用预训练的CNN网络进行特征提取,然后通过区域生成网络RPN生成一定数量的候选区域,再对候选区域进行细粒度的物体分类和边框回归。Two-stage方法可以获得较为精确地检测结果,但是缺点是由于需要先生成大量不同尺度的候选框,所以不能达到实时的检测速度。
另一类是one-stage的目标检测方法。One-stage方法可以直接在网络中提取特征来预测物体的分类和位置,虽然损失了一些准确率但是极大地提高了检测速度。例如以YOLO为代表,将待检测图像缩放到统一尺寸,为了检测不同位置的目标,将图像等分成网格,如果某个目标的中心落在一个网格单元中,此网格单元就负责预测该目标。YOLO的检测速度较FasterR-CNN有了近10倍的提升。但是one-stage方法的检测准确率不如two-stage类的方法,网格划分的大小对检测结果影响较大。
在遥感图像目标检测方面,由于遥感图像具有背景复杂、角度多样化、尺寸大小不一,并且存在大量的小目标等特点,难度相对较大。但是现有遥感图像的目标检测还是采用跟自然图像一样的方法,没有针对遥感图像中存在的背景繁杂导致网络难以准确注意到关键的图像区域等问题提出解决方案。
发明内容
本发明的目的是为了克服现有技术中的不足,提供一种基于注意力机制的遥感图像多尺度目标检测方法,能够有效的优化传统的针对自然图像的检测方法在面对遥感图像时难以在繁杂的背景中准确定位目标的问题。
本发明的目的是通过以下技术方案实现的:
一种基于注意力机制的遥感图像多尺度目标检测方法,包括以下步骤:
步骤一,将遥感图像经过特征金字塔网络,提取不同尺度的特征,低层网络中提取浅层特征,高层网络中提取深层特征;
步骤二,引入全局空间注意力模块(GSA,global spatial attention),从低层网络中提取浅层特征,用浅层特征的注意力信息去优化深层特征;
步骤三,将最后一层提取出的特征经过像素特征注意力模块(PFA,pixel featureattention),增大感受野,并减少细节信息损失;
步骤四,将步骤一产生的不同尺度的特征图,送到候选框生成网络(RPN,regionproposal network)生成候选框;
步骤五,将候选框中的目标映射到不同尺度的特征图上,通过ROI pooling将每个特征图上的候选框变形到固定尺寸,并提取相关目标的特征;
步骤六,对候选框进行分类和边框回归。
进一步的,步骤一具体包括以下步骤:采用特征金字塔网络,包括自底向上和自顶向下两个部分,自底向上为卷积和池化的过程,分辨率不断减小;将每一个块作为一个stage,共包括五个stage;自顶向下过程从stage 5的特征图开始进行上采样,然后与自底向上生成的相同大小的特征图进行横向连接;再采用3x3的卷积核对每个融合结果进行卷积,消除上采样混叠效应。
进一步的,步骤二是在步骤一中进行自底向上提取特征的过程中进行的操作,首先对浅层的特征进行全局平均池化和全局最大值池化,然后通过逐像素相加将两张注意力图融合产生全局注意力图;最后将全局注意力图与深层特征图相乘。
进一步的,步骤三是在步骤一自底向上的stage 5后引入像素特征注意力模块,通过通道注意力方式,为特征图的每一层赋予权值;将全局信息和细节信息进行了融合,提高网络对目标区域的定位能力。
进一步的,步骤四是候选框生成网络通过采用anchors对提取的不同尺度的卷积特征图进行处理,提取不同大小的候选框,寻找可能包含目标的预定义数量的区域。
与现有技术相比,本发明的技术方案所带来的有益效果是:
1.本发明所提出的基于注意力机制的遥感图像多尺度目标检测方法,为遥感图像的目标检测提供了一种新思路,注意力机制的引入可以让网络更加准确的定位到目标所在位置,并且该方法具有较好的泛化性,对于自然图像的目标检测也具有较好的效果。
2.GSA模块有效地减少了小目标的信息损失,提升了训练速度,加快了网络的收敛,对不同尺寸的目标均能达到较好的检测效果。
3.PFA模块增加了感受野,在不增加计算量的前提下,减少了网络的误检,有效地提高了目标检测的准确率。
附图说明
图1为本发明整体结构示意图。
图2是全局空间注意力模块示意图。
图3是像素特征注意力模块示意图。
图4a和图4b分别是FPN方法和本发明方法(AMOD)的目标检测结果图。
具体实施方式
以下结合附图和具体实施例对本发明作进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明提出了一种基于注意力机制的遥感图像多尺度目标检测模型,如图1所示,为本发明的整体结构示意图,其中包括的两个模块如图2、图3所示,整体处理步骤如下:
步骤S1.1:采用ResNet101作为特征提取网络,通过卷积和池化操作提取浅层特征和深层特征,浅层特征分辨率高,位于提取网络的低层,深层特征分辨率低,位于提取网络的高层。
步骤S2.1:通过提取浅层的全局空间注意力,与深层特征融合,优化深层特征因分辨率低而导致的小物体信息丢失的问题。对于F∈RH×W×C的浅层特征图,在维度C上分别进行全局平均池化和全局最大值池化得到F'∈RH×W×1的特征图,然后通过逐像素相加的方式融合,如公式(1)所示:
Figure BDA0002303204660000031
其中F为浅层特征图,Fgsa为全局空间注意力的输出结果,sigmoid为sigmoid激活函数,AvgPool为全局平均池化,MaxPool为全局最大值池化,
Figure BDA0002303204660000032
为逐像素相加。
步骤S2.2:将浅层特征进行下采样变成与深层特征一样的大小,再与其相乘,即将更准确的位置信息传递给深层特征,如公式(2)所示:
Figure BDA0002303204660000033
其中down代表下采样,F’为深层特征图,Fgsa为浅层特征的全局注意力图,
Figure BDA0002303204660000034
为逐像素相乘。
步骤S3.1:计算像素特征注意力的通道注意力分支。为获得特征图各通道的全局信息,先对特征图进行全局平均池化,特征图的大小变为1×1×C,再进行1×1的卷积来整合特征图,计算公式如(3)所示:
MG(F)=σ(f1×1(AvgPool(F))) (3)
其中f1×1代表1x1的卷积,AvgPool为全局平均池化,σ为relu激活函数,MG(F)为通道注意力分支的输出。
步骤S3.2:计算像素特征注意力的卷积分支。将特征图通过1×1的卷积,如公式(4)所示:
MC(F)=f1×1(F) (4)
其中f1×1代表采用核为1的卷积,MC(F)为卷积分支的输出。
步骤S3.3:计算像素特征注意力的多尺度卷积分支。先采用5x5,步长为2的卷积核作用于输入,得到尺寸减半的特征图。然后,再使用5x5,步长为1的卷积核和尺寸为3,步长分别为2和1的卷积核,分别得到为输入尺寸1/2和1/4的特征图。最后对较小的特征图进行上采样,将二者融合到一起,再次上采样恢复到原特征图大小,公式如(5)所示:
Figure BDA0002303204660000041
其中up代表上采样,f3×3和f5×5分别表示为卷积核为3和5的卷积,
Figure BDA0002303204660000042
为逐像素相加,Mm(F)为多尺度卷积分支的输出。
步骤S3.4:将特征图F输入像素特征注意力模块的不同分支得到的特征图进行融合,如公式(6)、(7)所示:
Figure BDA0002303204660000043
Fout=M(F) (7)
其中σ为relu激活函数,
Figure BDA0002303204660000044
为逐像素相加,
Figure BDA0002303204660000045
为逐像素相乘,MG(F)、MC(F)、Mm(F)分别为特征图F通过全局通道注意力分支、卷积分支、多尺度卷积分支后得到的结果,Fout为像素特征注意力模块的输出结果。
步骤S3.5:自顶向下过程从stage 5的特征图开始进行上采样,然后与自底向上生成的相同大小的特征图进行横向连接。再采用3x3的卷积核对每个融合结果进行卷积,产生不同尺度的特征图。
步骤S4.1:采用3×3的卷积核对不同尺度的特征图进行卷积,同时以特征图的每个区域的中心点为中心学习多个不同尺度的不同长宽比的区域,称之为anchor。将每个anchor与真实值计算交并比IOU,如公式(8)所示,大于0.5的称为positive anchor,否则称为negativeanchor。本发明所提出的方法anchor设定的面积尺寸为{322,642,1282,2242,2562},三种不同的长宽比例为{1:1,1:2,2:1}。
Figure BDA0002303204660000046
其中,box表示提取出的候选框,gt为每个目标真实的框。
步骤S4.2:利用步骤S4.1中RPN网络生成的候选框和步骤S3生成的不同尺度的特征图,将候选框映射到特征图上。
步骤S5:将步骤S4.2中的特征图中的候选框变形到固定大小,然后进行全连接操作,进行预测。对每个候选框,依据其大小选择一个stage进行预测,如公式(9)所示:
Figure BDA0002303204660000051
其中,w和h分别表示候选框的宽和高。参数k0为一正整数,表示w×h=1282的情况下候选框应该映射到的目标stage,在实验中,一般取固定值4。128为基准面积,是由数据集的尺寸来决定的。k为拟用来检测目标的stage。
步骤S5.2:利用softmax进行具体类别的分类,如公式(10)所示:
Lcls(pi,pi *)=-log[pi *pi+(1-pi *)(1-pi)] (10)
其中pi为anchor预测为目标的概率,pi *为真实值的标签,Lcls(pi,pi *)为分类损失函数。
步骤S5.3:利用L1 loss进行边框回归获得物体的精确位置,如公式(11)所示:
Figure BDA0002303204660000052
其中ti={tx,ty,tw,th}是一个向量,表示预测的框的4个坐标,ti *是positiveanchor对应的真实框的坐标向量,pi为anchor预测为目标的概率,pi *为真实值的标签,Lreg(ti,ti *)为边框回归损失函数。
步骤S5.4:进行分类和边框回归的联合训练,总的损失函数如公式(12)所示:
Figure BDA0002303204660000053
其中pi为anchor预测为目标的概率,pi *为真实值的标签,ti={tx,ty,tw,th}是一个向量,表示预测的框的4个坐标,ti *是positive anchor对应的真实框的坐标向量,Lcls(pi,pi *)为分类损失函数,Lreg(ti,ti *)为边框回归损失函数,λ是平衡权重,Ncls为mini-batch的大小,Nreg为anchor的数量。
为了验证方法具有较好的泛化性,本发明在遥感数据集NWPU(含10种目标类别)和RSOD(含4种目标类别),以及自然数据集PASCAL VOC 07(含20种目标类别)上进行了实验。遥感数据集按照8:2的比例随机划分训练集和测试集。
将每个类别的平均精度(AP)以及所有类别的平均精度均值(mAP)作为评价标准可定量评估检测的效果,值越大越好。如表1所示,实验结果表明,无论是对于遥感图像还是自然图像,本发明提出的模型均取得了最佳的检测效果。在NWPU数据集上,对于storagetank、ship等小目标以及bridge、harbor这种形状较长的目标检测效果提升较大,相比FPN方法提升了3.75%;在RSOD数据集上各类别检测效果均有不同程度的提升;在PASCAL VOC07上,SSD300和YOLO3采用了PASCAL VOC 07和12作为训练集和测试集,而其余各个模型均只采用了PASCAL VOC 07作为训练集,可以看出本发明的AMOD模型在更少的训练集下却能达到最好的效果。本发明提出的模型比YOLO3高出0.8%,比FPN高出了1.3%。
表1 NWPU-VHR 10、RSOD、PASCAL VOC 07数据集上不同方法检测结果对比
Figure BDA0002303204660000061
表1中,通过比较目前最先进方法的目标检测的mAP可以得知,无论是对于遥感图像还是自然图像,本发明所提出的基于注意力机制的遥感图像多尺度目标检测方法均可以有效地提高目标检测的准确。尤其是在NWPU数据集上,比Faster R-CNN提升了9.2%,比YOLO3提升了5.2%。
在训练速度上,基于注意力机制的遥感图像多尺度目标检测方法可以更快的定位到目标所在区域,提升了训练速度,加快了收敛。如表2所示,相比较于基准FPN方法,改进的AMOD方法在速度上有了明显的提升。在NWPU数据集上提升了37.5%的训练速度,在RSOD上提升了20%,在PASCAL VOC 07上提升了35%。
表2 NWPU、RSOD、PASCAL VOC 07数据集上不同方法训练速度对比
FPN迭代次数 AMOD迭代次数
NWPU 40000 25000
RSOD 50000 40000
PASCAL VOC 07 200000 130000
部分遥感图像检测结果如图4a和图4b所示,可以看出FPN方法没有检测出所有的桥和网球场,而本发明改进的AMOD方法由于添加了像素特征注意力模块,增加了感受野,减少了漏检,有效的提升了目标检测精度。
本发明并不限于上文描述的实施方式。以上对具体实施方式的描述旨在描述和说明本发明的技术方案,上述的具体实施方式仅仅是示意性的,并不是限制性的。在不脱离本发明宗旨和权利要求所保护的范围情况下,本领域的普通技术人员在本发明的启示下还可做出很多形式的具体变换,这些均属于本发明的保护范围之内。

Claims (5)

1.一种基于注意力机制的遥感图像多尺度目标检测方法,其特征在于,包括以下步骤:
步骤一,将遥感图像经过特征金字塔网络,提取不同尺度的特征,从低层网络中提取浅层特征,高层网络中提取深层特征;
步骤二,引入全局空间注意力模块(GSA,global spatial attention),从低层网络中提取浅层特征的注意力信息,对深层特征进行优化;
步骤三,将最后一层提取出的特征经过像素特征注意力模块(PFA,pixel featureattention),增大感受野,并减少细节信息损失;
步骤四,将步骤一产生的不同尺度的特征图,送到候选框生成网络(RPN,regionproposal network)生成候选框;
步骤五,将候选框中的目标映射到不同尺度的特征图上,通过ROI pooling将每个特征图上的候选框变形到固定尺寸,并提取相关目标的特征;
步骤六,对候选框进行分类和边框回归。
2.根据权利要求1所述一种基于注意力机制的遥感图像多尺度目标检测方法,其特征在于,步骤一具体包括以下步骤:采用特征金字塔网络,包括自底向上和自顶向下两个部分,自底向上为卷积和池化的过程,分辨率不断减小;将每一个块作为一个stage,共包括五个stage;自顶向下过程从stage 5的特征图开始进行上采样,然后与自底向上生成的相同大小的特征图进行横向连接;再采用3x3的卷积核对每个融合结果进行卷积,消除上采样混叠效应。
3.根据权利要求2所述一种基于注意力机制的遥感图像多尺度目标检测方法,其特征在于,步骤二是在步骤一中进行自底向上提取特征的过程中进行的操作,首先对浅层的特征进行全局平均池化和全局最大值池化,然后通过逐像素相加将两张注意力图融合产生全局注意力图;最后将全局注意力图与深层特征图相乘。
4.根据权利要求2所述一种基于注意力机制的遥感图像多尺度目标检测方法,其特征在于,步骤三是在步骤一自底向上的stage 5后引入像素特征注意力模块,通过通道注意力方式,为特征图的每一层赋予权值;将全局信息和细节信息进行了融合,提高网络对目标区域的定位能力。
5.根据权利要求1所述一种基于注意力机制的遥感图像多尺度目标检测方法,其特征在于,步骤四是候选框生成网络通过采用anchors对提取的不同尺度的卷积特征图进行处理,提取不同大小的候选框,寻找可能包含目标的预定义数量的区域。
CN201911229726.1A 2019-12-04 2019-12-04 一种基于注意力机制的遥感图像多尺度目标检测方法 Pending CN111179217A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911229726.1A CN111179217A (zh) 2019-12-04 2019-12-04 一种基于注意力机制的遥感图像多尺度目标检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911229726.1A CN111179217A (zh) 2019-12-04 2019-12-04 一种基于注意力机制的遥感图像多尺度目标检测方法

Publications (1)

Publication Number Publication Date
CN111179217A true CN111179217A (zh) 2020-05-19

Family

ID=70650174

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911229726.1A Pending CN111179217A (zh) 2019-12-04 2019-12-04 一种基于注意力机制的遥感图像多尺度目标检测方法

Country Status (1)

Country Link
CN (1) CN111179217A (zh)

Cited By (54)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111652152A (zh) * 2020-06-04 2020-09-11 上海眼控科技股份有限公司 人群密度检测方法、装置、计算机设备和存储介质
CN111738110A (zh) * 2020-06-10 2020-10-02 杭州电子科技大学 基于多尺度注意力机制的遥感图像车辆目标检测方法
CN111798921A (zh) * 2020-06-22 2020-10-20 武汉大学 一种基于多尺度注意力卷积神经网络的rna结合蛋白预测方法及装置
CN111814726A (zh) * 2020-07-20 2020-10-23 南京工程学院 一种探测机器人视觉目标检测方法
CN111815677A (zh) * 2020-07-10 2020-10-23 中山大学新华学院 目标追踪方法、装置、终端设备和可读存储介质
CN111860398A (zh) * 2020-07-28 2020-10-30 河北师范大学 遥感图像目标检测方法、系统及终端设备
CN111914804A (zh) * 2020-08-18 2020-11-10 中科弘云科技(北京)有限公司 多角度旋转遥感图像小目标检测方法
CN111914726A (zh) * 2020-07-28 2020-11-10 联芯智能(南京)科技有限公司 基于多通道自适应注意力机制的行人检测方法
CN111914917A (zh) * 2020-07-22 2020-11-10 西安建筑科技大学 一种基于特征金字塔网络和注意力机制的目标检测改进算法
CN111931684A (zh) * 2020-08-26 2020-11-13 北京建筑大学 一种基于视频卫星数据鉴别特征的弱小目标检测方法
CN111950586A (zh) * 2020-07-01 2020-11-17 银江股份有限公司 一种引入双向注意力的目标检测方法
CN112016569A (zh) * 2020-07-24 2020-12-01 驭势科技(南京)有限公司 基于注意力机制的目标检测方法、网络、设备和存储介质
CN112016472A (zh) * 2020-08-31 2020-12-01 山东大学 基于目标动态信息的驾驶员注意力区域预测方法及系统
CN112084868A (zh) * 2020-08-10 2020-12-15 北京航空航天大学 一种基于注意力机制的遥感图像中目标计数方法
CN112101189A (zh) * 2020-09-11 2020-12-18 北京航空航天大学 基于注意力机制的sar图像目标检测方法及测试平台
CN112132216A (zh) * 2020-09-22 2020-12-25 平安国际智慧城市科技股份有限公司 车型识别方法、装置、电子设备及存储介质
CN112163580A (zh) * 2020-10-12 2021-01-01 中国石油大学(华东) 一种基于注意力机制的小目标检测算法
CN112183203A (zh) * 2020-08-26 2021-01-05 北京工业大学 一种基于多尺度像素特征融合的实时交通标志检测方法
CN112183269A (zh) * 2020-09-18 2021-01-05 哈尔滨工业大学(深圳) 一种适用于智能视频监控的目标检测方法与系统
CN112215207A (zh) * 2020-11-10 2021-01-12 中国人民解放军战略支援部队信息工程大学 联合多尺度和注意力机制的遥感影像飞机目标检测方法
CN112232232A (zh) * 2020-10-20 2021-01-15 城云科技(中国)有限公司 一种目标检测方法
CN112307984A (zh) * 2020-11-02 2021-02-02 安徽工业大学 基于神经网络的安全帽检测方法和装置
CN112418345A (zh) * 2020-12-07 2021-02-26 苏州小阳软件科技有限公司 细粒度小目标快速识别的方法和装置
CN112560907A (zh) * 2020-12-02 2021-03-26 西安电子科技大学 基于混合域注意力的有限像素红外无人机目标检测方法
CN112651326A (zh) * 2020-12-22 2021-04-13 济南大学 一种基于深度学习的驾驶员手部检测方法及系统
CN112686304A (zh) * 2020-12-29 2021-04-20 山东大学 一种基于注意力机制以及多尺度特征融合的目标检测方法、设备及存储介质
CN112784779A (zh) * 2021-01-28 2021-05-11 武汉大学 一种基于特征金字塔多级特征融合的遥感影像场景分类方法
CN112800964A (zh) * 2021-01-27 2021-05-14 中国人民解放军战略支援部队信息工程大学 基于多模块融合的遥感影像目标检测方法及系统
CN113011308A (zh) * 2021-03-15 2021-06-22 山东大学 一种引入注意力机制的行人检测方法
CN113033448A (zh) * 2021-04-02 2021-06-25 东北林业大学 一种基于多尺度卷积和注意力的遥感影像去云残差神经网络系统、方法、设备及存储介质
CN113052188A (zh) * 2021-03-26 2021-06-29 大连理工大学人工智能大连研究院 一种遥感图像目标检测方法、系统、设备以及存储介质
CN113223044A (zh) * 2021-04-21 2021-08-06 西北工业大学 一种结合特征聚合和注意力机制的红外视频目标检测方法
CN113239825A (zh) * 2021-05-19 2021-08-10 四川中烟工业有限责任公司 一种复杂场景下高精度烟草甲虫检测方法
CN113255699A (zh) * 2021-06-10 2021-08-13 浙江华睿科技有限公司 小目标物体图像检测方法、装置、电子设备及存储介质
CN113327226A (zh) * 2021-05-07 2021-08-31 北京工业大学 目标检测方法、装置、电子设备及存储介质
CN113420838A (zh) * 2021-08-20 2021-09-21 中国科学院空天信息创新研究院 基于多尺度注意力特征融合的sar与光学图像分类方法
CN113610024A (zh) * 2021-08-13 2021-11-05 天津大学 一种多策略的深度学习遥感影像小目标检测方法
CN113793472A (zh) * 2021-09-15 2021-12-14 应急管理部沈阳消防研究所 基于特征深度聚合网络的图像型火灾探测器位姿估计方法
CN114022682A (zh) * 2021-11-05 2022-02-08 天津大学 一种基于注意力的二次特征融合机制的弱小目标检测方法
CN114119582A (zh) * 2021-12-01 2022-03-01 安徽大学 一种合成孔径雷达图像目标检测方法
CN114220015A (zh) * 2021-12-21 2022-03-22 一拓通信集团股份有限公司 一种基于改进YOLOv5的卫星图像小目标检测方法
CN114241277A (zh) * 2021-12-22 2022-03-25 中国人民解放军国防科技大学 注意力引导的多特征融合伪装目标检测方法、装置、设备及介质
CN114494728A (zh) * 2022-02-10 2022-05-13 北京工业大学 一种基于深度学习的小目标检测方法
CN114565860A (zh) * 2022-03-01 2022-05-31 安徽大学 一种多维度增强学习合成孔径雷达图像目标检测方法
CN114648802A (zh) * 2022-05-19 2022-06-21 深圳市海清视讯科技有限公司 用户面部表情识别方法、装置和设备
CN114663654A (zh) * 2022-05-26 2022-06-24 西安石油大学 一种改进YOLOv4网络模型及小目标检测方法
CN114708511A (zh) * 2022-06-01 2022-07-05 成都信息工程大学 基于多尺度特征融合和特征增强的遥感图像目标检测方法
CN114926747A (zh) * 2022-05-31 2022-08-19 常州大学 一种基于多特征聚合与交互的遥感图像定向目标检测方法
CN115565077A (zh) * 2022-09-29 2023-01-03 哈尔滨天枢问道技术有限公司 一种基于空间特征整合的遥感图像小目标检测算法
CN116229272A (zh) * 2023-03-14 2023-06-06 中国人民解放军陆军军事交通学院镇江校区 一种基于代表点表示的高精度遥感图像检测方法及系统
CN116403115A (zh) * 2023-06-07 2023-07-07 江西啄木蜂科技有限公司 一种大幅面遥感影像目标检测方法
CN116740370A (zh) * 2023-05-18 2023-09-12 北京理工大学 一种基于深度自注意力变换网络的复杂目标识别方法
CN117789153A (zh) * 2024-02-26 2024-03-29 浙江驿公里智能科技有限公司 基于计算机视觉的汽车油箱外盖定位系统及方法
CN118644666A (zh) * 2024-08-14 2024-09-13 江西师范大学 一种面向遥感目标检测场景的图像处理方法及系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109284670A (zh) * 2018-08-01 2019-01-29 清华大学 一种基于多尺度注意力机制的行人检测方法及装置
CN109614985A (zh) * 2018-11-06 2019-04-12 华南理工大学 一种基于密集连接特征金字塔网络的目标检测方法
CN110084195A (zh) * 2019-04-26 2019-08-02 西安电子科技大学 基于卷积神经网络的遥感图像目标检测方法
CN110084249A (zh) * 2019-04-24 2019-08-02 哈尔滨工业大学 基于金字塔特征注意的图像显著性检测方法
CN110084210A (zh) * 2019-04-30 2019-08-02 电子科技大学 基于注意力金字塔网络的sar图像多尺度舰船检测方法
US20190266712A1 (en) * 2018-02-24 2019-08-29 United States Of America As Represented By The Administrator Of The Nasa System and method for imaging underwater environments using fluid lensing
CN110197182A (zh) * 2019-06-11 2019-09-03 中国电子科技集团公司第五十四研究所 基于上下文信息和注意力机制的遥感影像语义分割方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190266712A1 (en) * 2018-02-24 2019-08-29 United States Of America As Represented By The Administrator Of The Nasa System and method for imaging underwater environments using fluid lensing
CN109284670A (zh) * 2018-08-01 2019-01-29 清华大学 一种基于多尺度注意力机制的行人检测方法及装置
CN109614985A (zh) * 2018-11-06 2019-04-12 华南理工大学 一种基于密集连接特征金字塔网络的目标检测方法
CN110084249A (zh) * 2019-04-24 2019-08-02 哈尔滨工业大学 基于金字塔特征注意的图像显著性检测方法
CN110084195A (zh) * 2019-04-26 2019-08-02 西安电子科技大学 基于卷积神经网络的遥感图像目标检测方法
CN110084210A (zh) * 2019-04-30 2019-08-02 电子科技大学 基于注意力金字塔网络的sar图像多尺度舰船检测方法
CN110197182A (zh) * 2019-06-11 2019-09-03 中国电子科技集团公司第五十四研究所 基于上下文信息和注意力机制的遥感影像语义分割方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
应翔, IEEE ACCESS *

Cited By (81)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111652152A (zh) * 2020-06-04 2020-09-11 上海眼控科技股份有限公司 人群密度检测方法、装置、计算机设备和存储介质
CN111738110A (zh) * 2020-06-10 2020-10-02 杭州电子科技大学 基于多尺度注意力机制的遥感图像车辆目标检测方法
CN111798921B (zh) * 2020-06-22 2022-08-05 武汉大学 一种基于多尺度注意力卷积神经网络的rna结合蛋白预测方法及装置
CN111798921A (zh) * 2020-06-22 2020-10-20 武汉大学 一种基于多尺度注意力卷积神经网络的rna结合蛋白预测方法及装置
CN111950586B (zh) * 2020-07-01 2024-01-19 银江技术股份有限公司 一种引入双向注意力的目标检测方法
CN111950586A (zh) * 2020-07-01 2020-11-17 银江股份有限公司 一种引入双向注意力的目标检测方法
CN111815677A (zh) * 2020-07-10 2020-10-23 中山大学新华学院 目标追踪方法、装置、终端设备和可读存储介质
CN111814726A (zh) * 2020-07-20 2020-10-23 南京工程学院 一种探测机器人视觉目标检测方法
CN111814726B (zh) * 2020-07-20 2023-09-22 南京工程学院 一种探测机器人视觉目标检测方法
CN111914917A (zh) * 2020-07-22 2020-11-10 西安建筑科技大学 一种基于特征金字塔网络和注意力机制的目标检测改进算法
CN112016569A (zh) * 2020-07-24 2020-12-01 驭势科技(南京)有限公司 基于注意力机制的目标检测方法、网络、设备和存储介质
CN111860398A (zh) * 2020-07-28 2020-10-30 河北师范大学 遥感图像目标检测方法、系统及终端设备
CN111914726A (zh) * 2020-07-28 2020-11-10 联芯智能(南京)科技有限公司 基于多通道自适应注意力机制的行人检测方法
CN111914726B (zh) * 2020-07-28 2024-05-07 联芯智能(南京)科技有限公司 基于多通道自适应注意力机制的行人检测方法
CN112084868A (zh) * 2020-08-10 2020-12-15 北京航空航天大学 一种基于注意力机制的遥感图像中目标计数方法
CN111914804A (zh) * 2020-08-18 2020-11-10 中科弘云科技(北京)有限公司 多角度旋转遥感图像小目标检测方法
CN111931684A (zh) * 2020-08-26 2020-11-13 北京建筑大学 一种基于视频卫星数据鉴别特征的弱小目标检测方法
CN111931684B (zh) * 2020-08-26 2021-04-06 北京建筑大学 一种基于视频卫星数据鉴别特征的弱小目标检测方法
CN112183203A (zh) * 2020-08-26 2021-01-05 北京工业大学 一种基于多尺度像素特征融合的实时交通标志检测方法
CN112183203B (zh) * 2020-08-26 2024-05-28 北京工业大学 一种基于多尺度像素特征融合的实时交通标志检测方法
CN112016472A (zh) * 2020-08-31 2020-12-01 山东大学 基于目标动态信息的驾驶员注意力区域预测方法及系统
CN112016472B (zh) * 2020-08-31 2023-08-22 山东大学 基于目标动态信息的驾驶员注意力区域预测方法及系统
CN112101189B (zh) * 2020-09-11 2022-09-30 北京航空航天大学 基于注意力机制的sar图像目标检测方法及测试平台
CN112101189A (zh) * 2020-09-11 2020-12-18 北京航空航天大学 基于注意力机制的sar图像目标检测方法及测试平台
CN112183269A (zh) * 2020-09-18 2021-01-05 哈尔滨工业大学(深圳) 一种适用于智能视频监控的目标检测方法与系统
CN112183269B (zh) * 2020-09-18 2023-08-29 哈尔滨工业大学(深圳) 一种适用于智能视频监控的目标检测方法与系统
CN112132216B (zh) * 2020-09-22 2024-04-09 平安国际智慧城市科技股份有限公司 车型识别方法、装置、电子设备及存储介质
CN112132216A (zh) * 2020-09-22 2020-12-25 平安国际智慧城市科技股份有限公司 车型识别方法、装置、电子设备及存储介质
CN112163580A (zh) * 2020-10-12 2021-01-01 中国石油大学(华东) 一种基于注意力机制的小目标检测算法
CN112163580B (zh) * 2020-10-12 2022-05-03 中国石油大学(华东) 一种基于注意力机制的小目标检测算法
CN112232232A (zh) * 2020-10-20 2021-01-15 城云科技(中国)有限公司 一种目标检测方法
CN112232232B (zh) * 2020-10-20 2022-09-27 城云科技(中国)有限公司 一种目标检测方法
CN112307984B (zh) * 2020-11-02 2023-02-17 安徽工业大学 基于神经网络的安全帽检测方法和装置
CN112307984A (zh) * 2020-11-02 2021-02-02 安徽工业大学 基于神经网络的安全帽检测方法和装置
CN112215207A (zh) * 2020-11-10 2021-01-12 中国人民解放军战略支援部队信息工程大学 联合多尺度和注意力机制的遥感影像飞机目标检测方法
CN112560907A (zh) * 2020-12-02 2021-03-26 西安电子科技大学 基于混合域注意力的有限像素红外无人机目标检测方法
CN112560907B (zh) * 2020-12-02 2024-05-28 西安电子科技大学 基于混合域注意力的有限像素红外无人机目标检测方法
CN112418345B (zh) * 2020-12-07 2024-02-23 深圳小阳软件有限公司 细粒度小目标快速识别的方法和装置
CN112418345A (zh) * 2020-12-07 2021-02-26 苏州小阳软件科技有限公司 细粒度小目标快速识别的方法和装置
CN112651326A (zh) * 2020-12-22 2021-04-13 济南大学 一种基于深度学习的驾驶员手部检测方法及系统
CN112686304A (zh) * 2020-12-29 2021-04-20 山东大学 一种基于注意力机制以及多尺度特征融合的目标检测方法、设备及存储介质
CN112800964B (zh) * 2021-01-27 2021-10-22 中国人民解放军战略支援部队信息工程大学 基于多模块融合的遥感影像目标检测方法及系统
CN112800964A (zh) * 2021-01-27 2021-05-14 中国人民解放军战略支援部队信息工程大学 基于多模块融合的遥感影像目标检测方法及系统
CN112784779A (zh) * 2021-01-28 2021-05-11 武汉大学 一种基于特征金字塔多级特征融合的遥感影像场景分类方法
CN113011308A (zh) * 2021-03-15 2021-06-22 山东大学 一种引入注意力机制的行人检测方法
CN113052188B (zh) * 2021-03-26 2024-07-26 大连理工大学人工智能大连研究院 一种遥感图像目标检测方法、系统、设备以及存储介质
CN113052188A (zh) * 2021-03-26 2021-06-29 大连理工大学人工智能大连研究院 一种遥感图像目标检测方法、系统、设备以及存储介质
CN113033448A (zh) * 2021-04-02 2021-06-25 东北林业大学 一种基于多尺度卷积和注意力的遥感影像去云残差神经网络系统、方法、设备及存储介质
CN113223044A (zh) * 2021-04-21 2021-08-06 西北工业大学 一种结合特征聚合和注意力机制的红外视频目标检测方法
CN113327226A (zh) * 2021-05-07 2021-08-31 北京工业大学 目标检测方法、装置、电子设备及存储介质
CN113239825A (zh) * 2021-05-19 2021-08-10 四川中烟工业有限责任公司 一种复杂场景下高精度烟草甲虫检测方法
CN113255699B (zh) * 2021-06-10 2022-01-18 浙江华睿科技股份有限公司 小目标物体图像检测方法、装置、电子设备及存储介质
CN113255699A (zh) * 2021-06-10 2021-08-13 浙江华睿科技有限公司 小目标物体图像检测方法、装置、电子设备及存储介质
CN113610024A (zh) * 2021-08-13 2021-11-05 天津大学 一种多策略的深度学习遥感影像小目标检测方法
CN113610024B (zh) * 2021-08-13 2022-08-12 天津大学 一种多策略的深度学习遥感影像小目标检测方法
CN113420838A (zh) * 2021-08-20 2021-09-21 中国科学院空天信息创新研究院 基于多尺度注意力特征融合的sar与光学图像分类方法
CN113420838B (zh) * 2021-08-20 2021-11-02 中国科学院空天信息创新研究院 基于多尺度注意力特征融合的sar与光学图像分类方法
CN113793472A (zh) * 2021-09-15 2021-12-14 应急管理部沈阳消防研究所 基于特征深度聚合网络的图像型火灾探测器位姿估计方法
CN114022682A (zh) * 2021-11-05 2022-02-08 天津大学 一种基于注意力的二次特征融合机制的弱小目标检测方法
CN114119582B (zh) * 2021-12-01 2024-04-26 安徽大学 一种合成孔径雷达图像目标检测方法
CN114119582A (zh) * 2021-12-01 2022-03-01 安徽大学 一种合成孔径雷达图像目标检测方法
CN114220015A (zh) * 2021-12-21 2022-03-22 一拓通信集团股份有限公司 一种基于改进YOLOv5的卫星图像小目标检测方法
CN114241277A (zh) * 2021-12-22 2022-03-25 中国人民解放军国防科技大学 注意力引导的多特征融合伪装目标检测方法、装置、设备及介质
CN114494728B (zh) * 2022-02-10 2024-06-07 北京工业大学 一种基于深度学习的小目标检测方法
CN114494728A (zh) * 2022-02-10 2022-05-13 北京工业大学 一种基于深度学习的小目标检测方法
CN114565860A (zh) * 2022-03-01 2022-05-31 安徽大学 一种多维度增强学习合成孔径雷达图像目标检测方法
CN114648802B (zh) * 2022-05-19 2022-08-23 深圳市海清视讯科技有限公司 用户面部表情识别方法、装置和设备
CN114648802A (zh) * 2022-05-19 2022-06-21 深圳市海清视讯科技有限公司 用户面部表情识别方法、装置和设备
CN114663654A (zh) * 2022-05-26 2022-06-24 西安石油大学 一种改进YOLOv4网络模型及小目标检测方法
CN114926747A (zh) * 2022-05-31 2022-08-19 常州大学 一种基于多特征聚合与交互的遥感图像定向目标检测方法
CN114708511B (zh) * 2022-06-01 2022-08-16 成都信息工程大学 基于多尺度特征融合和特征增强的遥感图像目标检测方法
CN114708511A (zh) * 2022-06-01 2022-07-05 成都信息工程大学 基于多尺度特征融合和特征增强的遥感图像目标检测方法
CN115565077A (zh) * 2022-09-29 2023-01-03 哈尔滨天枢问道技术有限公司 一种基于空间特征整合的遥感图像小目标检测算法
CN116229272B (zh) * 2023-03-14 2023-10-31 中国人民解放军陆军军事交通学院镇江校区 一种基于代表点表示的高精度遥感图像检测方法及系统
CN116229272A (zh) * 2023-03-14 2023-06-06 中国人民解放军陆军军事交通学院镇江校区 一种基于代表点表示的高精度遥感图像检测方法及系统
CN116740370A (zh) * 2023-05-18 2023-09-12 北京理工大学 一种基于深度自注意力变换网络的复杂目标识别方法
CN116403115B (zh) * 2023-06-07 2023-08-22 江西啄木蜂科技有限公司 一种大幅面遥感影像目标检测方法
CN116403115A (zh) * 2023-06-07 2023-07-07 江西啄木蜂科技有限公司 一种大幅面遥感影像目标检测方法
CN117789153A (zh) * 2024-02-26 2024-03-29 浙江驿公里智能科技有限公司 基于计算机视觉的汽车油箱外盖定位系统及方法
CN117789153B (zh) * 2024-02-26 2024-05-03 浙江驿公里智能科技有限公司 基于计算机视觉的汽车油箱外盖定位系统及方法
CN118644666A (zh) * 2024-08-14 2024-09-13 江西师范大学 一种面向遥感目标检测场景的图像处理方法及系统

Similar Documents

Publication Publication Date Title
CN111179217A (zh) 一种基于注意力机制的遥感图像多尺度目标检测方法
WO2021244079A1 (zh) 智能家居环境中图像目标检测方法
CN112396002B (zh) 一种基于SE-YOLOv3的轻量级遥感目标检测方法
CN111126472B (zh) 一种基于ssd改进的目标检测方法
CN109934200B (zh) 一种基于改进M-Net的RGB彩色遥感图像云检测方法及系统
CN108961235B (zh) 一种基于YOLOv3网络和粒子滤波算法的缺陷绝缘子识别方法
CN111027493B (zh) 一种基于深度学习多网络软融合的行人检测方法
CN111640125B (zh) 基于Mask R-CNN的航拍图建筑物检测和分割方法及装置
CN108416266B (zh) 一种利用光流提取运动目标的视频行为快速识别方法
CN111310861A (zh) 一种基于深度神经网络的车牌识别和定位方法
CN111368769B (zh) 基于改进锚点框生成模型的船舶多目标检测方法
CN110782420A (zh) 一种基于深度学习的小目标特征表示增强方法
CN111753828A (zh) 一种基于深度卷积神经网络的自然场景水平文字检测方法
CN114648665B (zh) 一种弱监督目标检测方法及系统
CN113076871A (zh) 一种基于目标遮挡补偿的鱼群自动检测方法
CN113920468B (zh) 一种基于跨尺度特征增强的多分支行人检测方法
CN111738344A (zh) 一种基于多尺度融合的快速目标检测方法
CN111444939A (zh) 电力领域开放场景下基于弱监督协同学习的小尺度设备部件检测方法
CN112364931A (zh) 基于元特征和权重调整的少样本目标检测方法及网络模型
CN113888461A (zh) 基于深度学习的小五金件缺陷检测方法、系统及设备
CN114332921A (zh) 基于改进聚类算法的Faster R-CNN网络的行人检测方法
CN112329771B (zh) 一种基于深度学习的建筑材料样本识别方法
CN117853955A (zh) 一种基于改进YOLOv5的无人机小目标检测方法
CN114565824B (zh) 基于全卷积网络的单阶段旋转舰船检测方法
CN116168240A (zh) 基于注意力增强的任意方向密集舰船目标检测方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination