面向弱纹理目标立体匹配的Transformer网络

下载全文  

目的 近年来,采用神经网络完成立体匹配任务已成为计算机视觉领域的研究热点,目前现有方法存在弱纹理目标缺乏全局表征的问题,为此本文提出一种基于Transformer架构的密集特征提取网络。方法 首先,采用空间池化窗口策略使得Transformer层可以在维持线性计算复杂度的同时,捕获广泛的上下文表示,弥补局部弱纹理导致的特征匮乏问题。其次,通过卷积与转置卷积实现重叠式块嵌入,使得所有特征点都尽可能多地捕捉邻近特征,便于细粒度匹配。再者,通过将跳跃查询策略应用于编码器和解码器间的特征融合部分,以此实现高效信息传递。最后,针对立体像对存在的遮挡情况,对固定区域内的匹配概率进行截断求和,输出更为合理的遮挡置信度。结果 在Scene Flow数据集上进行了消融实验,实验结果表明,本文网络获得了0.33的绝对像素距离,0.92%的异常像素占比和98%的遮挡预测交并比。为了验证模型在实际路况场景下的有效性,在KITTI-2015数据集上进行了补充对比实验,本文方法获得了1.78%的平均异常值百分比,上述指标均优于STTR（stereo Transformer）等主流方法。此外,在KITTI-2015、MPI-Sintel（max planck institute sintel）和Middlebury-2014数据集的测试中,本文模型具备较强的泛化性。结论 本文提出了一个纯粹的基于Transformer架构的密集特征提取器,使用空间池化窗口策略减小注意力计算的空间规模,并利用跳跃查询策略对编码器和解码器的特征进行了有效融合,可以较好地提高Transformer架构下的特征提取性能。… …   相似文献

贾迪  蔡鹏  吴思  王骞  宋慧伦 《中国图象图形学报》2024,29(8):2413-2425

融合特征优化的跨数据集高光谱图像分类

下载全文  

目的 高光谱图像分类可实现对地物目标的逐像素识别,是对地观测中的关键技术。由于采集环境变迁与成像设备差异等因素的影响,不同高光谱图像特征分布偏移,影响现有模型的跨数据集分类精度。针对此,提出了一种融合特征优化的无监督跨数据集高光谱图像分类方法。方法 提出了基于奇异值抑制的特征均衡策略实现数据内独立优化,通过限制奇异值正则项兼顾特征的可迁移性与可鉴别性;提出了基于隐式增广的特征匹配策略实现数据间特征协同优化,引导源域特征逼近目标域提高模型的泛化性;设计了基于隐式鉴别器的对抗学习框架实现数据间特征类别级优化,提高了预测多样性,实现跨数据集分类。结果 实验在Pavia数据集组和HyRANK数据集组上进行,与多种最新的跨数据高光谱图像分类方法进行了对比,在Pavia数据集组中,相比于性能第2的模型,总体精度、平均精度和к系数分别提高了1.75%、3.55%和2.17%;在HyRANK数据集组中,相比于性能第2的模型,总体精度、平均精度和к系数分别提高了6.58%、13.10%和7.96%。同时进行了消融实验,研究了各个模块对高光谱图像分类效果的影响。实验结果表明,每一模块在提高高光谱图像分类效果方面都是有效的。结论 本文提出的融合特征优化的跨数据集高光谱图像分类方法可以在无监督的条件下显著提高跨数据集高光谱图像分类精度,提高分类预测的多样性,得到更好的分类效果。… …   相似文献

马晓瑞  哈林  谌敦斌  梅亮  王洪玉 《中国图象图形学报》2024,29(8):2175-2187

CoSTUR: 面向用户评级的空间文本竞争选址

下载全文  

随着GPS定位技术和移动互联网的发展,各类LBS(location-based service)应用积累了大量带有位置和文本标记的空间文本数据,这些数据广泛应用于市场营销、城市规划等设施选址决策中.空间文本选址的目标是从候选位置集合中挖掘最佳地点新建设施,以期影响最多空间文本对象… …   相似文献

李晨伟  默梓鹏  赵梦霏 《计算机系统应用》2024,33(8):176-186

多尺度特征融合与交互的伪装目标检测网络

下载全文  

伪装目标检测是一项在复杂场景中定位和识别伪装目标的任务.目前基于深度神经网络的方法已初步运用,但在复杂场景下遇到干扰时,许多方法无法充分利用目标的多级特征来提取丰富的语义信息,仅依靠固定尺寸特征识别伪装目标.为解决这一问题,本文提出了一种基于多尺度特征融合交互的伪装目标检测网络.… …   相似文献

张成  刘研  宋慧慧 《计算机系统应用》2024,33(8):90-97

融合多源数据的深度学习短时降水预测

下载全文  

针对传统降水预测方法的局限性,提出了一种融合多源数据的深度学习短时降水预测模型MSF-Net.在GPM历史降水数据的基础上融合了ERA5 气象数据、雷达数据和DEM数据.利用气象特征提取模块学习多源数据的气象特征,通过注意力融合预测模块进行特征融合并实现短时降水预测.将MSF-N… …   相似文献

夏景明  戴如晨  谈玲 《计算机系统应用》2024,33(8):123-131

基于双鉴别器和伪视频生成的视频异常检测方法

  

在无监督的视频异常检测任务中,通常使用深度自编码器在仅包含正常事件的数据集上进行训练,并根据重构(预测)误差来识别异常帧.然而,这种假设在实践中并不总是成立,有时自编码器对异常事件也可以进行很好的重构(预测),从而导致异常的误检测.为了解决这一问题,提出了一种基于双鉴别器和伪视频… …   相似文献

郭方圆  吉根林 《计算机科学》2024,51(8):217-223

基于多奖励强化学习的半监督文本风格迁移方法

  

文本风格迁移是自然语言处理中的一项重要任务,其主要目的在于改变文本的风格属性,同时保留必要的语义信息.然而,在许多任务缺乏大规模平行语料库的情况下,现有的无监督方法存在文本多样性不足和语义一致性较差的问题.针对这些问题,文中提出了一种半监督的多阶段训练框架.该框架首先利用风格标注… …   相似文献

李静文  叶琪  阮彤  林宇翩  薛万东 《计算机科学》2024,51(8):263-271

基于高深约束与边缘融合的单目3D目标检测

  

单目3D目标检测旨在通过单目图像完成3D目标检测,现有的单目3D目标检测算法大多基于经典的2D目标检测算法.针对单目3D目标检测算法中通过直接回归的实例深度估计不准,导致检测精度较差的问题,提出了一种基于高深约束与边缘特征融合的单目3D目标检测算法.在实例深度估计方法上采用几何投… …   相似文献

浦斌  梁正友  孙宇 《计算机科学》2024,51(8):192-199

驶向智能未来:深度学习在轨道交通革新中的应用

  

  相似文献

《计算机科学》2024,51(8)

基于梯度引导的低剂量CT超分辨率重建算法

  

低剂量CT(Low-dose CT,LDCT)扫描在临床实践中起着关键作用,其能有效降低放射科医生和患者的患癌风险.然而,低剂量射线的使用会给生成的CT图像引入明显的噪声,这一问题凸显了 LDCT降噪重建的必要性.图像重建领域中的另一个重要任务是超分辨率(Super-resolu… …   相似文献

徐颖  张道强  葛荣骏 《计算机科学》2024,51(8):143-151

基于符号表示的可度量shapelets提取的时序分类研究

  

在时序分类问题中,基于符号表示的shapelets提取方法具有良好的分类精度和分类效率,但对符号进行质量度量的过程,如计算TFIDF分数,耗时较长且计算量大,导致分类效率较低.此外,提取的shapelets候选数量仍然较多,判别力有待提高.针对这些问题,本文提出了一种基于符号表示… …   相似文献

王礼勤  万源  罗颖 《计算机科学》2024,51(8):106-116

基于共享最近邻的自适应密度峰值聚类算法

  

密度峰值聚类算法(DPC)是一种简单高效的无监督聚类算法,该算法虽能自动发现簇中心,实现任意形状数据的高效聚类,但依然存在一些缺陷.针对密度峰值聚类算法在定义相关度量值时未考虑数据的位置信息、聚类中心数目需要人工预先设定且分配样本点时易出现连锁反应这3个缺陷,提出一种基于共享最近… …   相似文献

王心耕  杜韬  周劲  陈迪  仵匀政 《计算机科学》2024,51(8):97-105

一种基于国密算法的区块链无证书加密机制

  

区块链因具有分布式、不可篡改和不变性的特点而广受关注,但区块链中使用的国际密码算法存在一定的后门安全隐患.现基于国密算法SM2,结合无证书密码机制,提出了一种基于区块链的无证书公钥加密(Certificateless Public Key Encryp-tion,CL-PKE)方… …   相似文献

向宴颉  黄晓芳  向科峰  郑继楠 《计算机科学》2024,51(8):440-446

基于改进分段卷积神经网络和知识蒸馏的学科知识实体间关系抽取

  

关系抽取是梳理学科知识的重要手段以及构建教育知识图谱的重要步骤.在当前研究中,如BERT(Bidirectional Encoder Representations from Transformers)等以Transformer架构为基础的预训练语言模型多数存在参数量大、复杂度过… …   相似文献

赵宇博  张丽萍  闫盛  侯敏  高茂 《计算机应用》2024,44(8):2421-2429

基于语境增强的新能源汽车投诉文本方面-观点对抽取

  

挖掘新能源汽车投诉文本中用户对产品多维度的意见,能为产品的设计决策提供参考.因投诉文本具有实体密度高、句式冗长等特点,导致当前方面-观点对抽取(AOPE)方法感知方面项与观点项间的关联性不强.针对这一问题,提出一种基于语境增强的AOPE模型(AOE-CE),通过融合主题特征与文本… …   相似文献

汪才钦  周渝皓  张顺香  王琰慧  王小龙 《计算机应用》2024,44(8):2430-2436

混合灰狼-自适应蝴蝶算法下的多目标无线传感器网络覆盖研究

  

为提高无线传感器网络的覆盖率、减少二次部署中节点移动的能量消耗以及减少牵涉节点数目,提出了一种混合灰狼-自适应蝴蝶算法.首先,通过将灰狼算法与蝴蝶算法融合寻找最优解,在种群间优化中加入种群内部优化,提升算法的寻优能力,提高算法收敛速度;其次,在蝴蝶算法中改进自适应开关概率,根据当… …   相似文献

张晶;曲悦;张家洪;冯勇;张大骋 《小型微型计算机系统》2024,(8):1993-2000

利用可交谈多头共注意力机制的视觉问答

  

视觉问答可以对图像信息和自然语言问题这两种不同模态的信息进行分析处理并预测答案,是一项跨模态学习任务.当前注意力机制因为其良好的关键信息提取效果被广泛地用以捕捉视觉图像、文本和两种模态间的关系.但是,传统的注意力机制容易忽略图像和文本的自相关信息,而且不能较好的利用图像和文本的信… …   相似文献

杨旭华;庞宇超;叶蕾 《小型微型计算机系统》2024,(8):1901-1907

一种多边协商的群智感知网络协同防御模型

  

群智感知网络中的攻击容易造成大面积感知任务中断,降低群智感知网络的可用性.针对群智感知网络中孤立的感知节点由于自身资源不足无法抵御攻击导致网络系统崩溃的问题,提出一种基于多边协商的感知联盟生成方法协同完成防御任务,提高感知网络的防御能力.首先,对感知节点群体行为和关系进行形式化建… …   相似文献

崔广金;赵国生;王健 《小型微型计算机系统》2024,(8):2008-2016

结构类似模板增强的端到端多域蛋白质组装方法

  

使用同源模板能够有效的提升蛋白质结构预测的精度,然而,对于部分多域蛋白,PDB中可用的同源模板较少,这可能会影响预测精度.为了进一步提高多域蛋白质的建模精度,本文提出了基于结构类似模板结合同源模板的端到端多域组装方法MTDA.首先,搜索序列数据库生成多序列比对,以及分别搜索PDB… …   相似文献

朱海涛;夏瑜豪;张贵军 《小型微型计算机系统》2024,(8):1825-1831

一种余光目标深度及高度的单帧图像测量

  

在自动避障,目标监控,自动驾驶等领域,基于单目视觉的目标测量总是关键技术之一.但是,已知的单目视觉测量方法只能得到目标的距离和最低点位置坐标,目标高度需要利用其他传感器获取.本文从目标的线特征出发,创造性的提出了关于余光目标像与像平面竖直中线的夹角、余光目标偏离单目相机装置的角度… …   相似文献

李艳艳;胡亚红;盛伟国;毛家发 《小型微型计算机系统》2024,(8):1921-1928