微表情峰值帧定位引导的分类算法

下载全文  

目的 微表情是人在外界信息和刺激下做出的无意识面部动作,是判断受试人情绪和行为的重要佐证,在社会安全、商业谈判和心理辅导等领域都有着广泛的应用。微表情不同于一般的表情,分类与定位较为困难。针对这种情况,提出了一种基于光流窗口的双分支微表情定位网络（dual-branch optical flow spotting network,DFSN）和一种利用峰值帧光流信息的微表情分类网络,以识别视频中的微表情。方法 在定位任务中,首先提取面部图像,选择光流窗口大小和位置,计算面部光流并进行预处理;接下来输入双分支网络中进行两次分类,分别针对有无微表情和在有微表情前提下微表情所处阶段分类,并结合两个损失函数抑制过拟合;最后绘制出微表情强度曲线,曲线峰值所处位置即为所求微表情峰值帧。在分类任务中,选取视频起始帧和定位网络取得的峰值帧作为光流窗口,并利用欧拉运动放大算法（Eulerian motion magnification,EMM）放大微表情,最后采用峰值帧光流信息分类微表情视频。结果 微表情定位网络分别在CASME II （Chinese Academy of Sciences Micro-expression Database II）数据集和CASME数据集上按照使用留一被试交叉验证法进行了实验,与目前最好的定位方法比较,此网络在CASME II上获得了最低的NMAE（normalized mean absolute error）值0.101 7,比Optical flow+UPC方法提高了9%。在CASME上获得的NMAE值为0.137 8,在此数据集上为次优定位方法。在定位网络得到的峰值基础上,分类网络在CASME II上取得了89.79%的准确率,在CASME上取得了66.06%的准确率。若采用数据集标注的峰值,分类网络在CASME II上取得了91.83%的准确率,在CASME上取得了76.96%的准确率。结论 提出的微表情定位网络可以有效定位视频中微表情峰值帧的位置,帮助后续网络进行分类,微表情分类网络可以有效区分不同种类的微表情视频。… …   相似文献

李博凯  吴从中  项柏杨  臧怀娟  任永生  詹曙 《中国图象图形学报》2024,29(5):1447-1459

融合软注意力掩码嵌入的场景文本识别方法

下载全文  

目的 基于深度学习的端到端场景文本识别任务已经取得了很大的进展。然而受限于多尺度、任意形状以及背景干扰等问题,大多数端到端文本识别器依然会面临掩码提议不完整的问题,进而影响模型的文本识别结果。为了提高掩码预测的准确率,提出了一种基于软注意力的掩码嵌入模块（soft attention mask embedding,SAME）,方法 利用Transformer更好的全局感受野,将高层特征进行编码并计算软注意力,然后将编码特征与预测掩码层级嵌入,生成更贴近文本边界的掩码来抑制背景噪声。基于SAME强大的文本掩码优化及细粒度文本特征提取能力,进一步提出了一个健壮的文本识别框架SAME-Net,开展无需字符级注释的端到端精准文本识别。具体来说,由于软注意力是可微的,所提出的SAME-Net可以将识别损失传播回检测分支,以通过学习注意力的权重来指导文本检测,使检测分支可以由检测和识别目标联合优化。结果 在多个文本识别公开数据集上的实验表明了所提方法的有效性。其中,SAME-Net在任意形状文本数据集Total-Text上实现了84.02%的H-mean,相比于2022年的GLASS（global to local attention for scene-text spotting）,在不增加额外训练数据的情况下,全词典的识别准确率提升1.02%。所提方法在多向数据集ICDAR 2015（International Conference on Document Analysis and Recognition）也获得了与同期工作相当的性能,取得83.4%的强词典识别结果。结论 提出了一种基于SAME的端到端文本识别方法。该方法利用Transformer的全局感受野生成靠近文本边界的掩码来抑制背景噪声,提出的SAME模块可以将识别损失反向传输到检测模块,并且不需要额外的文本校正模块。通过检测和识别模块的联合优化,可以在没有字符级标注的情况下实现出色的文本定位性能。… …   相似文献

陈威达  王林飞  陶大鹏 《中国图象图形学报》2024,29(5):1381-1391

联合语义分割的自监督单目深度估计方法

下载全文  

研究深度估计和语义分割的图像之间的互利关系,提出了一种联合语义分割的自监督单目深度估计方法USegDepth. 语义分割和深度估计任务通过共享编码器,实现语义引导. 为了进一步提高编码器的跨多任务性能,设计了多任务特征提取模块,堆叠该模块构成共享编码器,解决有限感受野和缺乏跨通道交互导致的模型特征表示能力欠佳问题,进一步提升模型精度. 同时,提出跨任务交互模块,通过双向的跨域信息交互细化特征表示,提升深度估计表现,特别是光度一致性监督有限的弱纹理区域和物体边界. 通过在KITTI数据集上的训练和全面评估,实验结果显示所提的USegDepth模型方法的均方相对误差相比于SGDepth降低了0.176个百分点,在阈值为1.25³的阈值精度达到了98.4%,证明了USegDepth在深度预测上具有较高的准确率.… …   相似文献

宋霄罡  胡浩越  宁靖宇  梁莉  鲁晓锋  黑新宏 《计算机研究与发展》2024,61(5):1336-1347

基于多层级语言特征融合的中文文本可读性分级模型

下载全文  

中文文本可读性分级任务的目标是将中文文本按照其可读性划分到相应的难度等级。近年来研究表明,语言特征与深度语义特征在表征文章难度上体现出互补性。但已有的工作仅对两类特征进行浅层融合,尚未考虑将语言特征和深度模型进行深层、多层级融合。因此,该文在基于BERT的传统文本可读性分级模型的… …   相似文献

谭可人;兰韵诗;张杨;丁安琪 《中文信息学报》2024,38(5):41-52

面向数据异构的联邦学习性能优化研究

  

参与联邦学习的客户端只需在各自的本地数据集上训练本地模型,并在服务器上聚合全局模型.然而,数据异构会导致本地模型与全局最优模型收敛方向不一致,影响全局模型性能.现有工作主要集中在直接与全局模型做趋同,并未考虑全局模型合理性.本文研究了一种基于局部模型偏移的性能优化方案,本地训练过… …   相似文献

黄聿辰  赵彦超  郝江山  陈兵 《小型微型计算机系统》2024,(4):777-783

改进Q-Learning的路径规划算法研究

  

针对Q-Learning算法学习效率低、收敛速度慢且在动态障碍物的环境下路径规划效果不佳的问题,本文提出一种改进Q-Learning的移动机器人路径规划算法.针对该问题,算法根据概率的突变性引入探索因子来平衡探索和利用以加快学习效率;通过在更新函数中设计深度学习因子以保证算法探索… …   相似文献

宋丽君  周紫瑜  李云龙  侯佳杰  何星 《小型微型计算机系统》2024,(4):823-829

一种面向行人跌倒检测的改进YOLOv5算法

  

针对行人跌倒检测的应用场景复杂,原始YOLOv5的检测精度不高,特征融合不充分的问题,本文首先提出了一种新的特征金字塔(FPN)结构-自适应特征增强融合金字塔网络(AFEF-FPN)和特征增强融合模块(FFEM)来增加特征的表示以及融合深度.其次使用基于全局语义信息的上采样算子C… …   相似文献

沈国鑫  魏怡  刘力手  尹天睿 《小型微型计算机系统》2024,(4):902-909

紧凑数据结构专题序言

  

<正>随着现代计算机科学的迅猛发展,紧凑型数据结构逐渐成为研究和应用的热点领域,其核心目标在于尽可能减少内存占用并提升运行效率,以支撑广泛的计算机应用需求。通过精心的设计和优化,这类数据结构能够在限定的内存空间内存储大量数据,并实现高效的数据操作和访问,从而展现出巨大的潜力。具体来说,在嵌入式系统、计算机网络、数据库系统以及数据挖掘等多个领域,紧凑型数据结构不仅能有效解决空间受限和性能低下的问题,而且在推动相关技术的进步和应用扩展方面起到了关键作用。因此,随着科研的推进以及工业界对资源使用效率的持续追求,紧凑型数据结构的研究与应用正吸引着全球学术界… …   相似文献

郑嘉琦  谢鲲  杨仝  黄河  李福亮  李猛  戴海鹏 《计算机科学》2024,51(4):1-3

基于双路先验自适应图神经常微分方程的交通流预测

  

准确的交通流量预测是智能交通系统不可或缺的组成部分.近年来,图神经网络在交通流预测任务中取得了较好的预测结果.然而,图神经网络的信息传递是不连续的潜在状态传播,且随着网络层数的增加存在过平滑的问题,这限制了模型捕获远距离节点的空间依赖关系的能力.同时,在表示道路网络的空间关系时,… …   相似文献

袁蓉  彭莉兰  李天瑞  李崇寿 《计算机科学》2024,51(4):151-157

基于不确定性估计的离线确定型Actor-Critic

  

Actor-Critic是一种强化学习方法,通过与环境在线试错交互收集样本来学习策略,是求解序贯感知决策问题的有效手段.但是,这种在线交互的主动学习范式在一些复杂真实环境中收集样本时会带来成本和安全问题.离线强化学习作为一种基于数据驱动的强化学习范式,强调从静态样本数据集中学习策… …   相似文献

冯涣婷  程玉虎  王雪松 《计算机学报》2024,47(4):717-732

基于慢特征分析的分布式动态工业过程运行状态评价

下载全文  

现代工业过程通常具有规模大、流程长和工序多的特点, 导致传统的集中式建模方法会淹没过程的局部变化信息, 从而无法及时识别早期的非优运行状态. 此外, 闭环控制的广泛应用使得过程变量普遍存在时序相关性. 针对以上问题, 提出一种基于慢特征分析(Slow feature analys… …   相似文献

钟林生  常玉清  王福利  高世红 《自动化学报》2024,50(4):745-757

UAV协助下非正交多址接入使能的数据采集系统中能效优化机制

  

无人机（UAV）协助下非正交多址接入（NOMA）使能的数据采集系统,考虑了地空概率信道模型和服务质量约束,并联合优化UAV三维布局设计和传感器功率分配最大化所有传感器的总能效。针对原混合整数非凸规划问题,提出了一种基于凸优化理论、深度学习理论和哈里斯鹰优化（HHO）算法的能效优化… …   相似文献

唐睿  岳士博  张睿智  刘川  庞川林 《计算机应用》2024,44(4):1209-1218

面向高速移动环境的二级信号检测算法

  

正交时间序列复用（OTSM）可以以更低的复杂度实现类似正交时频空间（OTFS）调制的传输性能,为未来需要低复杂度收发器的高速移动性通信系统提供一种有前景的解决方法。针对现有的基于时域的高斯-赛德尔（GS）迭代均衡效率不高的问题,提出二级信号检测算法。首先在时域进行低复杂度线性最小… …   相似文献

王华华;张旭;李峰 《计算机应用》2024,44(4):1236-1241

基于优化算法量子动力学框架的势垒估计准则

  

量子动力学框架（QDF）是在优化算法量子动力学模型下得到的具有代表性和普遍意义的优化算法的基本迭代过程,差解接受是避免优化算法陷入局部最优、解决算法早熟问题的一种重要机制。为了在QDF中引入差解接受机制,以量子动力学模型为基础将差解视为粒子运动过程中遇到的势垒,利用量子隧道效应中… …   相似文献

陈雅琴;王鹏 《计算机应用》2024,44(4):1180-1186

量子计算模型下PFP算法的安全性分析

  

量子技术的快速发展和量子计算效率的不断提高,以及Shor算法和Grover算法的出现,给传统公钥密码和对称密码的安全性造成了较大威胁。因此,基于Feistel结构设计的分组密码PFP算法,首先将轮函数的线性变换P融入Feistel结构的周期函数构造,推导得到PFP算法的4个5轮周… …   相似文献

李艳俊  景小宇  谢惠琴  项勇 《计算机应用》2024,44(4):1166-1171

面向工控系统未知攻击的域迁移入侵检测方法

  

针对工业控制系统（ICS）数据匮乏、工控入侵检测系统对未知攻击检测效果差的问题,提出一种基于生成对抗迁移学习网络的工控系统未知攻击入侵检测方法（GATL）。首先,引入因果推理和跨域特征映射关系对数据进行重构,提高数据的可理解性和可靠性;其次,由于源域和目标域数据不平衡,采用基于域… …   相似文献

王昊冉  于丹  杨玉丽  马垚  陈永乐 《计算机应用》2024,44(4):1158-1165

综合成分句法分析的技术名称识别

  

技术名称是科技领域中用于准确交流信息的术语,自动识别技术名称可以帮助专家和大众发现、认知、应用新技术,具有重要价值;而基于无监督的方法在识别技术名称时存在规则复杂、适应性差等问题。为了提升从文本中识别技术名称的能力,提出一种综合成分句法的技术名称识别方法。首先,通过成分句法分析构… …   相似文献

朱俊杰;余丽;李圣文;周长征 《计算机应用》2024,44(4):1072-1079

基于多任务学习的间质性肺病分割算法

  

间质性肺病（ILD）的分割标签标注成本极高,且现有数据集通常存在样本量较少的问题,导致训练的模型效果较差。针对该问题,提出一种基于多任务学习的ILD分割算法。首先,基于U-Net构建多任务分割模型;其次,使用生成的肺部分割标签作为辅助任务标签进行多任务学习;最后,使用一种自适应调… …   相似文献

李威  陈玲  徐修远  朱敏  郭际香  周凯  牛颢  张煜宸  易珊烨  章毅  罗凤鸣 《计算机应用》2024,44(4):1285-1293

基于改进Res-UNet的昼夜地基云图分割网络

  

针对昼夜地基云图在分割中细节信息丢失、分割精度低等问题,提出一种基于改进Res-UNet(Residual network-UNetwork)的昼夜地基云图分割网络CloudRes-UNet(Cloud ResNet-UNetwork),整体采用编码器-解码器的网络结构。首先,编… …   相似文献

王铂越  李英祥  钟剑丹 《计算机应用》2024,44(4):1310-1316

基于依赖增强的分层抽象语法树的代码克隆检测

  

在软件工程领域,基于语义相似的代码克隆检测方法可以降低软件维护的成本并预防系统漏洞,抽象语法树（AST）作为典型的代码抽象表征形式,已成功应用于多种程序语言的代码克隆检测任务,然而现有工作主要利用原始AST提取代码的语义,没有深入挖掘AST中的深层语义和结构信息。针对上述问题,提… …   相似文献

万泽轩  谢春丽  吕泉润  梁瑶 《计算机应用》2024,44(4):1259-1268