《电子测量技术杂志》发表论文赏析

基于扩张卷积的注意力机制视频描述模型

来源:电子测量技术杂志2021年第23期北京时间:

作者:王金金,曾上游,李文惠,张介滨

单位:广西师范大学 电子工程学院 广西 桂林 541004

摘要:针对视频描述过程中视觉特征和词特征关联度不足、训练效率低、生成的自然语言出现错误和指标分数不高的问题,提出了一种基于扩张卷积的注意力机制视频描述模型。在模型的编码阶段,采用Inception-v4对视频特征进行编码,然后将编码后的视觉特征和词特征输入到基于扩张卷积的注意力机制中,最后通过长短期记忆网络进行解码,生成视频的自然描述语句。在视频描述公共数据集MSVD上进行对比实验,通过评价指标(BLEU、ROUGE_L、CIDEr、METEOR)对模型进行验证,实验结果表明,基于扩张卷积的注意力机制视频描述模型在各个指标上都有明显提升,对比基线模型SA-LSTM (Inception-V4),在BLEU_4、ROUGE_L、CIDEr和METEOR指标下分别提升了4.23%、4.73%、2.11%和2.45%。

关键词:视频描述;Inception-v4;长短期记忆网络;扩张卷积;注意力机制

基金资助:国家自然科学基金项目(61976063)资助

2021年23期其他文献查阅:

基于改进动态时间规整的相似性度量及轨迹聚类

弯管下游在线校准超声流量计安装位置研究

基于计算机视觉的垃圾塑料瓶识别与定位算法研究

10kV配网用石墨接地材料的性能测试研究

电磁超声检测机叶片缺陷的有限元仿真研究

改进EWT算法的心电信号去噪研究

基于FPGA的双FLASH数据记录器设计与实现

基于RBF神经网络的迟滞非线性模型预测控制

基于改进RRT算法的移动机械臂路径规划

基于改进K-means聚类算法的海外欠发达城市配电网规划

基于CNN的水表指针读数识别及STM32实现方案设计

硅基还原氧化石墨烯热电阻温度传感器

基于GNSS的新型大气边界层探空仪

改进卷积空间传播网络的单目图像深度估计

基于改进稀疏表示的变电站保护压板状态辨识

基于树莓派嵌入式平台的车道线检测算法

基于扩张卷积的注意力机制视频描述模型

基于YOLOv3的轻量化口罩佩戴检测算法

一种双VDB台站GBAS系统的飞行校验方法

一种新的星载AIS帧头检测算法及FPGA硬件实现

基于LVDS的光电转换式长线数据传输链路设计

不完全CSI下多中继网络的能效研究

基于AUTOSAR的CAN通信栈设计

基于多模型软测量技术的扭矩在线测量方法

基于三分法EMD和Autogram的滚动轴承故障诊断

嵌入式自动气象站故障检测系统研究

基于双谱与双流卷积神经网络的断路器故障诊断

填文献完整题目 获取完整文献

填写需求
联系方式
注:学术顾问会在1小时内联系您,请留意!