《计算机工程与科学杂志》发表论文赏析

基于生成对抗网络的跨模态图像情感感知描述

来源:计算机工程与科学杂志2025年第5期北京时间:

作者:杨春苗, 王杨, 韩力英, 孙赫彬

单位:(河北工业大学电子信息工程学院,天津 300401)

摘要:图像描述旨在根据视觉信息生成符合图像内容的文本,属于跨模态任务。尽管当前图像描述已取得一定成果,但在细粒度情感语义特征捕捉和描述文本情感细腻度等方面仍有提升空间。针对此问题,提出一种基于生成对抗网络生成方面级情感语言描述的模型。以融合双模态注意力机制的编解码结构为生成器、卷积神经网络为判别器,提升模型在跨模态情感匹配方面的准确性及生成情感语句的可靠性。引入迁移学习和RMSProp优化算法以增强模型的可解释性。最终,在MSCOCO与SentiCap数据集上进行了验证,模型收敛性良好并取到了较高的准确率。

关键词:生成对抗网络,图像情感描述,RMSprop优化算法,

基金资助:国家自然科学基金(62241103);河北省教育厅资助重点项目(ZD2020304);河北省引进留学人员资助项目(C20220316)

2025年5期其他文献查阅:

面向国产芯片的可复现矩阵分解

面向算力网络的跨集群数据迁移系统的设计和实现

用于低间隔加速部件控制的多线程无中断RISC-V处理器

面向数据密集型应用的近数据处理架构设计

一种新型低开销抗三节点翻转的锁存器设计

面向多层递归域名系统的自适应缓存管理方法

扩展汉明码下二级QR码信息隐藏方案

基于GATv2-TCN联合优化的WSN数据流异常检测算法

基于双曲图卷积神经网络的切片级漏洞检测方法

用于遥感图像时空融合的多尺度全聚合网络

基于Floyd-Steinberg误差扩散的数字半调高效计算

基于双混沌系统的双随机相位编码和压缩感知的图像加密算法

基于生成对抗网络的跨模态图像情感感知描述

基于注意力机制的特征融合推荐模型

基于随机对称搜索的进化强化学习算法

基于非对称空间特征的脑电信号情感分析研究

低资源场景下的汉语—传统蒙古语跨语言摘要方法研究

面向不平衡数据的特征子空间增强的异质集成学习

填文献完整题目 获取完整文献

填写需求
联系方式
注:学术顾问会在1小时内联系您,请留意!