长短时记忆网络的自由体操视频自动描述方法OACSTPCD
Floor Exercise Video Automatic Description Method Using Long Short-Term Memory Network
提出一种长短时记忆网络的自由体操视频自动描述方法.在视频描述模型S2VT中,通过长短时记忆网络学习单词序列和视频帧序列之间的映射关系.引入注意力机制对S2VT模型进行改进,增大含有翻转方向、旋转度数、身体姿态等关键帧的权重,提高自由体操视频自动描述的准确性.建立自由体操分解动作数据集,在数据集MSVD及自建数据集上进行3种模型的对比实验,并通过计划采样方法消除训练解码器与预测解码器之间的差异.实验结果表明:文中方法可提高自由体操视频自动描述的精度.
贺凤;张洪博;杜吉祥;汪冠鸿
华侨大学 计算机科学与技术学院,福建 厦门 361021华侨大学 福建省大数据智能与安全重点实验室,福建 厦门 361021华侨大学 厦门市计算机视觉与模式识别重点实验室,福建 厦门 361021华侨大学 计算机科学与技术学院,福建 厦门 361021
信息技术与安全科学
长短时记忆网络注意力机制自由体操自动描述
《华侨大学学报（自然科学版）》 2020 (6)
面向集合表示的植物图像分割与分类方法研究
808-815,8
国家自然科学基金资助项目(61871196,61673186)福建省自然科学基金资助项目(2017J01110,2019J01082)
评论