基于XLNet+BiGRU+Att(Label)的文本分类模型OA
Text Classification Model Based on XLNet+BiGRU+Att (La-bel)
传统的词向量嵌入模型,如Word2Vec、GloVe等模型无法实现一词多义表达;传统的文本分类模型也未能很好地利用标签词的语义信息.基于此,提出一种基于XLNet+BiGRU+Att(Label)的文本分类模型.首先用XLNet生成文本序列与标签序列的动态词向量表达;然后将文本向量输入到双向门控循环单元(BiGRU)中提取文本特征信息;最后将标签词与注意力机制结合,选出文本的倾向标签词,计算倾向标签词与文本向量的注意力得分,根据注意力得分更新文本…查看全部>>
刘柏霆;管卫利;李陶深
广西大学计算机与电子信息学院,广西南宁 530004广西大学计算机与电子信息学院,广西南宁 530004南宁学院数字经济学院,广西南宁 530299
信息技术与安全科学
文本分类XLNetBiGRU标签词注意力机制
《广西科学院学报》 2022 (4)
能量捕获无线网络运行规划与联合传输关键技术研究
412-419,8
国家自然科学基金项目(61762010)和广西科技计划项目(桂科AD20297125)资助.
评论