基于改进Transformer模型的文本摘要生成方法OA北大核心CSTPCD
Text Abstract Generation Based on Improved Transformer Model
传统的文本摘要方法,如基于循环神经网络和Encoder-Decoder框架构建的摘要生成模型等,在生成文本摘要时存在并行能力不足或长期依赖的性能缺陷,以及文本摘要生成的准确率和流畅度的问题.对此,提出了一种动态词嵌入摘要生成方法.该方法基于改进的Transformer模型,在文本预处理阶段引入先验知识,将ELMo(Embeddings from Language Models)动态词向量作为训练文本的词表征,结合此词对应当句的文本句向量拼接生成输…查看全部>>
王侃;曹开臣;徐畅;潘袁湘;牛新征
中国西南电子技术研究所,成都610036中国西南电子技术研究所,成都610036电子科技大学计算机科学与工程学院,成都610000电子科技大学信息与软件工程学院,成都610000电子科技大学计算机科学与工程学院,成都610000
信息技术与安全科学
文本摘要Transformer模型先验知识动态词向量句向量
《电讯技术》 2019 (10)
1175-1181,7
评论