首页|期刊导航|计算机工程与应用|基于预训练模型的机器阅读理解研究综述

基于预训练模型的机器阅读理解研究综述OA北大核心CSCDCSTPCD

Review of Machine Reading Comprehension Based on Pre-training Language Model

中文摘要

近年来深度学习技术不断进步,随着预训练模型在自然语言处理中的应用与发展,机器阅读理解不再单纯地依靠网络结构与词嵌入相结合的方法.预训练语言模型的发展推动了机器阅读理解的进步,在某些数据集上已经超越了人类的表现.简要介绍机器阅读理解以及预训练语言模型的相关概念,综述当下基于预训练模型的机器阅读理解研究进展,对目前预训练模型在相关数据集上的性能进行分析,总结了目前存在的问题并对未来进行展望.

张超然;裘杭萍;孙毅;王中伟

陆军工程大学 指挥控制工程学院,南京 210007陆军工程大学 指挥控制工程学院,南京 210007陆军工程大学 指挥控制工程学院,南京 210007陆军工程大学 指挥控制工程学院,南京 210007

信息技术与安全科学

深度学习预训练模型自然语言处理机器阅读理解

《计算机工程与应用》 2020 (11)

17-25,9

国防科技创新特区计划项目(No.1916311LZ001003).

10.3778/j.issn.1002-8331.2001-0285

评论

您当前未登录!去登录点击加载更多...