文件名称:
xlnet:XLNet:用于语言理解的广义自回归预训练-源码
开发工具:
文件大小: 2mb
下载次数: 0
上传时间: 2021-02-03
详细说明:介绍
XLNet是一种基于新型广义置换语言建模目标的新型无监督语言表示学习方法。 此外,XLNet使用作为主干模型,在涉及长上下文的语言任务中表现出出色的性能。 总体而言,XLNet在各种下游语言任务(包括问题回答,自然语言推断,情感分析和文档排名)上均获得了最新的(SOTA)结果。
有关技术细节和实验结果的详细说明,请参阅我们的论文:
杨志林*,戴子行*,杨一鸣,Jaime Carbonell,Ruslan Salakhutdinov,Quoc V.Le
(*:均等)
预印本2019
发行说明
2019年7月16日:XLNet-Base。
2019年6月19日:带有XLNet-Large和代码的初始版本。
结果
截至2019年6月19日,XLNet在20个任务上的表现优于BERT,并在18个任务上取得了最新的成果。 下面是XLNet-Large和BERT-Large之间的一些比较,它们具有相似的模型大小:
阅读理解结果
模型
SQuAD1.1 EM
SQuAD2.0 EM
BERT-大
72.0
84.1
78.98
XLNet库
80.18
XLNet-大
81.7
(系统自动生成,下载前可以参看下载内容)
下载文件列表
相关说明
- 本站资源为会员上传分享交流与学习,如有侵犯您的权益,请联系我们删除.
- 本站是交换下载平台,提供交流渠道,下载内容来自于网络,除下载问题外,其它问题请自行百度。
- 本站已设置防盗链,请勿用迅雷、QQ旋风等多线程下载软件下载资源,下载后用WinRAR最新版进行解压.
- 如果您发现内容无法下载,请稍后再次尝试;或者到消费记录里找到下载记录反馈给我们.
- 下载后发现下载的内容跟说明不相乎,请到消费记录里找到下载记录反馈给我们,经确认后退回积分.
- 如下载前有疑问,可以通过点击"提供者"的名字,查看对方的联系方式,联系对方咨询.