2017年度NLP领域论文TOP10(附链接)

  1. 云栖社区>
  2. 数据派THU>
  3. 博客>
  4. 正文

2017年度NLP领域论文TOP10(附链接)

技术小能手 2018-02-12 17:56:21 浏览14126
展开阅读全文

 论文 | Attention Is All You Need

e3467b2285905f3a9375741dd808eadd68795eb4


  • 链接 | https://www.paperweekly.site/papers/224

  • 源码 | https://github.com/Kyubyong/transformer

大道至简,Google Brain 在本文中提出了一个新型的简化网络架构—Transformer,完全基于注意力机制,完全避免了循环和卷积,完全可并行。

本文可以说是 Google 继 Highway Network 等新型神经网络之后,在神经网络模块化的又一尝试。

扩展阅读: 

  • Attention is All You Need | 每周一起读(http://mp.weixin.qq.com/s/J-anyCuwLd5UYjTsUFNT1g)

  • 一文读懂「Attention is All You Need


网友评论

登录后评论
0/500
评论
技术小能手
+ 关注
所属云栖号: 数据派THU