首页/2017 年 6 月/学术界/事件 论文及技术突破学术界大模型 Attention Is All You Need:Transformer 论文发表 八位作者提出完全基于注意力机制的 Transformer 架构,此后几乎所有主流大模型都建立在它之上。 公告日期2017-06-12 开放使用日期与公告日期相同 厂商学术界 模态语言 核实状态已核实 原始资料 论文arXiv 论文arxiv.org/abs/1706.03762 更近GPT-1 开放权重