一、概述
1、什么是GPT
GPT，全称“Generative Pre-training Transformer”，即生成式预训练可迁移注意力模型，简称“文本生成器”。本质上是NLP自然语言处理领域采用Transformer的attention注意力机制解决非精确的模糊化语义问题，从而带来了NLP领域的里程碑式改变。
如何训练一个自己的GPT模型
发表评论
标签归档：Transformer
闫金钢的Blog
自律自省，不喜不悲，保持爱心和希望
GPT，全称“Generative Pre-training Transformer”，即生成式预训练可迁移注意力模型，简称“文本生成器”。本质上是NLP自然语言处理领域采用Transformer的attention注意力机制解决非精确的模糊化语义问题，从而带来了NLP领域的里程碑式改变。