ChatGPT是一种基于人工智能技术的对话系统，其背后的训练模型是一个基于transformer的语言模型。这个模型可以用于自然语言生成、对话系统及问答系统等领域。

这个模型的训练进程通常分为两个阶段：预训练阶段和微调阶段。在预训练阶段，模型会根据一些大型的文本语料库来进行自我学习，以学习辞汇、句子结构和语法等。这个阶段通常需要使用大量的计算资源和时间。在微调阶段，模型会根据具体的任务进行微调，例如语言模型生成、对话系统、问答系统等。这个阶段通常需要较少的计算资源和时间。

在ChatGPT模型中，transformer被用来建立模型。transformer是一种用于自然语言处理的深度学习模型，可以同时处理输入和输出序列，并捕捉语言之间的长距离依赖关系。在transformer中，有两个重要的部份：encoder和decoder。

Encoder部份将输入序列转化成一系列的向量，每一个向量代表输入序列的一个位置。Decoder部份将这些向量转化成输出序列。Decoder部份还可使用encoder部份的输出信息来帮助生成更加准确的输出序列。在ChatGPT模型中，这个decoder部份被用来生成与用户进行对话的回复。

ChatGPT模型的训练数据通常来自于互联网上的人类对话数据，包括社交媒体对话和一些特定领域的对话数据。这些数据被用来训练模型，以便使模型尽量地公道地回利用户的发问和交换。在使用ChatGPT进行对话时，模型会不断地学习和更新自己的内部模型，以便更好地理解用户的需求和意图，从而提供更加精准的回复。

总的来讲，ChatGPT背后的训练模型是一个基于transformer的语言模型。这个模型通过自我学习和微调来学习自然语言，并根据上下文信息生成最优的回复。这个模型适用于对话系统、问答系统等领域，可以帮助人们更好地与人工智能进行交换和沟通。