今天，我们学习了GPT系列是如何用子词来表示和生成文本的。我们了解了token相关的概念和文本生成的步骤，通过这些概念和步骤，我们可以理解GPT系列是如何从文本到文本的转换。

🤗 transformers是一个用于自然语言处理（NLP）任务，如`文本分类`、`命名实体识别`，`机器翻译`等，提供了预训练的语言模型（如BERT、GPT）同时用于模型训练、评估和推理的工具.