[笔记][大模型学习]04-HuggingFace核心组件介绍

• Hugging Face模型探索与下载
• 使用Hugging Face API调用模型
• HUgging Face核心组件Transformers,datasets,Tokenizer
• 使用Tokenizer实现字符编码

简介

注册和安装

模型探索与下载

Hugging Face API使用

使用Transformers库

文本生成

文本分类

问答系统

datasets库核心方法

分词工具与文字编码