x-cmd pkg | huggingface - 用于下载和发布模型、数据集和其他存储库的客户端库

186 阅读2分钟

llm.png

简介

huggingface 是一个由 github.com/huggingface 团队开发的用于与 Hugging Face Hub 平台进行交互的 python 库和 CLI 工具。Hugging Face Hub 是一个用于托管、分享和发现机器学习相关模型、数据集等资源的在线平台。

功能特点

  • 模型和数据集管理:用户可以通过命令行操作管理模型和数据集,简化了从 Hugging Face Hub 下载和上传模型/数据集的过程。
  • 版本管理:支持对模型和数据集的版本控制,用户可以获取特定版本的资源。

常见用法

安装 Hugging Face Hub CLI:

# 设置在全局环境中使用 Hugging Face CLI
x env use huggingface

下载模型:

# 从 Hugging Face Hub 中下载 SmolLM-360M-Instruct 模型
huggingface-cli download HuggingFaceTB/SmolLM-360M-Instruct

扫描缓存目录:

# 扫描缓存目录,查看已下载的模型信息
huggingface-cli scan-cache

运行实例:

huggingface_usage.png

同类项目

  1. pytorch hub:用于发布、发现和使用 PyTorch 模型的库,允许用户直接从 GitHub 存储库中加载模型,支持广泛的预训练模型和自定义模型的分享。
  2. tensorflow hub:一个用于机器学习的端到端开源平台。它拥有一个由工具、库和社区资源组成的全面、灵活的生态系统,使研究人员能够推动机器学习领域的最先进技术,并使开发人员能够轻松构建和部署机器学习驱动的应用程序。

进一步阅读




更多内容请查阅 : pkg/huggingface


关注微信官方公众号 : oh my x

获取开源软件和 x-cmd 最新用法