稀土掘金 稀土掘金
    • 首页
    • AI Coding
    • 数据标注 NEW
    • 沸点
    • 课程
    • 直播
    • 活动
    • APP
      插件
      • 搜索历史 清空
        • 写文章
        • 发沸点
        • 写笔记
        • 写代码
        • 草稿箱
        创作灵感 查看更多
ROG枪神4070拥有者的个人资料头像

ROG枪神4070拥有者

掘友等级
掘友5级:先锋掘友
获得徽章 0
动态
文章
专栏
沸点
收藏集
关注
作品
赞
28
文章 1 沸点 27
赞
28
返回
|
搜索文章
赞
文章( 1 ) 沸点( 27 )
  • vLLM在RTX50系显卡上部署大模型-使用wsl2
    文章介绍了在RTX 50系显卡上通过手动编译vLLM部署大模型的全过程,解决官方兼容性不足的问题。涵盖环境配置、vLLM编译、模型下载与部署等步骤,并成功实现本地API调用与推理测试。
    • l0sgAi
    • 6月前
    • 1.6k
    • 1
    • 评论
    Linux 人工智能
    vLLM在RTX50系显卡上部署大模型-使用wsl2
  • 关注了
    1
    关注者
    8
    收藏集
    0
    关注标签
    28
    加入于
    2024-03-19