AI 助理
文档备案控制台
开发者社区 云计算 文章 正文

建立Hugging Face模型调用环境

2024-11-06 711
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 本文介绍了如何在环境中导入transformers库，并从Hugging Face网站下载模型。如果使用镜像网站，需获取access token。部分模型需申请仓库权限，建议使用国外信息填写。有GPU的用户需先配置CUDA和pytorch-gpu。

1. 需要在环境中导入transformers库。

PHOTO-2024-11-06-13-23-48.jpg

2. 需要到Hugging Face网站下载模型。（TODO为下载保存的本地地址）

PHOTO-2024-11-06-13-23-56.jpg

3. 网站下载模型时采用镜像网站的话，需要到Hugging Face原网站上获取access token。跳转链接见hf- mirror首页最下方。

截屏2024-11-06 13.19.38.png

4. 个别模型需要申请仓库权限。节点地址、姓名、国家、联系方式都需要使用国外的才可以通过。建议设置如下。

PHOTO-2024-11-06-13-12-52.jpg

5. 有GPU可以使用的，需要先配置CUDA和pytorch-gpu。

PHOTO-2024-11-06-18-34-10.jpg

文章标签：
异构计算
并行计算
老皮皮不会弹舌
目录
相关文章
弹性计算-小弹
|
存储 人工智能 大数据
Huggingface又上不去了？这里有个新的解决方案！
AI开发者都知道，HuggingFace是一个高速发展的社区，包括Meta、Google、Microsoft、Amazon在内的超过5000家组织机构在为HuggingFace开源社区贡献代码、数据集和模型。
弹性计算-小弹
4675 0
虫无涯
|
6月前
|
存储 人工智能 测试技术
如何使用LangChain的Python库结合DeepSeek进行多轮次对话？
本文介绍如何使用LangChain结合DeepSeek实现多轮对话，测开人员可借此自动生成测试用例，提升自动化测试效率。
虫无涯
1156 125
如何使用LangChain的Python库结合DeepSeek进行多轮次对话？
汀丶人工智能
|
存储 Linux 开发工具
告别Hugging Face模型下载难题：掌握高效下载策略，畅享无缝开发体验
【8月更文挑战第2天】告别Hugging Face模型下载难题：掌握高效下载策略，畅享无缝开发体验
汀丶人工智能
4803 64
告别Hugging Face模型下载难题：掌握高效下载策略，畅享无缝开发体验
蚝油菜花
|
11月前
|
人工智能 自然语言处理 运维
让AI读懂K线图！ChatTS-14B：字节开源的时间序列理解和推理大模型，自然语言提问秒解趋势密码！
ChatTS-14B是字节跳动开源的时间序列专用大模型，基于Qwen2.5-14B微调优化，通过合成数据对齐技术显著提升分析能力，支持自然语言交互完成预测推理等复杂任务。
蚝油菜花
2397 1
让AI读懂K线图！ChatTS-14B：字节开源的时间序列理解和推理大模型，自然语言提问秒解趋势密码！
希斯奎
|
Windows
win11出现：终止代码：SYSTEM SERVICE EXCEPTION解决方案实列（不懂请私信up主）
终止代码解释：SYSTEM_SERVICE_EXCEPTION，又称为异常处理程序，是一种常见的蓝屏错误码，代表Windows系统检测到内核代码发生错误，无法响应某些系统服务，而且无法继续运行。它特别容易发生在许多设备驱动程序中，如显示驱动程序和音频驱动程序，因为他们成为Windows系统的必要组成部分。
希斯奎
3751 0
蚝油菜花
|
人工智能 开发框架 算法
Qwen-Agent：阿里通义开源 AI Agent 应用开发框架，支持构建多智能体，具备自动记忆上下文等能力
Qwen-Agent 是阿里通义开源的一个基于 Qwen 模型的 Agent 应用开发框架，支持指令遵循、工具使用、规划和记忆能力，适用于构建复杂的智能代理应用。
蚝油菜花
9680 13
Qwen-Agent：阿里通义开源 AI Agent 应用开发框架，支持构建多智能体，具备自动记忆上下文等能力
郑小健
|
数据采集 自然语言处理 PyTorch
动手实践：使用Hugging Face Transformers库构建文本分类模型
【10月更文挑战第29天】作为一名自然语言处理（NLP）爱好者，我一直对如何利用最先进的技术解决实际问题充满兴趣。Hugging Face 的 Transformers 库无疑是目前最流行的 NLP 工具之一，它提供了大量的预训练模型和便捷的接口，使得构建和训练文本分类模型变得更加简单高效。本文将通过具体的实例教程，指导读者如何使用 Hugging Face 的 Transformers 库快速构建和训练一个文本分类模型，包括环境搭建、数据预处理、模型选择与训练等步骤。
郑小健
1027 0
周周的奇妙编程
|
人工智能 Linux Docker
一文详解几种常见本地大模型个人知识库工具部署、微调及对比选型（1）
近年来，大模型在AI领域崭露头角，成为技术创新的重要驱动力。从AlphaGo的胜利到GPT系列的推出，大模型展现出了强大的语言生成、理解和多任务处理能力，预示着智能化转型的新阶段。然而，要将大模型的潜力转化为实际生产力，需要克服理论到实践的鸿沟，实现从实验室到现实世界的落地应用。阿里云去年在云栖大会上发布了一系列基于通义大模型的创新应用，标志着大模型技术开始走向大规模商业化和产业化。这些应用展示了大模型在交通、电力、金融、政务、教育等多个行业的广阔应用前景，并揭示了构建具有行业特色的“行业大模型”这一趋势，大模型知识库概念随之诞生。
周周的奇妙编程
158199 30
羿莉（萧羿）
|
存储 数据采集 监控
云上数据安全保护：敏感日志扫描与脱敏实践详解
随着企业对云服务的广泛应用，数据安全成为重要课题。通过对云上数据进行敏感数据扫描和保护，可以有效提升企业或组织的数据安全。本文主要基于阿里云的数据安全中心数据识别功能进行深入实践探索。通过对商品购买日志的模拟，分析了如何使用阿里云的工具对日志数据进行识别、脱敏（3 种模式）处理和基于 StoreView 的查询脱敏方式，从而在保障数据安全的同时满足业务需求。通过这些实践，企业可以有效降低数据泄漏风险，提升数据治理能力和系统安全性。
羿莉（萧羿）
946 6
我码玄黄
|
机器学习/深度学习 自然语言处理 数据可视化
LlamaFactory可视化微调大模型 - 参数详解
LlamaFactory可视化微调大模型 - 参数详解
我码玄黄
5856 4

热门文章

最新文章

  • 1
    使用阿里云容器服务Kubernetes实现蓝绿发布功能
  • 2
    【云周刊】第161期：阿里云ET城市大脑入驻国家博物馆“复兴之路”，再获“人工智能国家队”认可
  • 3
    redis4.0之MEMORY命令详解
  • 4
    技术赋能无止境 Kubernetes Meetup 北京站完美闭幕
  • 5
    iOS 调试：通过 Safari/Chrome 调试 WebView
  • 6
    超大坑！springboot + vue + element-ui，运行前端项目报these dependencies were not found的问题
  • 7
    Hadoop配置LDAP集成Kerberos
  • 8
    RAM与ROM的区别及应用
  • 9
    Docker Hub 镜像仓库
  • 10
    csv格式文件最大行数最大列数（各个excel版本）
  • 1
    保姆级教学：OpenClaw(Clawdbot)阿里云及本地部署接入伟达免费API全指南
    307
  • 2
    阿里云1分钟或本地部署OpenClaw+AIOps高效运维实战：Prometheus+夜莺MCP，轻量化监控分析指南
    100
  • 3
    友情链接的代码 自写原创
    32
  • 4
    C++ IO流详解：标准IO、文件IO与字符串IO实战
    51
  • 5
    保姆级指南：OpenClaw阿里云及本地部署最佳实践：抓取行业调研资料+三维提效法，7天吃透陌生赛道
    94
  • 6
    [大模型实战 07] 基于 LlamaIndex ReAct 框架手搓全自动博客监控 Agent
    70
  • 7
    OpenClaw(Clawdbot)云端及本地部署保姆级教程，这些提示词skills构建“第二大脑”（智能知识数据库）
    78
  • 8
    2026年阿里云一键部署OpenClaw保姆级教程，快速拥有专属AI助理！
    58
  • 9
    突破封装之困：AI时代编程新范式——面向意图编程（Intent-Oriented Programming, IOP）
    112
  • 10
    OpenClaw 用户部署和使用指南汇总
    100

    • 相关电子书

    更多
  • 低代码开发师（初级）实战教程
  • 冬季实战营第三期：MySQL数据库进阶实战
  • 阿里巴巴DevOps 最佳实践手册
    • 下一篇
    ECS账号安全防护最佳实践