开发者社区 > 云原生 > Serverless > 正文

请教个问题,函数计算本地上传模型太慢了,离线下载模型 有时会失败,有什么好的方式嘛?而且 离线还不能

请教个问题,函数计算本地上传模型太慢了,离线下载模型 有时会失败,有什么好的方式嘛?而且 离线还不能用civitai 的链接HF 的链接有点没模型。

展开
收起
山海行 2023-06-10 12:53:50 142 0
5 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    可能是因为模型文件过大或网络状况不佳。以下是一些可能的解决方案:

    压缩模型文件:如果你的模型文件过大,可以尝试将其压缩为zip或tar.gz格式,以便更快地上传或下载。

    使用对象存储:如果你使用的对象存储服务支持函数计算集成,可以将模型文件上传到对象存储中,并在函数计算中访问它们。这样可以避免本地上传或离线下载模型的问题。

    使用CDN加速:如果你使用的对象存储服务支持CDN加速,可以启用CDN加速来加快模型文件的下载速度。

    使用更快的网络:如果网络状况较差,可以尝试使用更快的网络连接,例如使用高速互联网连接或连接到云计算服务提供商的专用网络。

    使用其他模型:如果你无法上传或下载特定的模型,可以尝试使用其他模型或在本地训练模型,以满足你的需求。

    2023-06-11 09:11:41
    赞同 展开评论 打赏
  • 十分耕耘,一定会有一分收获!

    楼主你好,如果函数计算本地上传模型太慢,你可以尝试以下方法来加快上传速度:

    1. 使用更快的网络环境,或者在网络条件较好的时间段进行上传;
    2. 压缩模型文件,减少上传的文件大小;
    3. 使用云存储,将模型文件上传到云存储后在函数计算中进行下载。

    如果离线下载模型有时会失败,可以尝试以下方法:

    1. 检查网络连接是否正常;
    2. 尝试使用其他下载工具进行下载,比如wget、curl等;
    3. 尝试更换下载链接。

    至于使用Civitas AI的链接或者Hugging Face提供的链接,由于内容经常更新,如果无法下载到模型文件,建议直接在Civitas AI或者Hugging Face的官网搜索相关模型,然后下载。如果还是无法下载到模型文件,可以联系相关平台的技术支持寻求帮助。

    2023-06-11 07:42:07
    赞同 展开评论 打赏
  • 单独传入nas,但nas无法自主运行,需要被fc 或ecs或其他实例挂载,最好的办法开一个按量付费ecs去挂载,用完释放。

    此答案来自钉钉群“阿里函数计算官网客户"

    2023-06-10 19:08:33
    赞同 展开评论 打赏
  • 如果函数计算本地上传模型太慢或者离线下载模型失败,您可以尝试以下几种方式:

    1. 使用云端服务:将模型存储在云端对象存储或者数据仓库等服务中,以便更快速和可靠地上传和下载模型。例如,可以使用阿里云 OSS、华为云 OBS 或者 AWS S3 等服务,来存储模型文件。

    2. 压缩文件:将模型压缩为 ZIP 或者 TAR 等格式的归档文件,以减少网络传输时间和带宽占用。同时,还可以提高模型传输的安全性和可靠性,避免因网络中断或者其他问题导致数据损坏或丢失。

    3. 分片上传:将模型文件分成多个小块或者分片进行上传,以减少单次上传的文件大小和传输时间。同时,还可以提高上传的容错性和可靠性,降低网络异常和带宽压力等问题。

    4. 优化上传参数:根据实际情况,调整上传模型的参数和配置,例如并发数、超时时间、重试策略等。这可以有效提高上传和下载效率,减少网络延迟和错误。

    需要注意的是,在使用云函数计算平台时,请选择合适的模型,以确保满足应用程序的要求。同时,还需要根据不同的应用场景和需求,选择合适的上传和下载方式,以提高数据传输效率和安全性。可以参考函数计算官方文档和社区资源,了解更多的技术和方法,以便更好地开发和部署自然语言处理和其他应用程序。

    2023-06-10 18:01:11
    赞同 展开评论 打赏
  • 您好,如果您在使用函数计算过程中上传模型太慢,可以尝试使用阿里云 OSS 的分片上传功能,将文件分成多个部分上传,以提高上传速度。

    另外,如果离线下载模型失败,可以考虑使用更加稳定的下载工具进行下载。

    如果您需要使用 civitai 的链接或 HF 的链接下载模型,建议您联系相关厂商或社区获取帮助,或者尝试使用其他可靠的下载链接。

    2023-06-10 14:12:44
    赞同 1 展开评论 打赏

快速交付实现商业价值。

相关产品

  • 函数计算
  • 热门讨论

    热门文章

    相关电子书

    更多
    Serverless开发平台: 让研发效能再提升 立即下载
    Serverless 引领云上研发新范式 立即下载
    All in Serverless 阿里云核心产品全面升级 立即下载