开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

dataworks上传jar包资源大于50MB怎么办?

dataworks上传jar包资源大于50MB怎么办?

展开
收起
芯在这 2023-04-20 08:01:15 180 0
2 条回答
写回答
取消 提交回答
  • 公众号:网络技术联盟站,InfoQ签约作者,阿里云社区签约作者,华为云 云享专家,BOSS直聘 创作王者,腾讯课堂创作领航员,博客+论坛:https://www.wljslmz.cn,工程师导航:https://www.wljslmz.com

    如果上传的jar包资源大于50MB,可以尝试以下方法:

    1. 将jar包进行拆分,将其拆成多个小文件,再上传到dataworks。

    2. 使用云存储服务,例如阿里云OSS,将jar包上传到云存储中,然后在dataworks中使用OSS数据源。这样做可以避免超大文件上传导致的问题。

    3. 使用Git仓库,将jar包上传到Git仓库中,然后在dataworks中使用Git仓库作为数据源。

    4. 与dataworks的技术支持联系,寻求他们的帮助解决该问题。

    2023-04-30 23:43:42
    赞同 展开评论 打赏
  • 全栈JAVA领域创作者

    如果上传的 jar 包资源大小超过了 DataWorks 的限制,可以考虑以下两种解决方案:

    使用 Maven 或 Gradle 进行构建:可以使用 Maven 或 Gradle 等构建工具将 jar 包拆分成多个小文件,并进行管理和部署。这样可以减小单个文件的大小,降低上传的难度。

    使用云盘等外部存储:可以将 jar 包上传到阿里云盘等外部存储中,并通过链接或访问凭证等方式来进行访问和使用。这样可以避免上传限制,并且可以更加灵活地管理和部署 jar 包资源。

    需要注意的是,在使用外部存储时,需要确保文件的访问权限和安全性,并采取必要的措施来防止文件泄漏和被恶意攻击。同时,也需要对文件进行版本管理和备份,以确保文件的可靠性和可恢复性。

    2023-04-20 13:37:19
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载