《DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季》DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季
电子书：
</div>《DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季》电子版地址
2023-01-03
96
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
简介：
DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季
相关实践学习
一站式大数据开发治理平台DataWorks初级课程
DataWorks 从 2009 年开始，十ー年里一直支持阿里巴巴集团内部数据中台的建设，2019 年双 11 稳定支撑每日千万级的任务调度。每天阿里巴巴内部有数万名数据和算法工程师正在使用DataWorks，承了阿里巴巴 99%的据业务构建。本课程主要介绍了阿里巴巴大数据技术发展历程与 DataWorks 几大模块的基本能力。 课程目标 通过讲师的详细讲解与实际演示，学员可以一边学习一边进行实际操作，可以深入了解DataWorks各大模块的使用方式和具体功能，让学员对DataWorks数据集成、开发、分析、运维、安全、治理等方面有深刻的了解，加深对阿里云大数据产品体系的理解与认识。 适合人群 企业数据仓库开发人员 大数据平台开发人员 数据分析师 大数据运维人员 对于大数据平台、数据中台产品感兴趣的开发者
目录
相关文章
|
3天前
|
存储
分布式计算
大数据
数据仓库与数据湖在大数据架构中的角色与应用
在大数据时代，数据仓库和数据湖分别以结构化数据管理和原始数据存储见长，共同助力企业数据分析。数据仓库通过ETL处理支持OLAP查询，适用于历史分析、BI报表和预测分析；而数据湖则存储多样化的原始数据，便于数据探索和实验。随着技术发展，湖仓一体成为趋势，融合两者的优点，如Delta Lake和Hudi，实现数据全生命周期管理。企业应根据自身需求选择合适的数据架构，以释放数据潜力。【6月更文挑战第12天】
19
5
5
|
4天前
|
SQL
数据采集
DataWorks
|
4天前
|
分布式计算
大数据
数据处理
Apache Spark在大数据处理中的应用
Apache Spark是大数据处理的热门工具，由AMPLab开发并捐赠给Apache软件基金会。它以内存计算和优化的执行引擎著称，提供比Hadoop更快的处理速度，支持批处理、交互式查询、流处理和机器学习。Spark架构包括Driver、Master、Worker Node和Executor，核心组件有RDD、DataFrame、Dataset、Spark SQL、Spark Streaming、MLlib和GraphX。文章通过代码示例展示了Spark在批处理、交互式查询和实时数据处理中的应用，并讨论了其优势（高性能、易用性、通用性和集成性）和挑战。【6月更文挑战第11天】
26
6
6
|
6天前
|
机器学习/深度学习
人工智能
分布式计算
人工智能平台PAI产品使用合集之如何在odps上启动独立的任务
阿里云人工智能平台PAI是一个功能强大、易于使用的AI开发平台，旨在降低AI开发门槛，加速创新，助力企业和开发者高效构建、部署和管理人工智能应用。其中包含了一系列相互协同的产品与服务，共同构成一个完整的人工智能开发与应用生态系统。以下是对PAI产品使用合集的概述，涵盖数据处理、模型开发、训练加速、模型部署及管理等多个环节。
32
2
2
|
6天前
|
机器学习/深度学习
人工智能
分布式计算
人工智能平台PAI产品使用合集之在maxcompute上跑模型，如何在本地进行推理
阿里云人工智能平台PAI是一个功能强大、易于使用的AI开发平台，旨在降低AI开发门槛，加速创新，助力企业和开发者高效构建、部署和管理人工智能应用。其中包含了一系列相互协同的产品与服务，共同构成一个完整的人工智能开发与应用生态系统。以下是对PAI产品使用合集的概述，涵盖数据处理、模型开发、训练加速、模型部署及管理等多个环节。
51
1
1
|
6天前
|
分布式计算
DataWorks
NoSQL
DataWorks操作报错合集之出现报错“odps-0123055:用户脚本异常-Traceback（最后一次调用）”，如何解决
DataWorks是阿里云提供的一站式大数据开发与治理平台，支持数据集成、数据开发、数据服务、数据质量管理、数据安全管理等全流程数据处理。在使用DataWorks过程中，可能会遇到各种操作报错。以下是一些常见的报错情况及其可能的原因和解决方法。
19
0
0
|
6天前
|
分布式计算
DataWorks
数据管理
DataWorks操作报错合集之无法运行ddltsk-ddltsk更新表失败，报错：源群集元文件不存在odps-0110061，如何解决
DataWorks是阿里云提供的一站式大数据开发与治理平台，支持数据集成、数据开发、数据服务、数据质量管理、数据安全管理等全流程数据处理。在使用DataWorks过程中，可能会遇到各种操作报错。以下是一些常见的报错情况及其可能的原因和解决方法。
9
0
0
|
6天前
|
机器学习/深度学习
人工智能
分布式计算
人工智能平台PAI操作报错合集之在ODPS的xxx_dev项目空间调用easyrec训练，需要访问yyy项目空间的OSS，出现报错，是什么导致的
阿里云人工智能平台PAI (Platform for Artificial Intelligence) 是阿里云推出的一套全面、易用的机器学习和深度学习平台，旨在帮助企业、开发者和数据科学家快速构建、训练、部署和管理人工智能模型。在使用阿里云人工智能平台PAI进行操作时，可能会遇到各种类型的错误。以下列举了一些常见的报错情况及其可能的原因和解决方法。
36
0
0
|
6天前
|
DataWorks
NoSQL
Java
DataWorks操作报错合集之数据集成使用公共数据集成资源组写入到redis数据源（使用的是VPC连接），提示以下错误：request action:[InnerVpcGrantVpcInstanceAccessToApp], message:[InvalidInstanceId.怎么解决
DataWorks是阿里云提供的一站式大数据开发与治理平台，支持数据集成、数据开发、数据服务、数据质量管理、数据安全管理等全流程数据处理。在使用DataWorks过程中，可能会遇到各种操作报错。以下是一些常见的报错情况及其可能的原因和解决方法。
28
1
1
|
6天前
|
分布式计算
DataWorks
关系型数据库
DataWorks操作报错合集之数据源同步时，使用脚本模式采集mysql数据到odps中，使用querySql方式采集数据，在脚本中删除了Reader中的column，但是datax还是报错OriginalConfPretreatmentUtil - 您的配置有误。如何解决
DataWorks是阿里云提供的一站式大数据开发与治理平台，支持数据集成、数据开发、数据服务、数据质量管理、数据安全管理等全流程数据处理。在使用DataWorks过程中，可能会遇到各种操作报错。以下是一些常见的报错情况及其可能的原因和解决方法。
40
3
3
热门文章
最新文章
1
DataWorks百问百答69：有哪些数据集成报错（数据集成报错归类）？
2
转载《Data Lake Analytics: 使用DataWorks来调度任务》
3
DataWorks独享资源组开通、使用教程
4
ODPS到ADS数据迁移指南
5
PyODPS 中使用 Python UDF
6
DataWorks中业务日期和定时时间的理解
7
DataWorks开发ODPS SQL开发生产环境自动补全ProjectName
8
DataWorks 2021-08 产品月刊（含用户体验季刊！）
9
DataWorks百问百答57：如何排查独享数据集成资源组网络问题？
10
一文带你了解DataWorks运维大屏
1
DataWorks操作报错合集之DataWorks中udf开发完后，本地和在MaxCompute的工作区可以执行函数查询，但是在datawork里报错FAILED: ODPS-0130071:[2,5]，是什么原因
35
2
DataWorks操作报错合集之在使用MaxCompute的Java SDK创建函数时，出现找不到文件资源的情况，是BUG吗
36
3
DataWorks产品使用合集之DataWorks一键maxcompute数据同步的操作步骤是什么
33
4
DataWorks产品使用合集之在 DataWorks 中，使用Oracle作为数据源进行数据映射和查询，如何更改数据源为MaxCompute或其他类型
38
5
DataWorks产品使用合集之在 MaxCompute 中，有LEAST 的内置函数如何解决
19
6
DataWorks产品使用合集之DataWorks maxcompute的自定义资源增加如何解决
29
7
DataWorks产品使用合集之DataWorks maxcompute的自定义资源增加如何解决
35
8
DataWorks产品使用合集之在DataWorks中，在MaxCompute中使用解压缩功能如何解决
41
9
DataWorks产品使用合集之在DataWorks中，查看ODPS表的OSS对象如何解决
40
10
DataWorks产品使用合集之在DataWorks中，将数据集成功能将AnalyticDB for MySQL中的数据实时同步到MaxCompute中如何解决
40