产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云
备案控制台登录/注册
探索云世界

大数据开发治理DataWorks-阿里云开发者社区-阿里云

开发者社区> 大数据与机器学习> 大数据开发治理DataWorks
大数据开发治理DataWorks
关注
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎，为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。
0
今日
12875
内容
6
活动
2942
关注
来自： 大数据与机器学习
最新
博文
免费试用
问答
电子书
全部内容
学习
caramel
|
8天前
|
资源调度 DataWorks 前端开发
|
博文
从0到1自建内部使用的API授权平台竟然那么容易?!
最近看了一些API的管理平台如API Layer、boomi、Odoo等平台，思考如果自己动手搭建一个API授权平台是否困难，结果透过网上的资源就能搭建起一个简易且可扩展API授权平台，且大部份依赖的功能都可免费体验，此文分享这次搭建的代码跟使用到的工具，希望想要在公司内部建立自用的API授权平台能很快地实现。
719 8
DataWorks团队
|
8天前
|
SQL 人工智能 自然语言处理
|
博文
【2023云栖】田奇铣：大模型驱动DataWorks数据开发治理平台智能化升级
随着大模型掀起AI技术革新浪潮，大数据也进入了与AI深度结合的创新时期。2023年云栖大会上，阿里云DataWorks产品负责人田奇铣发布了DataWorks Copilot、DataWorks AI增强分析、DataWorks湖仓融合数据管理等众多新产品能力，让DataWorks这款已经发展了14年的大数据开发治理平台产品，从一站式向智能化不断升级演进。
56891 8
小白学大数据
|
8天前
|
数据采集 JSON API
|
博文
网易云音频数据如何爬取？
网易云音频数据如何爬取？
413 1
1516366653861572
|
26天前
|
SQL DataX 文件存储
|
博文
开源DataX最新版本v202309新增HdfsReader支持parquet文件格式的问题
最近发现，datax更新了最新版本v202309，ds上更新后，同步hive下的parquet文件报错
276 1
小白学大数据
|
1月前
|
数据采集 XML 编译器
|
博文
Scala爬虫实战：采集网易云音乐热门歌单数据
Scala爬虫实战：采集网易云音乐热门歌单数据
219 0
嗨，你好。
|
2月前
|
数据采集 运维 数据管理
|
博文
数据管理能力成熟度模型
为促进大数据产业持续深入发展，提高政府、企事业单位大数据资产管理意识，借鉴国内外成熟度相关理论思想，结合数据生命周期管理各个阶段的特征，对数据管理能力进行了分析、总结，提炼出组织数据管理的八大过程域，并对每项能力进行了二级过程域和发展等级的划分以及相关功能介绍和评定标准的制定。
443 1
DataWorks团队
|
2月前
|
分布式计算 DataWorks 数据可视化
|
博文
5分钟生成可视化数据分析报告
基于内置电商、广告、出行、汽车、国内生产总值等公开数据集，通过DataWorks与MaxCompute搭建可视化数据报告。
1200 4
暮角
|
2月前
|
存储 DataWorks Unix
|
博文
Dataworks数据集成之“文本数据”
Dataworks不是支持文本数据导入么？为什么Excel数据不能导入？CSV文件不就是Excel文件么？关于这些问题，我整理了一篇文章进行解释。
523 2
DataWorks团队
|
3月前
|
存储 分布式计算 DataWorks
|
博文
【ODPS新品发布第1期】DataWorks全新发布：增强分析/数据建模个人版等新能力
阿里云ODPS系列产品以MaxCompute、DataWorks、Hologres为核心，致力于解决用户多元化数据的计算需求问题，实现存储、调度、元数据管理上的一体化架构融合，支撑交通、金融、科研、等多场景数据的高效处理，是目前国内最早自研、应用最为广泛的一体化大数据平台。
1320 2
ftw2fzqaoykua
|
3月前
|
分布式计算 DataWorks 数据可视化
|
博文
Github实时数据分析与可视化
基于Github Archive公开数据集，将项目、行为等20+种事件类型数据实时采集至Hologres进行分析，并搭建可视化大屏。
344 0
DataWorks团队
|
3月前
|
分布式计算 DataWorks 数据可视化
|
博文
DataWorks增强分析发布，一站式数据查询分析与可视化
8月31日阿里云郑州峰会，阿里云行业解决方案研发部总经理曾震宇在主论坛飞天发布时刻重磅发布DataWorks与DataV-Card合作推出的AI增强分析产品，一站式完成从数据查询、分析、可视化、共享的完整链路，1分钟即可形成数据报告，帮助互联网、金融、政务等各个行业客户表达数据观点，讲好数据故事。
959 1
Lotay_天天
|
3月前
|
XML JSON 缓存
|
博文
Json实现根据商品ID请求虾皮商品详情数据方法，shopee商品详情API接口，虾皮API接口申请指南
Json实现根据商品ID请求虾皮商品详情数据方法，shopee商品详情API接口，虾皮API接口申请指南
98 0
向翠
|
4月前
|
运维 DataWorks
|
博文
DataWorks：For-Each遍历节点并发执行解决方案
为你介绍如何突破For-Each遍历节点128次上限，并实现并发取数执行。
215 1
DataWorks团队
|
4月前
|
SQL 数据挖掘 网络安全
|
博文
【获奖名单公示】【保姆级教程】挑战SQL Bond，寻找数据分析最强007
各位开发者大家好，感谢大家参加挑战“SQL Bond，寻找数据分析最强007”挑战赛，以下为活动的参与指南，请您仔细阅读便于更顺利地完成比赛。
1383 0
DataWorks团队
|
5月前
|
SQL 分布式计算 DataWorks
|
博文
挑战SQL Bond，寻找数据分析最强007
免费领取5000元大数据产品，实时分析近7年Github公开数据集，Show Your SQL！
1038 1
张飞的猪
|
6月前
|
大数据 数据管理 数据库
|
博文
数据仓库(3)数仓建模之星型模型与维度建模
维度建模是一种将数据结构化的逻辑设计方法，也是一种广泛应用的数仓建模方式，它将客观世界划分为度量和上下文。度量是常常是以数值形式出现，事实周围有上下文包围着，这种上下文被直观地分成独立的逻辑块，称之为维度。它与实体-关系建模有很大的区别，实体-关系建模是面向应用，遵循第三范式，以消除数据冗余为目标的设计技术。维度建模是面向分析，为了提高查询性能可以增加数据冗余，反规范化的设计技术。
357 1
墨祤
|
6月前
|
SQL 存储 分布式计算
|
博文
数仓架构“瘦身”，Hologres 5000CU时免费试用
Hologres基于创新的HSAP架构，可以将您原先数仓架构中的OLAP系统（Greenplum、Presto、Impala、ClickHouse）、KV数据库/Serving系统（HBase、Redis）统一在一个大数据计算引擎中，并提供快速的离线实时一体化分析能力。
156 0
Lotay_天天
|
6月前
|
数据安全/隐私保护 数据格式 Python
|
博文
python爬取快手商品数据
python爬取快手商品数据
324 1
算精通
|
7月前
|
数据采集 运维 DataWorks
|
博文
DataWorks 综述
帮助企业构建大数据生态系统，提升数据开发效率和数据处理能力。
417 2
编程技术君
|
7月前
|
分布式计算 DataWorks Cloud Native
|
博文
带你读《全链路数据治理-全域数据集成》之1：1. 数据集成简介
带你读《全链路数据治理-全域数据集成》之1：1. 数据集成简介
342 0
编程技术君
|
7月前
|
分布式计算 DataWorks MaxCompute
|
博文
带你读《全链路数据治理-全域数据集成》之2：2. 同步业务场景和技术方案选择对照表
带你读《全链路数据治理-全域数据集成》之2：2. 同步业务场景和技术方案选择对照表
145 0
编程技术君
|
7月前
|
数据采集 运维 监控
|
博文
带你读《全链路数据治理-全域数据集成》之3：3.数据同步增值能力
带你读《全链路数据治理-全域数据集成》之3：3.数据同步增值能力
180 0
编程技术君
|
7月前
|
弹性计算 DataWorks 数据库
|
博文
带你读《全链路数据治理-全域数据集成》之4：1. 实时同步功能概述
带你读《全链路数据治理-全域数据集成》之4：1. 实时同步功能概述
155 0
编程技术君
|
7月前
|
数据库
|
博文
带你读《全链路数据治理-全域数据集成》之5：2. 使用权限
带你读《全链路数据治理-全域数据集成》之5：2. 使用权限
123 0
编程技术君
|
7月前
|
SQL 消息中间件 Oracle
|
博文
带你读《全链路数据治理-全域数据集成》之6：3. 实时同步场景与配置
带你读《全链路数据治理-全域数据集成》之6：3. 实时同步场景与配置
234 0
编程技术君
|
7月前
|
SQL 监控 DataWorks
|
博文
带你读《全链路数据治理-全域数据集成》之7：4. 实时同步附加能力
带你读《全链路数据治理-全域数据集成》之7：4. 实时同步附加能力
137 0
编程技术君
|
7月前
|
博文
带你读《全链路数据治理-全域数据集成》之8：5. 附表：实时同步支持的数据源与对应的能力
带你读《全链路数据治理-全域数据集成》之8：5. 附表：实时同步支持的数据源与对应的能力
69 0
编程技术君
|
7月前
|
数据采集 弹性计算 数据库
|
博文
带你读《全链路数据治理-全域数据集成》之9：6. 离线同步功能概述
带你读《全链路数据治理-全域数据集成》之9：6. 离线同步功能概述
117 0
编程技术君
|
7月前
|
DataWorks
|
博文
带你读《全链路数据治理-全域数据集成》之10：7. 使用权限
带你读《全链路数据治理-全域数据集成》之10：7. 使用权限
96 0
编程技术君
|
7月前
|
DataWorks 调度 数据库
|
博文
带你读《全链路数据治理-全域数据集成》之11：8. 离线调度
带你读《全链路数据治理-全域数据集成》之11：8. 离线调度
78 0
编程技术君
|
7月前
|
JSON 数据可视化 API
|
博文
带你读《全链路数据治理-全域数据集成》之12：9. 离线同步场景与配置
带你读《全链路数据治理-全域数据集成》之12：9. 离线同步场景与配置
106 0
编程技术君
|
7月前
|
关系型数据库 调度 数据库
|
博文
带你读《全链路数据治理-全域数据集成》之13：10. 离线同步附加能力
带你读《全链路数据治理-全域数据集成》之13：10. 离线同步附加能力
96 0
编程技术君
|
7月前
|
博文
带你读《全链路数据治理-全域数据集成》之14：11. 附表：离线同步支持的数据源与对应的能力
带你读《全链路数据治理-全域数据集成》之14：11. 附表：离线同步支持的数据源与对应的能力
78 0
编程技术君
|
7月前
|
DataWorks 数据库
|
博文
带你读《全链路数据治理-全域数据集成》之15：1. 背景信息
带你读《全链路数据治理-全域数据集成》之15：1. 背景信息
68 0
编程技术君
|
7月前
|
DataWorks 数据库
|
博文
带你读《全链路数据治理-全域数据集成》之16：2. 网络连通原理介绍
带你读《全链路数据治理-全域数据集成》之16：2. 网络连通原理介绍
87 0
编程技术君
|
7月前
|
DataWorks 数据库
|
博文
带你读《全链路数据治理-全域数据集成》之17：3. 独享数据集成资源组介绍
带你读《全链路数据治理-全域数据集成》之17：3. 独享数据集成资源组介绍
73 0
编程技术君
|
7月前
|
博文
带你读《全链路数据治理-全域数据集成》之18：4. 网络连通解决方案概览
带你读《全链路数据治理-全域数据集成》之18：4. 网络连通解决方案概览
95 0
编程技术君
|
7月前
|
DataWorks 关系型数据库 网络安全
|
博文
带你读《全链路数据治理-全域数据集成》之19：5. 场景（上）
带你读《全链路数据治理-全域数据集成》之19：5. 场景（上）
147 0
编程技术君
|
7月前
|
DataWorks 关系型数据库 网络安全
|
博文
带你读《全链路数据治理-全域数据集成》之19：5. 场景（下）
带你读《全链路数据治理-全域数据集成》之19：5. 场景（下）
115 0
编程技术君
|
7月前
|
网络虚拟化
|
博文
带你读《全链路数据治理-全域数据集成》之20：6. 附录
带你读《全链路数据治理-全域数据集成》之20：6. 附录
81 0
编程技术君
|
7月前
|
弹性计算 数据库
|
博文
带你读《全链路数据治理-全域数据集成》之21：7. 后续步骤
带你读《全链路数据治理-全域数据集成》之21：7. 后续步骤
80 0
编程技术君
|
7月前
|
分布式计算 DataWorks 关系型数据库
|
博文
带你读《全链路数据治理-全域数据集成》之22：1. 背景信息
带你读《全链路数据治理-全域数据集成》之22：1. 背景信息
136 0
编程技术君
|
7月前
|
博文
带你读《全链路数据治理-全域数据集成》之23：2. 使用限制
带你读《全链路数据治理-全域数据集成》之23：2. 使用限制
112 0
编程技术君
|
7月前
|
分布式计算 DataWorks 关系型数据库
|
博文
带你读《全链路数据治理-全域数据集成》之24：3. 准备工作：添加数据源
带你读《全链路数据治理-全域数据集成》之24：3. 准备工作：添加数据源
122 0
编程技术君
|
7月前
|
SQL 分布式计算 DataWorks
|
博文
带你读《全链路数据治理-全域数据集成》之25：4. 配置任务
带你读《全链路数据治理-全域数据集成》之25：4. 配置任务
152 1
编程技术君
|
7月前
|
运维 DataWorks 调度
|
博文
带你读《全链路数据治理-全域数据集成》之26：5. 提交执行任务
带你读《全链路数据治理-全域数据集成》之26：5. 提交执行任务
139 0
编程技术君
|
7月前
|
运维 DataWorks 关系型数据库
|
博文
带你读《全链路数据治理-全域数据集成》之27：1.背景信息
带你读《全链路数据治理-全域数据集成》之27：1.背景信息
92 0
编程技术君
|
7月前
|
DataWorks 关系型数据库 MySQL
|
博文
带你读《全链路数据治理-全域数据集成》之28：2. 使用限制
带你读《全链路数据治理-全域数据集成》之28：2. 使用限制
77 0
编程技术君
|
7月前
|
弹性计算 关系型数据库 MySQL
|
博文
带你读《全链路数据治理-全域数据集成》之29：3. 准备工作：添加数据源
带你读《全链路数据治理-全域数据集成》之29：3. 准备工作：添加数据源
96 0
编程技术君
|
7月前
|
DataWorks 数据可视化
|
博文
带你读《全链路数据治理-全域数据集成》之30：4. 配置任务（上）
带你读《全链路数据治理-全域数据集成》之30：4. 配置任务（上）
121 0
你好！
登录掌握更多精彩内容
账号登录
我的内容
我的收藏
公开数据集 MaxCompute免费试用 机器学习PAI免费试用 Elasticsearh免费试用
更多版块
大数据计算 MaxCompute 实时数仓 Hologres 实时计算 Flink 开源大数据平台 E-MapReduce 检索分析服务 Elasticsearch版 机器学习平台PAI 智能搜索推荐 大数据运维SREWorks
展开全部
活跃用户
sun20
小周sir
面对过去，不要迷离；面对未来，不必彷徨；活在今天，你只要把自己完全展示给别人看。
xin在这
cuicuicuic
Star时光
相关产品
我要发布
文章 问答
为什么选择阿里云什么是云计算全球基础设施技术领先稳定可靠安全合规分析师报告
产品和定价全部产品免费试用产品动态产品定价价格计算器云上成本管理
解决方案技术解决方案
文档与社区文档开发者社区天池大赛培训与认证
权益中心免费试用高校计划企业扶持计划推荐返现计划
支持与服务基础服务企业增值服务迁云服务官网公告系统状态信任中心
关注阿里云
关注阿里云公众号或下载阿里云APP，关注云资讯，随时随地运维管控云服务
阿里云APP阿里云微信
售前咨询：95187-1
售后服务：400-80-13260
法律声明及隐私权政策Cookies政策廉正举报安全举报联系我们加入我们
阿里巴巴集团淘宝网天猫全球速卖通阿里巴巴国际交易市场1688阿里妈妈飞猪阿里云计算AliOS万网高德UC友盟优酷钉钉支付宝达摩院淘宝海外阿里云盘饿了么
© 2009-2023 Aliyun.com 版权所有 增值电信业务经营许可证： 浙B2-20080101 域名注册服务机构许可： 浙D3-20210002 京D3-20220015
浙公网安备 33010602009975号浙B2-20080101-4
关注我们：
新浪微博
联系我们
© 2009-2023 Aliyun.com 版权所有<br/>增值电信业务经营许可证： <a href="http://beian.miit.gov.cn/" target="_blank">浙B2-20080101</a> <br/>域名注册服务机构许可： <a href="https://domain.miit.gov.cn/域名注册服务机构/互联网域名/阿里云计算有限公司 " target="_blank">浙D3-20210002</a> <a href="https://domain.miit.gov.cn/域名注册服务机构/互联网域名/阿里巴巴云计算北京有限公司 " target="_blank">京D3-20220015</a>