来，一起“八卦”一下数据湖
2020-06-03
995
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
简介：
经过了几年的发展，在大数据时代红极一时的数据湖也在理想与现实之间慢慢发生着蜕变。现在，数据湖已经成为海量数据存储与分析的重要承载方式。
目录
相关文章
|
12月前
|
数据采集
存储
数据挖掘
|
11月前
|
存储
SQL
NoSQL
|
存储
SQL
分布式计算
数据湖 VS 数据仓库之争？阿里提出大数据架构新概念：湖仓一体
随着近几年数据湖概念的兴起，业界对于数据仓库和数据湖的对比甚至争论就一直不断。有人说数据湖是下一代大数据平台，各大云厂商也在纷纷的提出自己的数据湖解决方案，一些云数仓产品也增加了和数据湖联动的特性。但是数据仓库和数据湖的区别到底是什么，是技术路线之争？是数据管理方式之争？二者是水火不容还是其实可以和谐共存，甚至互为补充？本文作者来自阿里巴巴计算平台部门，深度参与阿里巴巴大数据/数据中台领域建设，将从历史的角度对数据湖和数据仓库的来龙去脉进行深入剖析，来阐述两者融合演进的新方向——湖仓一体，并就基于阿里云MaxCompute/EMR DataLake的湖仓一体方案做一介绍。
27917
2
5
|
1月前
|
存储
分布式计算
数据管理
不可思议！Delta Lake 打造批流一体数据仓库，颠覆传统数据管理的奇迹之作
【9月更文挑战第3天】Delta Lake 是一种高效的数据存储格式，适用于构建批流一体的数据仓库。它支持 ACID 事务，确保数据一致性；能自动处理数据模式变更，简化开发流程。本文将分四步介绍如何使用 Delta Lake 实现批流一体的数据仓库：配置环境、创建 Delta Lake 表、执行批处理与流处理操作。通过示例代码展示其强大功能，适用于电商等多种场景下的数据整合与实时分析。
34
2
2
|
11月前
|
存储
SQL
关系型数据库
|
12月前
|
SQL
存储
人工智能
|
存储
SQL
JSON
|
存储
SQL
关系型数据库
数据仓库、数据湖、流批一体，终于有大神讲清楚了！
数据仓库，数据湖，包括Flink社区提的流批一体，它们到底能解决什么问题？今天将由阿里云研究员从解决业务问题出发，将问题抽丝剥茧，从技术维度娓娓道来：为什么你需要数据湖或者数据仓库解决方案？它的核心难点与核心问题在哪？如果想稳定落地，系统设计该怎么做？
4324
0
1
|
存储
机器学习/深度学习
数据采集
|
存储
数据采集
分布式计算
热门文章
最新文章
1
如何高效存储海量GPS数据
2
TableStore Timeline：轻松构建千万级IM和Feed流系统
3
自建ELK vs 日志服务(SLS)全方位对比
4
【OSS全球加速】如何利用CNAME自定义加速区域
5
如何干掉一条tcp 连接（活跃/非活跃）
6
阿里云日志服务(SLS)安装使用方法简介
7
日志分析：SLS vs ELK
8
OSS Java SDK夯住(Hang)问题排查
9
用Windows IIS和阿里云NAS提供Web和FTP服务
10
AI驱动智能化日志分析 : 通过决策树给日志做聚类分析
1
【三方服务集成】最新版 | 阿里云OSS对象存储服务使用教程（包含OSS工具类优化、自定义阿里云OSS服务starter）
28
2
Java 枚举(enum)详解
10
3
HTML5 Geolocation（地理定位）优化到最高精度
24
4
NAS部署Alist、Nextcloud、File Browser，贝锐花生壳实现远程访问
22
5
【云故事探索】NO.9：大洋彼岸的智能工具：劳动力管理，盖雅搞得定
68
6
实现NAS远程下载，Docker部署qBittorrent、Transmission、贝锐花生壳
130
7
oss数据同步maxcompute报错
85
8
搭建Jellyfin、Plex、Emby媒体服务，贝锐花生壳轻松内网穿透远程访问
65
9
解决在Mac上离线存储Disney Plus等流媒体内容
48
10
java的继承详解
25