阿里云 > 开发者平台 > D > 大数据 数仓
相关搜索：
在数据库中删除数据 有部分数据 从数据框获取数据并将其传递到新的空数据框 小数据和大数据 实时数仓 大数据有数据价值高
  • 关于

    大数据 数仓

    的搜索结果

  • 企业大数据平台下数仓建设思路

    免费开通大数据服务：https://www.aliyun.com/product/odps 介然（李金波），阿里云高级技术专家，现任阿里云大数据数仓解决方案总架构师。8年以上互联网数据仓库经历，对系统架构、数据架构拥有丰富的实战经验，曾经数据魔方、淘宝指数的数据架构设计专家。 与阿里云大数据数仓结...

    文章 隐林 2016-12-22 12015浏览量

  • 美团点评基于 Flink 的实时数仓平台实践

    作者：鲁昊@美团点评 一、美团点评实时计算演进 美团点评实时计算演进历程 在 2016 年，美团点评就已经基于 Storm 实时计算引擎实现了初步的平台化。2017 年初，我们引入了 Spark Streaming 用于特定场景的支持，主要是在数据同步场景方面的尝试。在 2017 年底，美团点评实...

    文章 阿里云实时计算Flink 2020-01-02 2708浏览量

  • 美团点评基于 Flink 的实时数仓平台实践

    作者：鲁昊@美团点评 点击查看本场直播>>> 更多2019 Flink Forward 大会视频>>> 一、美团点评实时计算演进 美团点评实时计算演进历程 在 2016 年，美团点评就已经基于 Storm 实时计算引擎实现了初步的平台化。2017 年初，我们引入...

    文章 阿里云实时计算Flink 2020-01-02 3159浏览量

  • Quick BI 数据可视化分析平台

    2020年入选全球Gartner ABI魔力象限，为中国首个且唯一入选BI产品

    广告

  • 基于 Flink 的实时数仓生产实践

    数据仓库的建设是“数据智能”必不可少的一环，也是大规模数据应用中必然面临的挑战。在智能商业中，数据的结果代表了用户反馈、获取数据的及时性尤为重要。快速获取数据反馈能够帮助公司更快地做出决策，更好地进行产品迭代，实时数仓在这一过程中起到了不可替代的作用。 如何更好的建设实时数仓、有哪些优秀的生产实...

    文章 阿里云实时计算Flink 2019-11-18 4113浏览量

  • Databricks数据洞察 限时免费开启公测！

    【Databricks数据洞察】： 企业级批流一体的Spark大数据分析平台，无论是数据分析师、数据开发工程师还是数据科学家，均可以通过Databricks数据洞察（DDI)分析平台，实现协同合作和数据共享，满足在大数据下对数据湖分析、实时数仓、离线数仓、BI数据分析、AI机器学习等场景需求。 【...

    文章 阿里云E-MapReduce团队 2020-07-30 259浏览量

  • 报名倒计时 | 解锁企业数据湖仓先进开启方式，探秘机器学习高阶玩法！

    数据湖作为大数据领域炙手可热的技术之一，已成为当今企业追逐的技术风向标。同时，云原生分布式数仓的先进风潮也正席卷传统的数据仓库领域，引领着未来数仓的发展方向。如果您还在思考如何将二者的优势兼顾，打造适合企业的数据湖仓一体化方案，那么本次阿里云企业数据湖仓和机器学习最佳实践研讨会将会给你答案！ 现活...

    文章 stromal 2020-12-29 24浏览量

  • 滴滴基于 Flink 的实时数仓建设实践

    随着滴滴业务的高速发展，业务对于数据时效性的需求越来越高，而伴随着实时技术的不断发展和成熟，滴滴也对实时建设做了大量的尝试和实践。本文主要以顺风车这个业务为引子，从引擎侧、平台侧和业务侧各个不同方面，来阐述滴滴所做的工作，分享在建设过程中的经验。 1.实时数仓建设目的 随着互联网的发展进入下半场，...

    文章 阿里云实时计算Flink 2020-09-02 2665浏览量

  • 如果你也想做实时数仓…

    作者：郭华（付空） 数据仓库也是公司数据发展到一定规模后必然会提供的一种基础服务，数据仓库的建设也是“数据智能”中必不可少的一环。本文将从数据仓库的简介、经历了怎样的发展、如何建设、架构演变、应用案例以及实时数仓与离线数仓的对比六个方面全面分享关于数仓的详细内容。 1.数据仓库简介 数据仓库是一个...

    文章 Ververica 2019-09-09 1734浏览量

  • 如果你也想做实时数仓…

    作者：郭华（付空） 数据仓库也是公司数据发展到一定规模后必然会提供的一种基础服务，数据仓库的建设也是“数据智能”中必不可少的一环。本文将从数据仓库的简介、经历了怎样的发展、如何建设、架构演变、应用案例以及实时数仓与离线数仓的对比六个方面全面分享关于数仓的详细内容。 1.数据仓库简介 数据仓库是一个...

    文章 阿里云实时计算Flink 2019-09-09 1688浏览量

  • 如果你也想做实时数仓…

    作者：郭华（付空） 数据仓库也是公司数据发展到一定规模后必然会提供的一种基础服务，数据仓库的建设也是“数据智能”中必不可少的一环。本文将从数据仓库的简介、经历了怎样的发展、如何建设、架构演变、应用案例以及实时数仓与离线数仓的对比六个方面全面分享关于数仓的详细内容。 1.数据仓库简介 数据仓库是一个...

    文章 阿里云实时计算Flink 2019-09-09 1741浏览量

  • 2019 Flink Forward 大会最全视频来了！（附PPT下载） | 5大专题不容错过

    摘要： Flink Forward 2019 于今年11月28日在北京举行，规模2000人。本文收录了5大专场，35个大咖精彩演讲合辑，精彩内容一次性打包给你！ 点击pdf下载，收获全套资料 算力制胜，数见未来 Flink Forward Asia 2019 邀请业界极富声望的各行业开拓者组成议...

    文章 KB小秘书 2019-12-26 4691浏览量

  • 专治数仓疑难杂症！美团点评 Flink 实时数仓应用经验分享

    整理 | 青渊（Flink 社区志愿者）校对 | 青雉（Flink 社区志愿者）作者 | 黄伟伦@美团点评 摘要：本文根据 Apache Flink 系列直播整理而成，由美团点评数据系统研发工程师黄伟伦老师分享。主要内容如下： 实时数仓建设目的 如何建立实时数仓 仓库质量保证 Tips：点击...

    文章 阿里云实时计算Flink 2020-07-04 727浏览量

  • 一套 SQL 搞定数据仓库？Flink有了新尝试

    目前企业的数仓建设大多是离线一套，实时一套。业务要求低延时的使用实时数仓；业务复杂的使用离线数仓。架构十分复杂，需要使用很多系统和计算框架，这就要求企业储备多方面的人才，导致人才成本较高，且出了问题难以排查，终端用户也需要熟悉多种语法。本文分析目前的数仓架构，探索离线和实时数仓是否能放在一起考虑，...

    文章 好好、学习 2020-03-19 251浏览量

  • 数据仓库介绍与实时数仓案例

    案例与解决方案汇总页：阿里云实时计算产品案例&解决方案汇总 PPT见附件 1.数据仓库简介 数据仓库是一个面向主题的（Subject Oriented）、集成的（Integrate）、相对稳定的（Non-Volatile）、反映历史变化（Time Variant）的数据集合，用于支持管理...

    文章 付空 2019-02-27 25396浏览量

  • 一套 SQL 搞定数据仓库？Flink有了新尝试

    数据仓库是公司数据发展到一定规模后必然需要提供的一种基础服务，也是“数据智能”建设的基础环节。迅速获取数据反馈不仅有利于改善产品及用户体验，更有利于公司的科学决策，因此获取数据的实时性尤为重要。 目前企业的数仓建设大多是离线一套，实时一套。业务要求低延时的使用实时数仓；业务复杂的使用离线数仓。架构...

    文章 阿里云实时计算Flink 2020-03-19 1754浏览量

  • Flink 助力美团数仓增量生产

    本文由美团研究员、实时计算负责人鞠大升分享，主要介绍 Flink 助力美团数仓增量生产的应用实践。内容包括： 数仓增量生产 流式数据集成 流式数据处理 流式 OLAP 应用 未来规划 一、数仓增量生产 1.美团数仓架构 先介绍一下美团数仓的架构以及增量生产。如下图所示，这是美团数仓的简单架构，...

    文章 阿里云实时计算Flink 2021-01-26 5215浏览量

  • 数智新基石，贾扬清领衔阿里云大数据&AI年度十二大重磅发布!

    2020年云栖大会，贾扬清领衔阿里云大数据&AI年度十二大重磅发布! 产业数字化，数字产业化,今天各行各业的绝大多 数经济活动，都和数据的沉淀、分析、服务密不可分。我们亲身体会过从摸着石头过河到体系化建设的整个过程。在云上，我们逐渐简化纷繁复杂的技术架构，回归需求和场景的初心，让大数据与人...

    文章 墨祤@DataWorks 2020-09-17 1752浏览量

  • OPPO 实时数仓揭秘：从顶层设计实现离线与实时的平滑迁移

    一、建设背景 关于 OPPO 移动互联网业务 大家都认为 OPPO 是一家手机公司，但大家可能并不清楚，其实 OPPO 也会做与移动互联网相关的业务。在 2019 年 12 月，OPPO 发布了自己定制的手机操作系统 ColorOS 7.0 版本。目前包括海外市场在内，ColorOS 的日活已经超...

    文章 阿里云实时计算Flink 2020-03-04 1460浏览量

  • OPPO 实时数仓揭秘：从顶层设计实现离线与实时的平滑迁移

    一、建设背景 关于 OPPO 移动互联网业务 大家都认为 OPPO 是一家手机公司，但大家可能并不清楚，其实 OPPO 也会做与移动互联网相关的业务。在 2019 年 12 月，OPPO 发布了自己定制的手机操作系统 ColorOS 7.0 版本。目前包括海外市场在内，ColorOS 的日活已经超...

    文章 阿里云实时计算Flink 2020-03-04 1850浏览量

  • 用Flink取代Spark Streaming！知乎实时数仓架构演进

    作者 | 知乎数据工程团队 “数据智能” (Data Intelligence) 有一个必须且基础的环节，就是数据仓库的建设，同时，数据仓库也是公司数据发展到一定规模后必然会提供的一种基础服务。从智能商业的角度来讲，数据的结果代表了用户的反馈，获取结果的及时性就显得尤为重要，快速的获取数据反馈能够...

    文章 阿里云实时计算Flink 2019-08-05 2428浏览量

  • 首发｜《Apache Flink 年度最佳实践》，揭秘一线大厂实时平台构建实践

    点击免费下载《Apache Flink 年度最佳实践》>>> 《Apache Flink 年度最佳实践》公开下载啦！首次一次性公布来自B站、美团点评、小米、快手、菜鸟、Lyft、Netflix 等精彩内容，9篇深度文章揭秘一线大厂实时平台构建实践。不容错过的精品电子书，大数据工...

    文章 阿里云实时计算Flink 2020-02-24 1927浏览量

  • 当 TiDB 与 Flink 相结合：高效、易用的实时数仓

    作者：齐智@TiDB 随着互联网飞速发展，企业业务种类会越来越多，业务数据量会越来越大，当发展到一定规模时，传统的数据存储结构逐渐无法满足企业需求，实时数据仓库就变成了一个必要的基础服务。以维表 Join 为例，数据在业务数据源中以范式表的形式存储，在分析时需要做大量的 Join 操作，降低性能。...

    文章 阿里云实时计算Flink 2020-10-29 5419浏览量

  • 用Flink取代Spark Streaming！知乎实时数仓架构演进

    作者 | 知乎数据工程团队 “数据智能” (Data Intelligence) 有一个必须且基础的环节，就是数据仓库的建设，同时，数据仓库也是公司数据发展到一定规模后必然会提供的一种基础服务。从智能商业的角度来讲，数据的结果代表了用户的反馈，获取结果的及时性就显得尤为重要，快速的获取数据反馈能够...

    文章 Ververica 2019-06-27 1681浏览量

  • 数据湖 VS 数据仓库之争？阿里提出大数据架构新概念：湖仓一体

    作者 |关涛、李睿博、孙莉莉、张良模、贾扬清（from 阿里云智能计算平台） 黄波、金玉梅、于茜、刘子正（from 新浪微博机器学习研发部） 编者按 随着近几年数据湖概念的兴起，业界对于数据仓库和数据湖的对比甚至争论就一直不断。有人说数据湖是下一代大数据平台，各大云厂商也在纷纷的提出自己的数据湖解...

    文章 晋恒 2020-10-10 7209浏览量

  • 小打卡基于阿里云构建企业级数仓的实践及总结

    小打卡架构师 申羡 本次分享主要有4块内容，小打卡介绍，小打卡数仓场景简介，小打卡数仓选型思路以及代表性案例分享。首先介绍一下小打卡的业务场景，小打卡是当前领先的小程序兴趣社区。在这里能快速发现你感兴趣的圈子，加入圈子，有达人带你玩转各种兴趣，有同好一起分享、一起交流、一起成长。2017年8月公司...

    文章 zaid胡振宇 2020-11-04 1409浏览量

  • 数据运营时代，如何基于AnalyticDB构建企业实时数仓？

    摘要：万事万物每时每刻都在产生大量的数据，数据无处不在，数据化运营在今天的物流、零售、电商、金融等等行业中都有诸多成功的实践，但是如何降低企业大数据的建设门槛，使得大数据分析成为一种人人都可以获得的普惠能力呢？在本文中，阿里云高级算法专家缪长风（刘林豆）就为大家分享了如何基于AnalyticDB构...

    文章 萌萌怪兽 2018-06-20 3864浏览量

  • 当 TiDB 与 Flink 相结合：高效、易用的实时数仓

    作者：齐智@TiDB 随着互联网飞速发展，企业业务种类会越来越多，业务数据量会越来越大，当发展到一定规模时，传统的数据存储结构逐渐无法满足企业需求，实时数据仓库就变成了一个必要的基础服务。以维表 Join 为例，数据在业务数据源中以范式表的形式存储，在分析时需要做大量的 Join 操作，降低性能。...

    文章 开发者小助手 2020-11-17 172浏览量

  • 从Lambda架构到Kappa架构再到？浅谈未来数仓架构设计~

    Linked大佬Jay Kreps曾发表过一篇博客，简单阐述了他对数据仓库架构设计的一些想法。从Lambda架构的缺点到提出基于实时数据流的Kappa架构。本文将在Kappa架构基础上，进一步谈数仓架构设计。 什么是Lambda架构？ 借用Jay K...

    文章 Execublar 2020-03-31 3871浏览量

  • Fivetran：自动化数仓集成服务

    Fivetran简介 公司发展 Fivetran提供SaaS服务，它连接到业务关键数据源，提取并处理所有数据，然后将其转储到仓库中，以进行SQL访问和必要的进一步转换。参考今年9月的融资消息，这家公司过去一两年里发展很迅速： 2012年由Y Combinator发起，种子轮融资$4M。 2018...

    文章 唐恺 2019-12-30 816浏览量

  • 持续定义Saas模式云数据仓库+实时分析

    一、云数据仓库概述 数据仓库的定义是面向主题、集成性、稳定性和时变性，用于支持管理决策。 数据仓库的意义在于对企业的所有数据进行归集，为企业各个部门提供统一的， 规范的数据出口。数据仓库（模型）本质是人收集和存储数据，认识数据，组织和管理数据，使用数据决策的最佳实践形成的方法论。 模型本身与在哪、...

    文章 孔亮(炼一) 2020-09-01 3510浏览量

1 2 3 4 ... 36 >
写文章 提问题 去认证
在线学习 技能测试 视频直播

相关推荐

参与开发者用户调研得周边好礼

阿里巴巴镜像站改版升级上线啦！

云产品推荐

热门关键词

更多推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务
热门产品 用户热搜 企业场景 更多推荐
数据传输服务 服务网格 多媒体AI 运维编排 访问控制 视频监控 智能外呼 弹性容器实例ECI 配置审计 云数据库RDS VPN网关 云安全访问服务 表格存储 智能语音交互 堡垒机 prometheus 云呼叫中心 数据洞察 企业上云 企业建站 企业营销 创新创业直播间 企业专场销量榜 企业邮箱 企业安全 飞天会员 企业数据 全站加速 容器服务 云插件 云数据库 MySQL 版 全站加速 智能联络中心 智能视觉生产 阿里云工业互联网平台 轻量应用服务器 邮件推送 智能语音交互 云效 智能双录质检 链路追踪