MaxCompute上如何处理非结构化数据
0. 前言
MaxCompute作为阿里云大数据平台的核心计算组件,拥有强大的计算能力,能够调度大量的节点做并行计算,同时对分布式计算中的failover,重试等均有一套行之有效的处理管理机制。 而MaxCompute SQL能在简明的语义上实现各种数据处理逻辑,在集团内外更是广为应用,在其上实现
民生银行牛新庄:单账户成本从2.2元降到8分,分布式架构重构银行IT
牛新庄
中国民生银行总行信息科技部总经理
民生科技有限公司执行董事、总经理
(本文根据牛新庄先生在2018云栖大会金融峰会上分享整理)
大家上午好,非常高兴参加本次“数字驱动中国”杭州云栖大会,今天主要跟大家交流在这样一个技术变革的时代,民生银行、民生科技有限公司在金融科技方面的探索。
表格存储Tablestore权威指南(持续更新)
表格存储本着提升用户体验的思路,打造《表格存储Tablestore权威指南》。为用户提供可借鉴的开发指导、经典案例。经典案例按照场景应用类型划分,目前提供五类场景:元数据、消息数据、轨迹溯源、科学大数据以及物联网;每个类型下都会提供多种经典场景。
PyOdps DataFrame来临,数据分析从未如此简单!
PyOdps正式发布DataFrame框架(此处应掌声经久不息),DTer的福音!有了它,就像卷福有了花生,比翼双飞,哦不,如虎添翼。
快过年了,大家一定没心情看长篇大论的分析文章。作为介绍PyOdps DataFrame的开篇文章,我只说说其用起来爽的地方。其余的部分,从使用、问题到实现原理,我
【资料合集】在线大数据技术峰会:讲义PDF+活动视频!
阿里云云栖社区在3月9日举办了在线“大数据技术峰会”技术峰会,6位阿里技术大咖与4位大数据行业资深实践者直播讲述了大数据项目实战经验以及背后的开发思路。我们将本次峰会的讲义PDF+活动视频整理出来,以供大家学习参考。
SQL优化器原理 - Join重排
这是MaxCompute有关SQL优化器原理的系列文章之一。我们会陆续推出SQL优化器有关优化规则和框架的其他文章。添加钉钉群“关系代数优化技术”(群号11719083)可以获取最新文章发布动态。
本文的目标是解释Join重排这个特性的基础概念和算法,如果想快速了解并在MaxCompute上使用这个特性,请直接跳到“总结”。