基于阿里云数加MaxCompute的企业大数据仓库架构建设思路
数加大数据直播系列课程主要以基于阿里云数加MaxCompute的企业大数据仓库架构建设思路为主题分享阿里巴巴的大数据是怎么演变以及怎样利用大数据技术构建企业级大数据平台。
本次分享嘉宾是来自阿里云大数据的技术专家祎休
背景与总体思路
数据仓库是一个面向主题的、集成的、非易失的、反映历史变化的数据集合用于支持管理决策。
Hadoop迁移MaxCompute神器之DataX-On-Hadoop使用指南
DataX-On-Hadoop即使用hadoop的任务调度器，将DataX task(Reader->Channel->Writer)调度到hadoop执行集群上执行。这样用户的hadoop数据可以通过MR任务批量上传到ODPS、RDS等，不需要用户提前安装和部署DataX软件包，也不需要另外为DataX准备执行集群。
flume java介绍
近期在做shark flume开发框架的测试，该框架是一个简单高效的面向数据的pipeline框架，采用flume java的思想，实现了一套flume java on MaxCompute的library。为了更好的了解shark自己也去阅读了flume java的paper，这里做一些总结，主要
阿里巴巴大数据技术关键进展及展望
2019杭州云栖大会大数据技术专场，由阿里云通用计算平台负责人关涛带来以 “阿里巴巴大数据技术关键进展及展望” 为主题的演讲。本文首先讲解了从阿里巴巴的角度看待大数据领域的客户价值迁移，概览了核心技术的发展点，最后针对如何构建智能化大数据平台的相关工作进行了介绍，从引擎优化到 “自动驾驶”，并列举了几个典型案例。
ODPS技术架构及应用实践
DT时代，数据是宝贵的生产资料，不断扩大的数据规模给ODPS带来极大地挑战。阿里巴巴坚持对ODPS的投入开发，采用内聚式平台系统架构，各个组件紧凑内聚，除了结构化数据处理SQL、分布式编程模型MapReduce外，还包含图计算模型、实时流处理和机器学习平台。随着ODPS对外开放的不断推进和第三方数据
DII—算法服务利器
随着集团内各种离线处理、实时反馈、在线学习和分析系统的发展壮大，为算法同学使用数据提供了更多的手段和玩法，能够从数据中挖掘出更多的宝藏。但是仅仅产出数据是不够的，他们需要将数据结合算法在线服务的方式应用到业务中去，才能真正产生价值。从搜索事业部的现状来看，算法的作用方式主要有两种，一种是嵌入引擎内.
MaxCompute与OSS非结构化数据读写互通（及图像处理实例）
MaxCompute作为阿里巴巴集团内部绝大多数大数据处理需求的核心计算组件，拥有强大的计算能力，随着集团内外大数据业务的不断扩展，新的数据使用场景也在不断产生。在这样的背景下，MaxCompute（ODPS）计算框架持续演化，而原来主要面对内部特殊格式数据的强大计算能力，也正在一步步的通过新增的非结构化数据处理框架，开放给不同的外部数据。
比起表白这件事，玩大数据会更容易吗？
有人认为爱是性，是婚姻，是清晨六点的吻，是一堆孩子，也许真是这样的，莱斯特小姐。但你知道我怎么想吗，我觉得爱是想触碰又收回手。
——塞林格 《破碎故事之心》
解密 阿里巴巴大数据女程序员瑞清代码诗！
2018年已过，我们迎来了新的一年，在机遇与挑战同在的环境下，我们更应勤于学习。为了方便大家学习，小编为大家盘点了2018年阿里巴巴大数据—玩家社区云栖号最火的干货文章分享给大家，让我们在新的一年里共同学习和成长！
阿里巴巴大数据 —玩家社区
云栖号简介：
阿里大数据博文，问答，社群，实践，有朋自远方来，不亦说乎……
2018年10篇最受欢迎博文：
第一篇：
《MaxCompute/DataWorks权限问题排查建议》
MaxCompute与DataWorks为两个产品，在权限体系上既有交集又要一定的差别。