hadoop整体结构图及服务组件详解
hadoop服务组件简单解释
1、core 分布式系统和通用IO组件和接口(序列化、java远程调用等等服务)
2、avro 支持跨语言过程调用,持久数据存储的数据序列化系统
3、MapReduce 构建在廉价的pc机器上分布式数据处理模型和运行环境
4、hdfs 构建廉价的pc机器上分布式文件系统
5、pig 处理海量数据集的数据流语
实时计算Flink——产品特点
产品特点
相较于其他流计算产品,阿里云实时计算提供极具竞争力的产品优势。您可以充分利用实时计算提供的产品优势,方便快捷的解决自身业务实时化大数据分析的问题。
强大的实时处理能力
不同于其他开源流计算中间件只提供粗陋的计算框架,大量的流计算细节需要业务人员重新实现。
搭建直播平台需要从CDN“内部”入手
大家都知道对于搭建直播平台来说,CDN是其中非常重要的一个部分。CDN又叫内容分发网络,主要包含内容分发、负载均衡、调度等功能模块。其中负载均衡在搭建过程中也扮演了较为重要的角色。在互联网早期,业务流量还比较小,业务逻辑相对来说也比较简单,只需要单台服务器就可以满足基本的需求了。