【Spark Summit EU 2016】Bing规模下的Spark Streaming

简介: 本讲义出自Kaarthik Sivashanmugam在Spark Summit EU上的演讲,主要介绍了在微软公司的Bing搜索每月上百万次搜索请求、每小时数十TB数据量、成千上万台机器组成数据中心、以及多个数据处理框架这样的规模下的Spark Streaming的应用。

更多精彩内容参见云栖社区大数据频道https://yq.aliyun.com/big-data;此外,通过Maxcompute及其配套产品,低廉的大数据分析仅需几步,详情访问https://www.aliyun.com/product/odps

本讲义出自 Kaarthik Sivashanmugam在Spark Summit EU上的演讲,主要介绍了在微软公司的Bing搜索每月上百万次搜索请求、每小时数十TB数据量、成千上万台机器组成数据中心、以及多个数据处理框架这样的规模下的Spark Streaming的应用。


c1585a8ca68212e1d11556b869368a832adacf72

1b34496ce81cdb5b5c5499f008ff27988d06f8dd

1260515383c5cdf316103108403d0263a80bf11d

8254a3f233347df37ee8cf2441746849a562b3fc

aa37aa5cc3ad33e319305773b8ffaa29e4f5b39d

d16523ee6ef188951caac37597e7f856406c7f3b

ebff6f9f4d6d8364748321cd863ef35e20795711

61db15a79ff0784820417e30689b5b005314c9ae

87abfa502e6524f77bc153e45c7d735843d58a97

c87db53830d46b2eb025d8121b3ead9ba5825fc5

8a3d29d38be88cfeda43dc2116132585e7829112

51a186522c94ef20fc918e415773f65b81e057d8

c2d9633a0af7af76a7064f0348ba1d2f974e6c3e

55fbf1ad48595059e4bf067f37eec00955a17b7d

7aadc030770591dc20ff2ff9cae0fd3b2ea20d38

1b85d3fd1bc6640446aa3f27d5314fbb12231216



相关文章
|
8天前
|
分布式计算 大数据 数据处理
【Flink】Flink跟Spark Streaming的区别?
【4月更文挑战第17天】【Flink】Flink跟Spark Streaming的区别?
|
1月前
|
存储 分布式计算 Spark
实战|使用Spark Streaming写入Hudi
实战|使用Spark Streaming写入Hudi
41 0
|
3月前
|
分布式计算 监控 数据处理
Spark Streaming的容错性与高可用性
Spark Streaming的容错性与高可用性
|
3月前
|
分布式计算 数据处理 Apache
Spark Streaming与数据源连接:Kinesis、Flume等
Spark Streaming与数据源连接:Kinesis、Flume等
|
3月前
|
消息中间件 分布式计算 Kafka
使用Kafka与Spark Streaming进行流数据集成
使用Kafka与Spark Streaming进行流数据集成
|
3月前
|
分布式计算 监控 数据处理
Spark Streaming的DStream与窗口操作
Spark Streaming的DStream与窗口操作
|
3月前
|
分布式计算 监控 数据处理
实时数据处理概述与Spark Streaming简介
实时数据处理概述与Spark Streaming简介
|
3月前
|
SQL 分布式计算 数据处理
Spark的生态系统概览:Spark SQL、Spark Streaming
Spark的生态系统概览:Spark SQL、Spark Streaming
|
3月前
|
消息中间件 分布式计算 Kafka
Spark中的Spark Streaming是什么?请解释其作用和用途。
Spark中的Spark Streaming是什么?请解释其作用和用途。
28 0
|
4月前
|
消息中间件 分布式计算 Kafka
【Spark Streaming】Spark Day11:Spark Streaming 学习笔记
【Spark Streaming】Spark Day11:Spark Streaming 学习笔记
34 0