1.其中flume用来获取数据。
2.Kafka用来临时保存数据。
3.Strom用来计算数据。
4.Redis是个内存数据库，用来保存数据。
107 流式计算一般架构图
2023-11-01
22
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介：
107 流式计算一般架构图
目录
相关文章
|
SQL
分布式计算
大数据
|
6月前
|
存储
分布式计算
大数据
|
9月前
|
缓存
资源调度
分布式计算
|
存储
数据采集
大数据
|
消息中间件
存储
SQL
数据架构的未来——浅谈流处理架构
数据架构设计领域正在发生一场变革，其影响的不仅是实时处理业务，这场变革可能将基于流的处理视为整个架构设计的核心，而不是将流处理只是作为某一个实时计算的项目使用。本文将对比传统数据架构与流处理架构的区别，并将介绍如何将流处理架构应用于微服务及整体系统中。
333
0
0
|
存储
消息中间件
SQL
|
存储
测试技术
数据处理
流计算
在过去几年里，已为流计算开发了数百项应用。下面简单介绍了一些应用，着重强调了流计算支持的使用类型。面对日益增长的海量数据，精细化营销的挑战．通常电信行业会面临海量数据，异构数据，实时主动分析等挑战．
510
0
0
|
数据采集
存储
大数据
|
存储
缓存
数据处理
Flink最佳实践（一）流式计算系统概述
前言
传统的批处理拥有巨大 吞吐量 的优势，但是随之而来的是极其 高延迟 的缺陷。
随着大数据系统的不断发展，传统的批处理已然无法全部满足对 时效性 要求愈加严苛的业务需求。
为了适应逐渐变得 「实时」 的年代，大数据系统架构也由简单的批处理转向批流混合的Lambda架构，最后可能会逐渐演变成只有流计算的 高精准高时效 的Kappa架构。
2042
0
0
|
流计算
Apache
供应链
基于 Flink 的实时数仓生产实践
数据仓库的建设是“数据智能”必不可少的一环，也是大规模数据应用中必然面临的挑战。在智能商业中，数据的结果代表了用户反馈、获取数据的及时性尤为重要。快速获取数据反馈能够帮助公司更快地做出决策，更好地进行产品迭代，实时数仓在这一过程中起到了不可替代的作用。
5482
0
0
热门文章
最新文章
1
解决关于Windows Defender Antivirus Service自启造成运行python程序时，Windows的cpu和内存占用过高问题
2
订票系统不再瘫痪 阿里云确认与12306合作
3
2022年了！你有几种获取URL参数的方法？
4
基于Tablestore的一站式物联网存储解决方案-场景篇
5
使用 Notepad++ 编辑 .java 文件时的相关配置
6
烂泥：IIS主机头的理解与应用
7
安装SQLSERVER2000时出现以前的某个程序安装已在安装计算机上创建挂起的文件操作
8
android 官方文档中的一些错误收集
9
Git SSH Key 生成步骤
10
iReport中求和的问题
1
【C言专栏】C 语言结构体的应用与实践
18
2
【C 言专栏】C 语言指针的深度解析
19
3
【专栏：HTML与CSS前端技术趋势篇】HTML与CSS在PWA（Progressive Web Apps）中的应用
18
4
【专栏：HTML与CSS前端技术趋势篇】前端框架（React/Vue/Angular）与HTML/CSS的结合使用
17
5
Docker部署Traefik结合内网穿透远程访问Dashboard界面
22
6
【专栏：HTML 与 CSS 前端技术趋势篇】Web 性能优化：CSS 与 HTML 的未来趋势
11
7
探索自动化测试工具Selenium Grid的高效集成策略
11
8
深入理解PHP中的命名空间
13
9
【专栏：HTML与CSS前端技术趋势篇】渐进式增强与优雅降级在前端开发中的实践
10
10
【专栏：HTML与CSS前端技术趋势篇】网页设计中的CSS Grid与Flexbox之争
11