Storm概念学习系列之storm的定时任务

简介:

 至于为什么,有storm的定时任务。这个很简单。但是,这个在工作中非常重要!

 

 

 

假设有如下的业务场景

  这个spoult源源不断地发送数据,boilt呢会进行处理。然后呢,处理后的结果,假设要写到mysql里面。

          

   假设,spout有几十万条,这么过来。写入到bolt,意味着,它一秒钟要调用mysql几十万此。即操作频率太快,这样导致会出现问题。

     所以,很有必要进行storm的定时任务!!!

   

 

 

 

  storm的定时任务,它可以每隔指定的时间将数据整合一次存入数据库。

        

 

 

 

 

 

 

        


本文转自大数据躺过的坑博客园博客,原文链接:http://www.cnblogs.com/zlslch/p/7249914.html,如需转载请自行联系原作者


相关文章
|
9月前
|
分布式计算 Hadoop 流计算
Storm集群部署与单词计数程序
Storm集群部署与单词计数程序
48 0
|
存储 监控 安全
storm笔记:storm集群
Strom集群结构是有一个主节点(nimbus)和多个工作节点(supervisor)组成的主从结构,主节点通过配置静态指定(还有一种主从结构是在运行时动态选举,比如zookeeper)。通常这种主从结构存在出现单点故障的风险,Storm通过特殊处理规避这种风险,后面将解释Storm的半容错结构。
320 0
storm笔记:storm集群
|
流计算 jstorm
Jstorm vs Storm
Jstorm 是由Storm演化而来,在架构和实现上都有很大的相似度,并且沿用了Storm的编程接口,Storm的程序在很多版本上,可以无缝迁移到Jstorm。整体上说,Jstorm更稳定,灵活性更高,性能更高。
1244 0
|
存储 分布式计算 Java