分布式部署时数据切分处理问题 -问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文
阿里云
为了无法计算的价值
打开APP
阿里云APP内打开

分布式部署时数据切分处理问题

2016-02-25 14:49:44 1906 1

有个数组,存储在redis或者数据库中。
我的应用要部署多个实例,去操作这个数组。操作是定时任务类型,每秒触发。
我希望每个实例操作数组中的一部分数据,各实例间不重复操作数据,(即有N个实例部署的话,每个实例处理N分之一的数据)。
技术选型想到用zookeeper和quartz,zk控制实例处理哪一部分数据,quartz处理定时任务,
请问高手们,这样的设计合适吗?

取消 提交回答
全部回答(1)
  • 蛮大人123
    2019-07-17 18:47:32

    可以,用zk的分布式锁或者用redis的原子操作就可以.

    0 0
相关问答

1

回答

AnalyticDB如何实现数据的冷热数据分层?

2022-11-01 18:13:14 107浏览量 回答数 1

1

回答

虚拟处理机要安装几个呀?为什么呢?

2022-07-27 08:10:22 88浏览量 回答数 1

1

回答

对数据异常中的缺失值问题,删除数据中缺失的样本数据或者删除缺失的值的方法可以在什么情况下使用?

2022-07-25 23:40:19 151浏览量 回答数 1

1

回答

数据处理包含哪几个部分?

2021-10-15 15:09:52 343浏览量 回答数 1

1

回答

可以对多个文本文件进行数据处理

2019-12-22 15:18:32 603浏览量 回答数 1

1

回答

为什么可以使用相同的函数从字符串和文件处理程序中读取YAML数据?

2019-10-12 11:00:55 1908浏览量 回答数 1

2

回答

分布式session怎么处理?

2019-03-28 22:53:03 1816浏览量 回答数 2

1

回答

[@小川游鱼][¥20]项目上线三个月,每天过亿的数据量....如何处理是好?

2018-12-14 16:14:09 1670浏览量 回答数 1

0

回答

分布式流处理框架——功能对比和性能评估

2018-07-16 21:39:56 915浏览量 回答数 0

2

回答

安装DZ 到创建数据库就错误

2016-03-02 22:25:25 2686浏览量 回答数 2
+关注
蛮大人123
我说我不帅他们就打我,还说我虚伪
文章
问答
问答排行榜
最热
最新
相关电子书
更多
分布式KV存储Cellar演进之路
立即下载
HBase冷热分离方案
立即下载
分布式 KV 存储系统 Cellar 演进之路
立即下载