LTS是一个轻量级分布式任务调度框架。有三种角色, JobClient, JobTracker, TaskTracker。各个节点都是无状态的，可以部署多个，来实现负载均衡，实现更大的负载量, 并且框架具有很好的容错能力。 采用多种注册中心（Zookeeper，redis等）进行节点信息暴露，master选举。(Mongo or Mysql)存储任务队列和任务执行日志, netty做底层通信。
分布式任务调度框架
2017-06-08
5175
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介：
目录
相关文章
|
14天前
|
存储
人工智能
PyTorch
|
1月前
|
人工智能
算法
PyTorch
TorchAcc：基于 TorchXLA 的分布式训练框架
阿里云研究员、阿里云人工智能平台 PAI 技术负责人--林伟在GTC 2024 大会 China AI Day 线上中文演讲专场上介绍了TorchAcc，这是一个基于 PyTorch/XLA 的大模型分布式训练框架。
107432
5
8
|
1月前
|
SQL
弹性计算
分布式计算
TiDB计算层详解：分布式计算框架与查询优化机制
【2月更文挑战第26天】本文将深入剖析TiDB的计算层，详细解析其分布式计算框架和查询优化机制。通过了解计算层的核心组件和工作原理，我们可以更好地理解TiDB如何高效处理SQL查询和计算任务。本文将从计算层的架构、任务分发、查询优化等方面展开介绍，帮助读者全面掌握TiDB计算层的关键技术和优势。
180
2
2
|
2月前
|
消息中间件
Kafka
Apache
|
27天前
|
消息中间件
算法
Java
|
1月前
|
NoSQL
Java
Redis
|
1月前
|
运维
监控
Java
|
2天前
|
Dubbo
Java
应用服务中间件
Java从入门到精通：3.2.2分布式与并发编程——了解分布式系统的基本概念，学习使用Dubbo、Spring Cloud等分布式框架
Java从入门到精通：3.2.2分布式与并发编程——了解分布式系统的基本概念，学习使用Dubbo、Spring Cloud等分布式框架
14
0
0
|
6天前
|
分布式计算
Ubuntu
调度
|
29天前
|
调度
热门文章
最新文章
1
GaussDB分布式与单机模式的比较
2
【亿级数据专题】「分布式服务框架」 盘点本年度我们探索服务的保障容量的三大关键方案实现
3
缓存、分布式缓存和持久化
4
电子好书发您分享《PolarDB分布式版架构介绍》
5
LLaMA-Factory 基于docker的大模型多卡分布式微调
6
【分布式技术专题】「分布式技术架构」MySQL数据同步到Elasticsearch之N种方案解析，实现高效数据同步
7
深度思考：雪花算法snowflake分布式id生成原理详解
8
Spring+SpringMVC+Mybatis的分布式敏捷开发系统架构
9
【PolarDB-X从入门到精通】 第四讲：PolarDB分布式版安装部署（源码编译部署）
10
金石推荐 | 【分布式技术专题】「单点登录技术架构」一文带领你好好认识以下Saml协议的运作机制和流程模式
1
P2P网络下分布式文件共享场景的测试
33
2
Spring Boot 整合xxl-job实现分布式定时任务
70
3
学习分布式事务Seata看这一篇就够了，建议收藏
183
4
Flink CDC产品常见问题之读分布式mysql报连接超时如何解决
163
5
在Windows下设置分布式队列Celery的心跳轮询
29
6
这些年背过的面试题——分布式篇
140
7
新一代数据库技术：融合区块链与分布式存储的未来前景
364
8
带你了解文件系统架构的演变：从传统到分布式
76
9
客户说｜从4小时到15分钟，一次分布式数据库的丝滑体验
184
10
CatBoost高级教程：分布式训练与大规模数据处理
242