大规模Schedule任务实现方案

简介:
package com.itlong.bjxizhan.support.web.job.base;  
  
import com.itlong.bjxizhan.common.DbContext;  
import com.itlong.bjxizhan.domain.pojo.Task;  
import com.itlong.bjxizhan.support.web.service.StandardTaskService;  
import org.slf4j.Logger;  
import org.slf4j.LoggerFactory;  
  
import java.util.List;  
  
/** 
 * Created by shenhongxi on 2016/7/12. 
 */  
public class JobRunnable implements Runnable {  
  
    private static final Logger log = LoggerFactory.getLogger(JobRunnable.class);  
  
    private StandardTaskService standardTaskService;  
  
    private List<Task> tasks;  
  
    private String dbKey;  
  
    private String tableIndex;  
  
    @Override  
    public void run() {  
        if (tasks != null) {  
            try {  
                DbContext.setDbKey(dbKey);  
                DbContext.setTableIndex(tableIndex);  
                for (Task task : tasks) {  
                    task.setTableIndex(tableIndex);  
  
                    // 1. 一个job的多个实例,谁先成功锁定任务,谁先处理任务,若处理失败则解锁任务  
                    // 2. 对于1中解锁失败的,要利用另外的job来专门进行解锁  
                    // 3. 将任务分成几批,并行处理  
                    // 4. 这些任务的子任务分批串行处理,同样有锁定-处理-失败解锁  
                    // 5. 对于4中解锁失败的,同样要利用另外的job来专门进行解锁  
                    boolean locked = standardTaskService.lock(task);  
                    if (!locked) continue;  
  
                    boolean result = standardTaskService.process(task);  
  
                    standardTaskService.finished(result, task);  
                }  
            } catch (Exception e) {  
                log.error("Do task error", e);  
                throw new RuntimeException("Do task error");  
            }  
        }  
    }  
  
    public List<Task> getTasks() {  
        return tasks;  
    }  
  
    public void setTasks(List<Task> tasks) {  
        this.tasks = tasks;  
    }  
  
    public StandardTaskService getStandardTaskService() {  
        return standardTaskService;  
    }  
  
    public void setStandardTaskService(StandardTaskService standardTaskService) {  
        this.standardTaskService = standardTaskService;  
    }  
  
    public String getTableIndex() {  
        return tableIndex;  
    }  
  
    public void setTableIndex(String tableIndex) {  
        this.tableIndex = tableIndex;  
    }  
  
    public String getDbKey() {  
        return dbKey;  
    }  
  
    public void setDbKey(String dbKey) {  
        this.dbKey = dbKey;  
    }  
}

原文链接:[http://wely.iteye.com/blog/2319842]

相关文章
|
5天前
|
人工智能 运维 安全
|
3天前
|
人工智能 异构计算
敬请锁定《C位面对面》,洞察通用计算如何在AI时代持续赋能企业创新,助力业务发展!
敬请锁定《C位面对面》,洞察通用计算如何在AI时代持续赋能企业创新,助力业务发展!
|
10天前
|
人工智能 JavaScript 测试技术
Qwen3-Coder入门教程|10分钟搞定安装配置
Qwen3-Coder 挑战赛简介:无论你是编程小白还是办公达人,都能通过本教程快速上手 Qwen-Code CLI,利用 AI 轻松实现代码编写、文档处理等任务。内容涵盖 API 配置、CLI 安装及多种实用案例,助你提升效率,体验智能编码的乐趣。
848 109
|
4天前
|
机器学习/深度学习 人工智能 自然语言处理
B站开源IndexTTS2,用极致表现力颠覆听觉体验
在语音合成技术不断演进的背景下,早期版本的IndexTTS虽然在多场景应用中展现出良好的表现,但在情感表达的细腻度与时长控制的精准性方面仍存在提升空间。为了解决这些问题,并进一步推动零样本语音合成在实际场景中的落地能力,B站语音团队对模型架构与训练策略进行了深度优化,推出了全新一代语音合成模型——IndexTTS2 。
482 12
|
4天前
|
人工智能 测试技术 API
智能体(AI Agent)搭建全攻略:从概念到实践的终极指南
在人工智能浪潮中,智能体(AI Agent)正成为变革性技术。它们具备自主决策、环境感知、任务执行等能力,广泛应用于日常任务与商业流程。本文详解智能体概念、架构及七步搭建指南,助你打造专属智能体,迎接智能自动化新时代。
|
5天前
|
机器学习/深度学习 传感器 算法
Edge Impulse:面向微型机器学习的MLOps平台——论文解读
Edge Impulse 是一个面向微型机器学习(TinyML)的云端MLOps平台,致力于解决嵌入式与边缘设备上机器学习开发的碎片化与异构性难题。它提供端到端工具链,涵盖数据采集、信号处理、模型训练、优化压缩及部署全流程,支持资源受限设备的高效AI实现。平台集成AutoML、量化压缩与跨硬件编译技术,显著提升开发效率与模型性能,广泛应用于物联网、可穿戴设备与边缘智能场景。
188 127