批处理任务的通用工具类

1、只要是批处理任务(比如下发几万张优惠券,发京豆),就必定用到线程池、不丢包
2、业务场景:下发五万张优惠券,要求一张都不能少。
3、BatchTaskManager

@Service
public class BatchTaskManager {

    private static final int _1W = 10000;

    @Resource
    private ThreadPoolTaskExecutor threadPool;

    public void batchTaskAction() {
        // 查询业务数据,模拟从数据库查询出1W条记录
        List<String> taskList = simulationQueryDB();
        try {
            // 调用工具类批处理任务,这些优惠卷taskList,放入线程池treadPool,做什么业务disposeTask下发
            TaskDisposeUtils.send(taskList, threadPool, TaskDisposeUtils::disposeTask);
        } catch (InterruptedException e) {
            throw new RuntimeException(e);
        }
    }


    private List<String> simulationQueryDB() {
        List<String> data = new ArrayList<>();
        // 模拟查询数据库
        for (int i = 1; i <= 5 * _1W; i++) {
            data.add(String.valueOf(i));
        }
        return data;
    }
}

4、TaskDisposeUtils

public class TaskDisposeUtils {

    public static <T> void send(List<T> taskList, Executor threadPool, Consumer<? super T> consumer) throws InterruptedException {
        if (CollUtil.isEmpty(taskList)) {
            return;
        }
        if (Objects.isNull(consumer)) {
            return;
        }
        CountDownLatch countDownLatch = new CountDownLatch(taskList.size());
        for (T item : taskList) {
            threadPool.execute(() -> {
                try {
                    consumer.accept(item);
                } finally {
                    countDownLatch.countDown();
                }
            });
        }
        countDownLatch.await();
    }

    public static void disposeTask(String task) {
        System.out.println(String.format("【%s发送成功】", task));
    }
}

5、BatchTaskController

@RestController
public class BatchTaskController {

    @Resource
    private BatchTaskManager batchTaskManager;

    // GET http://localhost:8089/batchTask
    @GetMapping("/batchTask")
    public String batchTask() {
        batchTaskManager.batchTaskAction();
        return "本次活动派发流水:" + IdUtil.simpleUUID() + "派发时间:" + DateUtil.now();
    }
}

相关推荐

  1. 批处理任务通用工具

    2024-05-04 12:56:04       10 阅读
  2. Okhttp通用工具

    2024-05-04 12:56:04       9 阅读
  3. Python 轻量级定时任务调度工具

    2024-05-04 12:56:04       39 阅读
  4. redis工具详细

    2024-05-04 12:56:04       30 阅读

最近更新

  1. TCP协议是安全的吗?

    2024-05-04 12:56:04       18 阅读
  2. 阿里云服务器执行yum,一直下载docker-ce-stable失败

    2024-05-04 12:56:04       18 阅读
  3. 【Python教程】压缩PDF文件大小

    2024-05-04 12:56:04       17 阅读
  4. 通过文章id递归查询所有评论(xml)

    2024-05-04 12:56:04       20 阅读

热门阅读

  1. git简介

    git简介

    2024-05-04 12:56:04      10 阅读
  2. 【Trick】conda指令安装yml文件中的python依赖

    2024-05-04 12:56:04       12 阅读
  3. 纯正英语新闻 5.7(提前)

    2024-05-04 12:56:04       10 阅读
  4. CDA Level Ⅰ 2023认证考试大纲

    2024-05-04 12:56:04       16 阅读
  5. Flask知识点汇总表格总结

    2024-05-04 12:56:04       9 阅读
  6. c++ memset 指针示例

    2024-05-04 12:56:04       9 阅读
  7. Element-UI库:Web前端开发的强大助力

    2024-05-04 12:56:04       14 阅读
  8. 【Unity】Mathf

    2024-05-04 12:56:04       11 阅读
  9. x86的开机过程(上)

    2024-05-04 12:56:04       8 阅读
  10. python经典百题之计算字符串中子串出现的次数

    2024-05-04 12:56:04       10 阅读