并行执行 Job【转】

超、凢脫俗 2021-12-14 04:17 263阅读 0赞

有时，我们希望能同时运行多个 Pod，提高 Job 的执行效率。这个可以通过 `parallelism` 设置。

![775365-20180225065308180-1785377375.png][]

这里我们将并行的 Pod 数量设置为 2，实践一下：

![775365-20180225065319568-1592843931.png][]

Job 一共启动了两个 Pod，而且 `AGE` 相同，可见是并行运行的。

我们还可以通过 `completions` 设置 Job 成功完成 Pod 的总数：

![775365-20180225065331662-290456936.png][]

上面配置的含义是：每次运行两个 Pod，直到总共有 6 个 Pod 成功完成。实践一下：

![775365-20180225065344139-203138608.png][]

`DESIRED` 和 `SUCCESSFUL` 均为 `6`，符合预期。如果不指定 `completions` 和 `parallelism`，默认值均为 `1`。

上面的例子只是为了演示 Job 的并行特性，实际用途不大。不过现实中确实存在很多需要并行处理的场景。比如批处理程序，每个副本（Pod）都会从任务池中读取任务并执行，副本越多，执行时间就越短，效率就越高。这种类似的场景都可以用 Job 来实现。

下一节我们讨论如何定时执行 Job。

转载于:https://www.cnblogs.com/twobrother/p/11088816.html

[775365-20180225065308180-1785377375.png]: /images/20211213/e9ec171bbec94bf38dbb5115018488d5.png
[775365-20180225065319568-1592843931.png]: /images/20211213/d8cb941d3b8d44dcaaad3bdcbb832415.png
[775365-20180225065331662-290456936.png]: /images/20211213/df4f84a5fdb2477a97809b662524b04c.png
[775365-20180225065344139-203138608.png]: /images/20211213/963ec7aecbf846419c25fe56ff1295e2.png

发表评论取消回复

表情：

评论列表（有 0 条评论，263人围观）

还没有评论，来说两句吧...

相关阅读

相关 oralce job 定时执行任务

\-- 创建job declare my\_job\_num number; begin dbms\_job.submit(job, what, next\_d

逃离我推掉我的手/ 2024年02月17日 22:45/ 0 赞/ 55 阅读

相关 xxl-job带参数执行

获取参数单个参数，，，String param = XxlJobHelper.getJobParam(); 多个参数，，，， 1. String param =

我会带着你远行/ 2023年10月10日 01:19/ 0 赞/ 59 阅读

相关 HIVE调优之并行执行

Hive会将一个查询转化成一个或者多个阶段。这样的阶段可以是MapReduce阶段、抽样阶段、合并阶段、limit阶段，或者Hive执行过程中可能需要的其他阶段。默认情况下，H

╰+攻爆jí腚メ/ 2023年08月17日 15:18/ 0 赞/ 125 阅读

相关 java testng执行并行测试

转自：[https://www.jianshu.com/p/4ba104a55df6][https_www.jianshu.com_p_4ba104a55df6] TestN

亦凉/ 2023年06月02日 09:25/ 0 赞/ 40 阅读

相关 xxl-job动态添加执行任务

1.概述在很多场景中，需要根据用户选择，延期执行某些事情。 2.背景在资源分发事件管理中，审批事件可以选择，事件具体的执行时间。这就需要任务调度器协助。 >

雨点打透心脏的1/2处/ 2022年10月05日 01:52/ 0 赞/ 542 阅读

相关 java并行执行多个任务

java并行执行多个任务：最近做项目中，有个任务需要实现并发编程，个人参考了下网上的实现，自己实现了下并发方法，并且增加了简单的说明，希望的有需要的朋友有些帮助。

亦凉/ 2022年08月25日 08:40/ 0 赞/ 291 阅读

相关 Oracle并行执行特性应用初探

出于对作者的尊重和感谢，原文地址为http://www.cnblogs.com/zyk/p/3719600.html 1. 1. 序

叁歲伎倆/ 2022年07月17日 00:15/ 0 赞/ 213 阅读

相关 XXL-JOB原理--任务执行（五）

一、任务调度中心发送任务执行请求任务发送执行的操作有两种：（1）根据配置的cron表达式周期性执行相关任务（2）在任务调度中心主动执行任务在注册quartz定时

ゝ一世哀愁。/ 2022年05月12日 07:34/ 0 赞/ 328 阅读

相关并行执行 Job【转】

有时，我们希望能同时运行多个 Pod，提高 Job 的执行效率。这个可以通过 `parallelism` 设置。 ![775365-20180225065308180-178

超、凢脫俗/ 2021年12月14日 04:17/ 0 赞/ 264 阅读

相关 SpringBoot @Async异步并行执行任务

说@Async注解时，得先说说异步任务的由来，按我的理解，从Java5版本就提供 Future 接口，Future接口可以充分利用多核CPU处理能力，它允许任务在一个新的核上开

淩亂°似流年/ 2021年10月13日 04:19/ 0 赞/ 542 阅读