背景信息

GaussDB 200支持对异常的作业执行终止或者降级操作。系统通过设置控制组参数来进行异常处理。异常阈值如表1中所示。

当作业执行超过以上阈值中的某一个时，就会触发以下任意异常动作类型的操作。

• abort

  作业满足设置的异常阈值后执行终止作业，可以通过参数“-a”或“--abort”指定。

• penalty

  作业执行中超过设置的异常阈值后对作业执行降级操作，可以通过“--penalty”参数指定。

  • 降级操作只能对Class控制组下的Timeshare分组（Low、Medium、High或Rush控制组）进行设置。
  • 降级操作每次降一级，例如：作业开始时是class:Rush，满足一次降级条件后降级为class:High，第二次满足降级为class:Medium，以此类推，直到降到class:Low为止。

qualificationtime为检查作业执行CPU倾斜率的间隔时间，单位为秒。

• qualificationtime依赖于DN收集CPU使用率的间隔时间。
• DN收集CPU倾斜率的间隔时间由GUC参数cpu_collect_timer控制。cpu_collect_timer单位是秒，默认为30秒，范围1~INT_MAX，设置的太小会影响语句执行的效率，太大会影响异常处理的精度。
• qualificationtime一般可设置为等于cpu_collect_timer或者cpu_collect_timer的倍数。

前提条件

• 已参考8了解控制组的分类以及控制方式。
• 已熟悉gs_cgroup和gs_ssh的使用。

操作步骤

说明：

在GaussDB 200中，需要在每个集群节点上执行控制组的创建、更新、删除操作，才能实现对整个集群资源的控制，所以下述步骤中都使用gs_ssh命令执行。

• 以操作系统用户omm登录GaussDB 200集群任一主机。执行source ${BIGDATA_HOME}/mppdb/.mppdbgs_profile命令启动环境变量。
• 设置“class_a”下属“workload_a1”的作业阻塞到1200秒或执行2400秒时执行终止动作。

  gs_ssh -c "gs_cgroup -S class_a -G workload_a1 -E "blocktime=1200,elapsedtime=2400" -a"

• 设置“class_a”下属“workload_a2”的作业下盘数据量达到256MB或大表广播数据量达到100MB时执行终止动作。

  gs_ssh -c "gs_cgroup -S class_a  -G workload_a2 -E "spillsize=256,broadcastsize=100" -a"

• 设置“class_b”下属“workload_b1”的作业在所有DN上CPU总时间到达100s时执行降级动作。

  gs_ssh -c "gs_cgroup -S class_b -G workload_b1 -E "allcputime=100" --penalty"

• 设置“class_b”下属“workload_b2”的作业在所有DN上执行时间到达2400秒，且倾斜率达到90时执行降级动作。

  gs_ssh -c "gs_cgroup -S class_b -G workload_b2 -E "qualificationtime=2400,cpuskewpercent=90" --penalty"

  说明：

  • 作业执行过程中，如果修改了异常阈值，之后执行的语句会按照新的异常阈值进行处理，但是对于正在执行的语句不一定生效：
    • 对于已经被执行引擎调度的作业不会使用新的异常阈值。
    • 对于没有被执行引擎调度的作业，如果异常类型为spillsize、broadcastsize，使用新的异常阈值进行处理；如果异常类型为blocktime、elapsedtime、allcputime、cpuskewpercent，依然使用旧的异常阈值进行处理。
  • 当作业执行超过异常阈值时，触发异常动作不一定立即生效，会受内部中断信号处理的影响。