AWSEMR托管自动扩展在Spark作业运行期间自动缩减为0个任务节点,然后再次添加任务节点。
创始人
2024-09-25 10:01:27
0

为了解决这个问题,我们需要做两件事情:

  1. 配置延迟自动缩放。

  2. 配置伸缩策略。

下面是代码示例:

{
"Instances":{
"InstanceCount":2,
"InstanceGroups":[{
"AutoScalingPolicy":{
"Constraints":{
"MinCapacity":2,
"MaxCapacity":10
},
"Rules":[{
"Name":"CPU",
"Description":"Increase or decrease task nodes as CPU utilization",
"Action":{
"SimpleScalingPolicyConfiguration":{
"AdjustmentType":"CHANGE_IN_CAPACITY",
"ScalingAdjustment":1,
"CoolDown":300
}
},
"Trigger":{
"CloudWatchAlarmDefinition":{
"ComparisonOperator":"GREATER_THAN",
"EvaluationPeriods":5,
"MetricName":"CPUUtilization",
"Namespace":"AWS/EC2",
"Period":300,
"Statistic":"AVERAGE",
"Threshold":70
}
}
}]
}],
"KeepJobFlowAliveWhenNoSteps":true
},
"BootstrapActions":[{
"Name":"Bootstrap via script-runner.jar",
"ScriptBootstrapAction":{
"Path":"s3://aws-scripts-us-east-1/script-runner/script-runner.jar",
"Args":[
"s3://aws-scripts-us-east-1/autoscaling/autoscaling.sh"
]
}
}]
}

上面的示例设置了最小容量2,最大容量10,CPU利用率阈值70%, 连续5个时间段,300秒的冷却期,每次调整一个状态。您可以更改相应的值以满足您的需求。

相关内容

热门资讯

透视好友!wejoker辅助脚... 透视好友!wejoker辅助脚本,we poker辅助器v3.3,手段教程(都是是真的挂)-哔哩哔哩...
透视后台!hhpoker是真的... 透视后台!hhpoker是真的还是假的(透视)开挂辅助技巧(一直真的是有挂)-哔哩哔哩1、游戏颠覆性...
透视真的!wpk德州局怎么透视... 透视真的!wpk德州局怎么透视,智星菠萝可以辅助吗,诀窍教程(本来是真的挂)-哔哩哔哩1、这是跨平台...
透视代打!hhpoker破解工... 透视代打!hhpoker破解工具(透视)开挂辅助神器(切实存在有挂)-哔哩哔哩1、全新机制【hhpo...
透视好牌!菠萝辅助器免费版的特... 透视好牌!菠萝辅助器免费版的特点,hhpoker透视脚本,教程书教程(都是是有挂)-哔哩哔哩1、每一...
透视开挂!hhpoker有没有... 透视开挂!hhpoker有没有辅助挂(透视)开挂辅助插件(确实真的有挂)-哔哩哔哩在进入hhpoke...
透视软件!wpk辅助购买,we... 您好,wepoker是不是有人用挂这款游戏可以开挂的,确实是有挂的,需要了解加去威信【1367043...
透视教程!wpk官网下载链接(... 透视教程!wpk官网下载链接(透视)开挂辅助挂(一直是有挂)-哔哩哔哩;1、透视教程!wpk官网下载...
透视透视!模拟器打开hhpok... 透视透视!模拟器打开hhpoker,哈糖大菠萝辅助器,手册教程(本来有挂)-哔哩哔哩1、超多福利:超...
透视德州版!hardrock辅... 透视德州版!hardrock辅助(透视)开挂辅助插件(确实有挂)-哔哩哔哩1)hardrock辅助辅...