星空网 > 软件开发 > 数据库

企业生产环境集群稳定性

在企业生产中,集群一旦运行,是要尽可能的将损失降到最低,现在所有的大数据技术都有HA,spark的、Hadoop的、HBase的等等,

HA分冷备和热备,热备是集群自带的,冷备就是硬件的。

这样一种情况:晚上了,人睡着了,突然的大数据量来了,集群崩了,HA启动了另一台备用节点,然而数据量依然很大,另一台也崩了,好吧集群废了?

咋办?

这就是冷备的需要,进程掉了,在服务器运行的情况下:

有一种机制可以启动进程服务,crontab+shell

五分钟之内检查进程情况,没有启动(时间自定义)

#!/bin/bash# author:loongab=`jps | awk '{print $2=="RunJar"}'`res=0OLD_IFS="$IFS" IFS=" " arr=($ab) IFS="$OLD_IFS" for s in ${arr[@]} do   if [ "$s" = "1" ]  then    ((res++))  fi doneecho $resif [ $res \> 0 ]then  echo "进程存在"else  echo "进程不存在"  hive --service metastore &fi

本脚本以hive进程测试成功

企业生产环境集群稳定性

是想,生产环境下,上述情况是不是可以缓解,脚本写日志文件处理是不是也可以。




原标题:企业生产环境集群稳定性

关键词:

*特别声明:以上内容来自于网络收集,著作权属原作者所有,如有侵权,请联系我们: admin#shaoqun.com (#换成@)。

亚马逊新品怎样上首页?:https://www.ikjzd.com/articles/106632
锂离子电池盛销海外,行业报告数据详解!:https://www.ikjzd.com/articles/106633
Lazada备战9.9大促推新功能 / Shopee更新国际退货规则:https://www.ikjzd.com/articles/106636
马云退休前,亲自给阿里接过哪些“国际单子”?:https://www.ikjzd.com/articles/106637
美工狗和设计师的天堂?Merch by Amazon账号详解!:https://www.ikjzd.com/articles/10664
旺季秋后算账?姐夫封完号又删评论?:https://www.ikjzd.com/articles/106644
怪物在游轮上复活的电影 怪物在游轮上复活的电影叫什么:https://www.vstour.cn/a/411230.html
在线旅游如何选择更优惠的旅游产品?:https://www.vstour.cn/a/411231.html
相关文章
我的浏览记录
最新相关资讯
海外公司注册 | 跨境电商服务平台 | 深圳旅行社 | 东南亚物流