#原创分享#【超融合】超融合平台意外断电主机离线的处理过程及后续预防
  

灵峰气韵 3912

{{ttag.title}}
问题现象:
超融合平台意外断电,重启后发现有两台主机离线了如下图
问题原因及解决步骤:
首先查验保证业务系统正常后,开始排查离线原因:1、没启动;2、网口坏了;3、网线没接好;4、连接的管理交换机有问题。
1、接上kvm后发现两台主机均已启动:
2、查看网口发现其中一台的网口都亮,排除断电导致网口坏了的可能,另外一台的发现是管理口不亮,难道真是坏了?
3、找个笔记本接到设备设备上一体机IPMI接口默认出厂IP为: 1*2.1**.1*.1*,电脑直连IPMI接口,在浏览器地址里面输入地址即可登录默认用户名密码均为**进去发现日志里没有啥异常
4、接笔记本配置同网段的地址1*2.1*8.1**.xx,ping发现通,排除了网口坏的可能,返厂的话那多麻烦。管理交换机上的口当时聚合的,同时坏的可能性不大。
5、把两台服务器的网线都重新插拔了一下,服务器重启了一遍发现还是不亮,定位到管理交换机的问题
6、找技术查找管理交换机的保留地址19口进去看看配置,http://1*2.1*8.1.*默认用户名密码均为**
7、根据标识找到连接两台主机对应的管理交换机上的口,21和22号口对应的那台不亮的交换机,发现口自动注销了,重新UP下,一台恢复正常。
9和10号口对应那台亮的交换机,发现9口10口所在的聚合口VLAN配置的是200,而我之前明明是100,估计是上次扩容配置完后没有重启交换机配置没保存,这次意外重启后配置初始了,找到原因就好办了,把9,10口的VLAN改成100后,也恢复正常,所有灯都正常。

8、最后将飘到其他服务器上的虚拟机再分配下,迁到之前离线的两台主机上
完事!


建议与总结:
  因业务需要对网络设备有配置调整的时候一定一定一定要保存write-exit配置后退出,条件允许的情况下重启相关设备检验下是否生效,以确保万无一失。
为防止再次过载意外断电,单独把超融合平台的线路剥离出来接到UPS上。
有问题不要慌及时联系400-630-6430(感谢有你,比心!)

打赏鼓励作者,期待更多好文!

打赏
5人已打赏

不懂就问 发表于 2020-6-14 15:18
  
感谢分享!楼主的排错思路很清晰,由硬件到软件,一层一层进行排查,可以清晰定位到问题。最后对问题也进行了总结,避免下次踩同样的坑。搞这行,就需要这种精神,一点一滴积累。向楼主学习。
nettman 发表于 2020-6-8 08:51
  
感谢楼主分享!
新手520146 发表于 2020-6-8 22:46
  
谢谢提醒,改完配置一定要保存
新手520146 发表于 2020-6-10 11:47
  
过载的插排自动断电 还是要引起重视的 UPS、单独线路安排!
TCN 发表于 2020-6-10 12:04
  
学习到了,配置变动后记得保存是个好习惯
Sangfor_闪电回_朱丽 发表于 2020-6-10 18:31
  
您好,您的文章已被收录到计划中,交由专家评审小组评审,文章标签在专家评审后设置,S奖励预计在一周后到账,其他奖励在活动结束后统一安排发放!发文越多,奖励越多,期待您更多的精彩文章哦!:感恩:
点击查看本季原创文章奖励榜单:http://bbs.sangfor.com.cn/forum.php?mod=viewthread&tid=103115
陈氹 发表于 2020-6-10 22:16
  
不管是配置还是编辑文档,都要保存
新手806766 发表于 2020-6-12 14:54
  
谢谢分享
魅力长安 发表于 2020-6-17 17:28
  

缤纷618,福利送大家! +6 S豆 详情>

思路清晰,上次我这机房pdu不知道为啥直接炸了,交换机口也坏了
发表新帖
热门标签
全部标签>
技术盲盒
西北区每日一问
安全效果
干货满满
每日一问
【 社区to talk】
新版本体验
技术笔记
产品连连看
功能体验
技术咨询
GIF动图学习
标准化排查
2023技术争霸赛专题
每周精选
通用技术
信服课堂视频
秒懂零信任
技术晨报
安装部署配置
排障笔记本
自助服务平台操作指引
答题自测
原创分享
升级&主动服务
社区新周刊
POC测试案例
畅聊IT
专家问答
技术圆桌
在线直播
MVP
网络基础知识
升级
安全攻防
上网策略
测试报告
日志审计
问题分析处理
流量管理
每日一记
运维工具
云计算知识
用户认证
解决方案
sangfor周刊
VPN 对接
项目案例
SANGFOR资讯
专家分享
技术顾问
信服故事
SDP百科
功能咨询
终端接入
授权
设备维护
资源访问
地址转换
虚拟机
存储
迁移
加速技术
产品预警公告
玩转零信任
信服圈儿
S豆商城资讯
技术争霸赛
「智能机器人」
追光者计划
深信服技术支持平台
社区帮助指南
答题榜单公布
纪元平台
卧龙计划
华北区拉练
天逸直播
以战代练
山东区技术晨报
文档捉虫活动
齐鲁TV
华北区交付直播
2024年技术争霸赛
北京区每日一练
场景专题
故障笔记
排障那些事
高手请过招
高频问题集锦
全能先锋系列
云化安全能力

本版版主

189
299
979

发帖

粉丝

关注

217
288
151

发帖

粉丝

关注

25
13
5

发帖

粉丝

关注

7
11
24

发帖

粉丝

关注

5
7
7

发帖

粉丝

关注

31
34
45

发帖

粉丝

关注

本版达人

皮皮虾·真

本周建议达人

郑州网络

本周分享达人

二进制网络

本周提问达人