科思哲 发表于 2023-11-7 10:35
  
感谢楼主分享,学习一下
会飞的小鱼 发表于 2023-12-18 17:54
  
有助于学习,感谢分享!!!!!!!!!!
951 发表于 2023-12-18 18:31
  
有助于学习,感谢分享!!!!!!!!!!
dhf 发表于 2023-12-19 10:09
  
每日打卡学习,感谢分享,学习了!!!
dhf 发表于 2023-12-29 10:06
  
每日打卡学习,感谢分享,学习了!!!
新手626351 发表于 2024-1-12 09:47
  
多谢楼主分享,学习了
新手719320 发表于 2024-2-26 09:37
  
感谢楼主分享,学习一下
【AD】时间戳导致虚拟服务业务异常
  

chenx 88342人觉得有帮助

{{ttag.title}}
一.问题描述:
客户反馈AD虚拟服务业务系统无法访问,节点池状态异常

二.处理过程:
1、远程查看发现业务系统对应的节点池状态有不停故障的情况。 端口是正常的,能到输入密码的界面;


2、进入设备后台随机挑选一个故障节点10.202.7.9,抓包发现tcp连接建立异常,设备发起syn以后,后端服务器没有应答;


3、沟通了解到AD负载设备到服务器中间是二层的,排除网络问题,且服务器上应用状态是正常的。怀疑可能是时间戳问题导致;

4、AD网口上增加浮动ip地址,扩大业务访问的源地址范围,业务状态没有明显改善。

5、协调客户在业务服务器上执行netstat -s |grep reject,结果如下,确实有由于时间戳拒绝tcp连接的情况。


6、开始是打算让业务服务器上关闭时间戳的校验功能,但是后面客户反馈应用那边要求开启。最终建议在AD上调整四层虚拟服务的tcp策略,时间戳动作为抹除。作用是如果客户端的请求携带时间戳,在AD设备snat后往服务器转发的时候抹除掉时间戳的参数。


调整以后观察测试业务访问恢复正常

三.根因
应用服务器上开启了校验时间戳的策略,tcp_tw_recycle/tcp_timestamps都开启的条件下,同一源ip主机的socket connect请求中的timestamp必须是递增的。服务器收到的请求校验时间戳的时候如果发现这个值没有大于前一个请求的值,就会拒绝掉这个syn请求,表现为服务器不应答syn请求。 服务器开启了时间戳,业务访问在snat的环境下,此类问题比较容易出现

四.解决方案
服务器上不开启时间戳校验,或者确保服务器收到的请求都不带时间戳,当前贵单位是通过AD的tcp优化策略抹除客户端的时间戳参数解决。

五.建议
AD配置虚拟服务时,询问客户业务服务器是否同时开启了tcp_tw_recycle/tcp_timestamps,如果同时开启,建议客户关闭tcp_timestamps,如客户由于业务原因不能关闭,可在AD的TCP优化策略里抹除时间戳。


打赏鼓励作者,期待更多好文!

打赏
30人已打赏

发表新帖
热门标签
全部标签>
西北区每日一问
安全效果
高手请过招
【 社区to talk】
干货满满
社区新周刊
每日一问
新版本体验
技术盲盒
技术咨询
产品连连看
纪元平台
标准化排查
GIF动图学习
功能体验
社区帮助指南
信服课堂视频
安装部署配置
解决方案
SDP百科
自助服务平台操作指引
玩转零信任
S豆商城资讯
秒懂零信任
每周精选
畅聊IT
答题自测
专家问答
技术笔记
技术圆桌
在线直播
MVP
网络基础知识
升级
安全攻防
上网策略
测试报告
日志审计
问题分析处理
流量管理
每日一记
运维工具
云计算知识
用户认证
原创分享
sangfor周刊
VPN 对接
项目案例
SANGFOR资讯
专家分享
技术顾问
信服故事
功能咨询
终端接入
授权
设备维护
资源访问
地址转换
虚拟机
存储
迁移
加速技术
排障笔记本
产品预警公告
信服圈儿
技术争霸赛
「智能机器人」
追光者计划
深信服技术支持平台
答题榜单公布
2023技术争霸赛专题
通用技术
卧龙计划
华北区拉练
天逸直播
以战代练
技术晨报
山东区技术晨报
文档捉虫活动
齐鲁TV
华北区交付直播
2024年技术争霸赛
北京区每日一练
场景专题
故障笔记
排障那些事
升级&主动服务
高频问题集锦
POC测试案例
全能先锋系列
云化安全能力

本版达人

新手61940...

本周建议达人

zhao_HN

本周分享达人

ZSFKF

本周提问达人