“记录一次AD影响导致应用发布卡慢故障”
  

新手718116 5224

{{ttag.title}}
本帖最后由 新手718116 于 2020-12-5 13:35 编辑

一.项目背景:

AD上架放置在出口,内网上网正常,外网有四条线路,分别是移动,联通,电信,政务网,上架之后,客户反馈上网正常,但是发布的app打开新闻内容等视频会有明显的延迟甚至部分内容打不开的情况,抓ping包都是正常的,公网ping AD的WAN口地址,会有不同程度的丢包。

782495fcb199ba1d01.png

862675fcb17d1bd070.png

二.分析:

1)一开始抓接口的包时,发现ping包均正常,怀疑是运营商链路问题,于是切换回原设备,发现访问正常,然后继续排查。

2)二次在接口抓包,发现数据包的标志位均带有S标志,即SYN,所以分析认为是内网某安全设备拦截,但是原设备是不会拦截,我们自己的设备被拦截,所以排查我们设备的问题

757745fcb18b7e5414.png

678045fcb19b4b1fec.png

845425fcb19bfc12ef.png

分析以上数据包能看出来,安全设备和AD设备的LAN口在连接时发送了Reset标志位的数据包,由此得知AD设备LAN口IP是被安全设备拦截下来了,那么回到AD设备上看地址转换的配置。

982815fcb1aad005bb.png

74135fcb1add69784.png

分析这两条策略,无论是从哪里进来的流量在访问内网时均被转换为AD的内网口地址,由AD内网口地址去代理访问app服务。然后此ip由于数据流过大,被安全设备当做攻击给拦截了下来。

三.解决

1)关闭此策略后,再次进行测试,app和其他所有服务均正常。

2)或者优化此策略,只进行双向地址转换,WAN口方向进来的数据流源地址不进行转换。

打赏鼓励作者,期待更多好文!

打赏
47人已打赏

小猪要上树 发表于 2020-12-18 17:18
  
感谢楼主的分享,看似简单的分析,其实是需要一些功底和经验的,很值得大家学习,ad部署在出口的时候,做虚拟服务,如果有做snat确实会导致被安全设备识别成ddos,其实做出口路由,虚拟服务没必要做snat,因为一般网络的默认路由都是往出口丢的,服务器回包肯定是要经过出口的ad设备
dalichen 发表于 2020-12-23 23:25
  
感谢楼主的分享,网络排障的功底很足,大家要注意的AD的一个常用场景,即经常AD会对互联网请求做SNAT,会被安全设备拦截,所以又这块配置时要特别注意安全设备的拦截策略。
总结下常见的上网慢的因素给大家参考
一、设备相关因素
设备性能不足,如CPU、内存、系统并发连接过高导致数据处理异常。
硬件网口或模块异常,如光口兼容性导致收发数据丢包、速率协商不稳定。
策略配置不合理,出口链路流量满载,丢包延迟。
二、环境因素
出口ISP链路质量,如链路带宽虚标,承载一定流量出现丢包。
第三方设备干扰,如流控限速、安全策略封锁。
内部或外部异常,如物理带宽瓶颈、链路带宽、内网中毒和外网攻击等因素。
跨运营商访问资源慢,如二级运营商链路访问移动资源丢包或无法访问情况。
灵峰气韵 发表于 2020-12-5 13:37
  
流量大就会有被拦截的风险吗
Jean_Zhj 发表于 2020-12-7 09:19
  
很有借鉴经验,打卡学习。
icorgi 发表于 2020-12-7 09:21
  
感谢分享
新手260505 发表于 2020-12-7 09:22
  
打开了新思路的大门,楼主加油哦
lingling 发表于 2020-12-7 09:26
  

感谢分享
新手031815 发表于 2020-12-7 09:26
  
楼主加油哦
ie5000 发表于 2020-12-7 09:31
  
感谢分享
新手612152 发表于 2020-12-7 09:35
  
很有借鉴经验
新手518283 发表于 2020-12-7 09:44
  
学习到了
发表新帖
热门标签
全部标签>
每日一问
技术盲盒
技术笔记
干货满满
信服课堂视频
功能体验
GIF动图学习
标准化排查
产品连连看
新版本体验
每周精选
2023技术争霸赛专题
自助服务平台操作指引
秒懂零信任
技术晨报
技术咨询
安装部署配置
答题自测
通用技术
排障笔记本
社区帮助指南
在线直播
网络基础知识
玩转零信任
深信服技术支持平台
畅聊IT
专家问答
技术圆桌
MVP
升级
安全攻防
上网策略
测试报告
日志审计
问题分析处理
流量管理
每日一记
运维工具
云计算知识
用户认证
原创分享
解决方案
sangfor周刊
VPN 对接
项目案例
SANGFOR资讯
专家分享
技术顾问
信服故事
SDP百科
功能咨询
终端接入
授权
设备维护
资源访问
地址转换
虚拟机
存储
迁移
加速技术
产品预警公告
信服圈儿
S豆商城资讯
技术争霸赛
「智能机器人」
追光者计划
答题榜单公布
纪元平台
卧龙计划
华北区拉练
天逸直播
以战代练
山东区技术晨报
文档捉虫活动
齐鲁TV
华北区交付直播

本版达人

新手61940...

本周建议达人

zhao_HN

本周分享达人

ZSFKF

本周提问达人