#原创分享#一次故障排查记录(最后知道真相的我眼泪掉下来)
  

静态路由 6858

{{ttag.title}}
没有拓扑都是耍流氓,先上组网图。


某公司:外联区为合作单位的网络,通过专线接入到我们系统,并且中间流量为ipsec加密封装。由于特殊原因,外联区合作单位某网络需要用到我们的互联网出口,全网跑的都是我的ID(静态路由)。所以业务流流向为,外联区通过ipsecvpn到内网防火墙,然后通过核心交换机,最后通过互联区出口防火墙AF接入互联网。

这套系统集团分公司自己维护,他们排查一阵没有发现原因,于是请求我方支援。昨天接到这个消息的时候,我还在社区Q群里聊得正嗨呢。

开始干活:
      客户这边访问很明确,外联区的172.16.X.X访问公网103.X.X.X的443端口,现在客户那边直接telnet端口不通。首先我想到的是先查配置,但是分公司的IT说配置肯定没问题。配置没问题那怎么会不通呢?那这样吧,我先不看配置,抓包看下吧。
      我分别在三个地方抓包了,外联区路由器,核心交换区核心交换机的下联口,以及上联口。
      抓包的时候,让客户从172.16.X.X访问公网103.X.X.X,分析数据走向。
外联区路由器抓包如下:
收到SYN了,说明已经收到外联区客户的发包了,但是没有回复SYN,ACK,继续往下抓包。

核心交换区下联口抓包如下:
同样的,收到SYN,说明数据包已经到到核心交换机下联口,但是没有回复SYN,ACK,继续往下抓包。

核心交换机上联口如下:
      这里发现线索了,在上联口这里,收到SYN,ACK了,但是就差最后的ack就能握手成功了。简单的理解,建立握手,数据包需要交换三次,也就是说172.X.X.X先要到103.X.X.X,然后回来172,最后在到103。结合三次抓包,可以分析出,数据包卡在了核心交换机这里,数据包是有去无回。
      那么是什么原因导致有去无回的呢?第一反应是不是没有加172.X.X.X的回程路由呢?话音刚落,分公司的小伙伴就说:“奥,对了,我核心交换机的回程172.X.X.X的路由忘记加了,上面的几个防火墙我都加了,平时核心动得少,一不小心都遗忘掉了。”
配上回程路由后,果然问题解决。
       工作久了,往往会遗忘掉最简单的操作,需要细心。抓包可以看现象背后的真相,是个好工具,希望大家都能多多分享自己的debug案例。

打赏鼓励作者,期待更多好文!

打赏
6人已打赏

西红柿煮番茄的猫 发表于 2024-6-19 10:19
  
感谢分享,学习一下~
阿威十八式 发表于 2024-5-26 09:38
  
每天坚持打卡学习签到!!
新手612152 发表于 2022-1-27 11:05
  
学到了  感谢楼主分享
এ塔铃独语别黄昏এ 发表于 2021-12-9 22:36
  

এ塔铃独语别黄昏এ


5、点击确认策略生效。配置完成。
JM 发表于 2021-9-25 00:53
  

能发个课程学习的视频就更好了
新手612152 发表于 2021-9-25 00:35
  
感谢分享,学习了,学习了
新手899116 发表于 2021-4-19 10:33
  
很全面,好多都是平时忽略和不知道的!
司马缸砸了光 发表于 2021-4-15 20:09
  
楼主分析的很清楚,对以后的工作有帮助。
新手741261 发表于 2021-4-14 10:37
  
感谢分享,学习了,学习了
发表新帖
热门标签
全部标签>
西北区每日一问
技术盲盒
安全效果
【 社区to talk】
技术笔记
干货满满
每日一问
信服课堂视频
新版本体验
GIF动图学习
技术咨询
功能体验
2023技术争霸赛专题
产品连连看
安装部署配置
通用技术
秒懂零信任
技术晨报
自助服务平台操作指引
原创分享
标准化排查
排障笔记本
玩转零信任
排障那些事
SDP百科
深信服技术支持平台
POC测试案例
畅聊IT
答题自测
专家问答
技术圆桌
在线直播
MVP
网络基础知识
升级
安全攻防
上网策略
测试报告
日志审计
问题分析处理
流量管理
每日一记
运维工具
云计算知识
用户认证
解决方案
sangfor周刊
VPN 对接
项目案例
SANGFOR资讯
专家分享
技术顾问
信服故事
功能咨询
终端接入
授权
设备维护
资源访问
地址转换
虚拟机
存储
迁移
加速技术
产品预警公告
信服圈儿
S豆商城资讯
技术争霸赛
「智能机器人」
追光者计划
社区帮助指南
答题榜单公布
纪元平台
卧龙计划
华北区拉练
天逸直播
以战代练
山东区技术晨报
文档捉虫活动
齐鲁TV
华北区交付直播
每周精选
2024年技术争霸赛
北京区每日一练
场景专题
故障笔记
高手请过招
升级&主动服务
高频问题集锦
社区新周刊
全能先锋系列
云化安全能力

本版版主

461
247
13

发帖

粉丝

关注

本版达人

feeling

本周分享达人

新手29676...

本周提问达人