两台核心交换机之间可以ping通，三层IP连通正常，但跨设备业务流量无法转发，业务不通。

这个难搞的故障其实从6月22就开始了，当时我们去测试了一下，发现串网了，广电的网接入到客户的内网了，一直发DHCP数据包，但是我们所有用户和核心都是静态IP，测试两台核心交换机之间可以ping通，三层IP链接正常，业务就是不通。

今天客户再次要求排查解决这个问题，今天下午2点，我们抵达客户，先说明一下组网结构和排查过程：

下图是客户的组网构成

今天下午到了，测试了一下，广电的网依然在客户的内网中串网，由于广电的人没来，我们先自己测试：

1.一开始我们从客户电脑ping总核心的网络是不通的，我们先把分核心交换机上的所有网线都拔了，只留光猫上的VLAN1的电口，用于连接用户端，光猫上的VLAN2的电口，用于连接核心交换机，这样测试下来，ping的值正常了，但是业务还是不通。

2.我逐个插回交换机，想知道哪根线会导致连Ping都Ping不通，折腾了半个多小时，挨根线测试，没发现环路，目前ping都正常，但是业务依旧不通。

3.我们联系了广电的人来排查串网的问题，远程登录发DHCP包的路由器，确认是广电的网串进来了，从路由器名字上得知了这个路由器的位置，我们开车前往这个路由器的地方，到了地方发现组网混乱，乱插一通，我们纠正了错误的组网，之后在用户侧，ping分核心交换机的IP竟然不通了，留我同事在这里，我回到分核心交换机那边进行对ping测试。

4.我回到了分核心交换机这一端，拔下所有网线，只留光猫的VLAN1和VLAN2的网线以及到客户电脑的网线,同事ping我的电脑和分核心交换机都不通，然后把客户电脑直连光猫1口，也就是用户端那个口，甩开交换机测试，能互相ping通（其实这一点我没想明白，其实我的电脑开着WIN10防火墙的，按理说不通的），把交换机上的其他设备也直接接入光猫测试，也通，感觉像是交换机坏了？

5.为了验证交换机坏没坏，我找来一个路由器替代交换机的三层功能，和第4步一样，分别对ping，竟然全通，此刻，我们真的以为交换机坏了，找用户在总核心交换机那边查看业务数依然是0，业务还是不通。

6.用路由器替代交换机业务依然不通，交换机可能没坏，我重启了光猫和交换机之后我逐个把网线接回交换机，其中有一个22口的网线接触不太好，就先没接，因为22年遇到过因为网线接头不良，一直提示up down up down导致客户业务不正常的问题。全部接回以后，我和同事对Ping测试，发现我这边从分核心交换机下的电脑ping他都正常，仔细一看我的电脑防火墙没关，我关闭了防火墙让他再ping，业务就正常了。

登录交换机web页面查看日志，这个22口也是一直up down来回折腾，怀疑是这个导致的交换机虽然能ping通，猜测已经属于半瘫痪状态。

最后找到22口网线，给客户做了标记。

交换机那头直接剪了不要了。

写的很乱套，总结，就因为这个网线头接触不良，导致日志一直有，交换机业务不能正常用，剪了这根线，并重启交换机后正常。