高防服务器丢包检测与定位
一、分层检测流程
- 链路层与主机侧快速体检
- 查看网卡与驱动统计：ifconfig/ethtool -S，关注RX-ERR、RX-DRP、RX-OVR、crc errors等是否持续增长；必要时用ethtool -g/-G调大Ring Buffer，用ethtool -a/-A检查/关闭流控以验证是否缓解。
- 检查系统策略与限速：ip/ifconfig 的dropped计数、是否有tc netem等模拟丢包或限速规则。
- 抓包定位传输层问题：tcpdump 抓取对应端口，观察retransmission、dup ack、RST等异常。
- 连接与内核统计：netstat -s 查看TCP retrans、超时、半开连接等。
- 路径层定位
- 多源多地向目标IP发起Ping/MTR长时采样，识别丢包集中跳与抖动节点；注意中间设备可能屏蔽ICMP，需结合TCP探测。
- 应用层与高防侧
- 用TCPing对业务端口做延迟/丢包探测，区分是清洗/黑洞还是后端问题；必要时短时绕过高防直连源站验证。
- 在控制台核查清洗/黑洞状态与事件，结合回源链路与访问控制策略排查。
以上步骤覆盖从网卡、协议栈到链路与高防节点的全链路排查路径。
二、关键命令与判读要点
| 检测项 | 命令示例 | 判读要点 |
|---|
| ICMP连通与丢包 | ping -c 100 1.2.3.4 | 丢包率>5%需深入；同时对比网关/内网/公网分段结果 |
| 路径逐跳定位 | mtr --report -c 100 1.2.3.4；traceroute -n 1.2.3.4 | 某跳持续丢包或延迟突增即可疑；注意ICMP被屏蔽不代表该跳无问题 |
| TCP端口可达 | tcping 1.2.3.4 80 | 能连但时延高/丢包，偏向后端/应用；完全不通看安全组/ACL/回源放行 |
| 网卡与驱动统计 | ifconfig eth0；ethtool -S eth0；ethtool -g/-G eth0 | RX-DRP/RX-OVR增长→Ring Buffer/CPU处理瓶颈；crc errors→物理介质/光模块 |
| 队列与限速策略 | tc qdisc show dev eth0；iptables -S | 发现netem丢包/限速或iptables DROP规则需先排除干扰 |
| 传输层异常 | netstat -s；tcpdump -i eth0 -w pkt.pcap 'tcp and port 80' | retrans/dup ack频繁→链路不稳或拥塞；RST→策略/防火墙拦截 |
| 高防状态核查 | 控制台查看清洗/黑洞；必要时绕过高防直连源站 | 清洗/黑洞会引入时延或丢包；直连可快速判定是否为高防侧问题 |
以上命令覆盖常用检测手段与关键指标判读。
三、高防场景的专项排查
- 先判定是否为防护策略或节点异常
- 在控制台确认是否处于清洗/黑洞；清洗阶段可能出现卡顿/时延增加，黑洞则外部流量被丢弃。
- 使用TCPing分别测试被攻击端口与未被攻击端口；若“仅受攻击端口异常”，多为清洗策略过严；若“所有端口均异常”，多为后端/链路问题。
- 参考时延基线：如DDoS高防（中国内地）中国内地用户约73–113ms、非内地约313ms；若远超，结合MTR定位异常节点并确认是否为高防后端或清洗事件所致。
- 回源链路与访问控制
- 对SLB/ECS/非云主机分别用TCPing验证端口可达；检查安全组/ACL/安全软件是否误拦截高防回源IP段；确认源站IP未暴露。
- 应急与恢复
- 业务紧急时可短时绕过高防直连源站；若进入黑洞，使用黑洞解封（常见配额如每日5次）并同步优化防护策略。
以上流程有助于在高防介入后快速区分“防护行为”与“真实网络/后端故障”。
四、常见现象与处理建议
- 仅ICMP丢包而TCP正常：多为中间节点屏蔽ICMP，用TCPing/MTR的TCP模式与tcpdump交叉验证。
- 某一跳持续丢包或延迟突增：联系对应运营商/机房核查该节点；跨运营商链路优先升级至优化线路（如CN2 GIA）或启用BGP多线/专线。
- 网卡统计RX-DRP/RX-OVR增长：优先增大Ring Buffer（ethtool -G）、检查中断亲和/CPU负载、关闭或调优流控；若crc errors增长，检查网线/光模块/光纤接触。
- 抓包见大量重传/dup ack：链路拥塞/抖动或MTU不匹配；尝试调大MTU/路径MTU发现并优化窗口与队列。
- 安全策略导致丢包：排查iptables/tc规则、连接跟踪与回源IP放行；清理测试用的随机丢包/限速规则。
- 高并发/带宽打满：升级至独享带宽、启用CDN/DCDN/GTM分担源站压力，避免共享出口拥塞。
以上对策覆盖从链路、设备到策略配置的常见根因与修复方向。
