nf_conntrack模块导致服务器Drop Packet

前言

系统日志中发现 nf_conntracck: table full,dropping packet信息(服务器为GP数据库)
这说明系统接到了大量的连接请求,但是系统的连接跟踪表已经满了,无法再记录新的连接了。这时候,系统会丢弃新的连接请求。
然后对nf_conntracck: table full,dropping packet 的报信息在GP官方文档中也有出现
需要在操作系统层面对netfilter.ip_conntrack_max的值进行修改
net.ipv4.netfilter.ip_conntrack_max= “x”

排查

GP数据库集群中有部分服务器均有如下报错

cat /var/log/message | grep nf

nf_conntrack模块导致服务器Drop Packet

分析丢包原因:服务器访问量过大,内核iptables的跟踪表 nf_conntrack 相关参数配置不合理,导致 IP 包被丢掉,tcp连接无法建立

 

方法一:不推荐

根据实际环境调整如下参数

net.netfilter.nf_conntrack_max 最大跟踪连接数 默认为65536

永久修改其配置参数:在 /etc/sysctl.conf添加
net.netfilter.nf_conntrack_max = 508576即可 (范围值之内)

保存退出 sysctl -p

max值需不断调优,当一直丢包之后适量调大

生产环境我们调整到了200w还是会drop packet

方法二:推荐

nf_conntrack模块导致服务器Drop Packet

卸载模块的话依赖非常难搞,比如图中框中的依赖模块数量,有的290个,所以需要执行如下指令:

yum -y install iptables-services
systemctl start iptables
systemctl stop iptables
lsmod | grep iptables
yum -y remove iptables-services
lsmod |  grep  nf_conntrack

执行完毕后会出现两种情况

  • nf_conntrack模块直接消失(如下图)

 

nf_conntrack模块导致服务器Drop Packet

  • 如果不是上图中的,则按照下列命令执行(具体还要看模块名称)

 

modprobe -r nf_conntrack_ipv4 && modprbe -r xt_conntrack

如有任何问题,可添加主页微信进行沟通进行支持 

Wx:Air_WX_

QQ:2469329338

 

红帽官方文档:

ip_conntrack or nf_conntrack : table full, dropping packet 
https://access.redhat.com/solutions/8721

原创文章,作者:AIRF,如若转载,请注明出处:http://www.ai-rf.com/index.php/2023/06/19/nf_conntrack%e6%a8%a1%e5%9d%97%e5%af%bc%e8%87%b4%e6%9c%8d%e5%8a%a1%e5%99%a8drop-packet/

赞 (0)
AIRFAIRF
上一篇 2023年6月16日
下一篇 2023年6月21日

相关推荐

  • 记录网站被长时间CC攻击处理方法

    背景描述 2023年8月15日下午4点网站无法正常打开,CPU、内存、负载均100%爆满,我一台服务器上有7.8个web服务,其中只有两个是动态的也就是用到了php服务,分别是ht…

    Linux系统 2023年8月16日
  • 1秒揪出内存大户!Linux运维必备

    百万级并发服务的救星,快速定位吞噬内存的进程! 作为开发者或运维工程师,你是否经历过这些场景: 服务器内存突然飙红告警 😰 关键服务运行越来越卡却找不到原因 🐌 top命令看花眼也…

    2025年7月8日
  • 使用NIM Server网络半自动安装AIX系统

    一、NIM配置 1.安装NIMServer前准备 1.1.配置IP地址 # ifconfig –a #检查当前IP地址# # smitty mktcpip #设置IP地址# 选择第…

    C&C++&C# 2021年11月21日
  • Linux ls 命令提示 Input/output error

    一.问题描述 某一台跑批服务器硬盘无法正常读写,提示input/output error,服务器每天均需使用,询问情况后发现服务器首先为硬盘故障,更换硬盘后提示此错误(RAID已正…

    Linux系统 2021年11月21日
  • 探索与筑梦:人工智能射频设计平台

    连接智能与频谱的未来:为什么我们要创立这个人工智能射频设计平台 在当今科技爆炸的时代,有两个看似独立却正在发生剧烈碰撞的领域:人工智能(AI) 与 射频(RF)技术。 从智能手机到…

    Linux系统 2024年6月15日
  • 使用三剑客(awk,sed,grep)过滤目录权限

    例:将/目录下etc目录的权限转换成数字输出 方法1 stat /etc | sed -n ‘4p’ | cut -d “(” -f2 | cut -d “/” -f1 方法2 s…

    Linux系统 2022年10月5日
  • LVM 缩减 / 根目录导致的开机错误

    前景描述 给服务器lv_var扩容,没空间扩容,于是将lv_root由200G缩小至100G,几分钟后,服务器告警,ping状态变为停止,于是登陆服务器管理口远程查看 报错过程 发…

    Linux系统 2022年9月25日
  • 使用三剑客(grep,sed,awk)获取IP地址

    例一:将系统用ifconfig命令列出的信息中ens33的IP地址打印出来 自用方法1(简单实用): ifconfig ens33 | grep 'inet' …

    Linux系统 2022年10月5日
  • linux系统启动流程

    按下系统的电源开关,过一会就可以看到Linux的登录界面了。 你是否曾经想过,从按下电源开关到登录界面出现,这后面到底发生了什么? Linux 系统在启动过程中,首先是固件(PC …

    Linux系统 2022年10月6日
  • Linux Shell巡检脚本

    系统一键巡检脚本: #!/bin/bash # -*- coding:utf-8 -*- echo -e “\033[31m >>>>>>&gt…

    2023年6月2日

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注