百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

项目出现“打开的文件过多”异常的解决思路

nanshan 2024-11-17 00:16 16 浏览 0 评论

在Linux环境下,当我们的项目运行一段时间之后,系统就不能正常访问了。本文以一个实际的案例来做一个剖析。

本案例是一个基于SpringBoot框架开发的项目网站系统,部署在centos操作系统下,网站运行一段时间之后,访问网页就长时间没有响应结果。

1、从现象中确定问题是什么

当项目出现这个问题之后,我们第一步需要确定问题到底是什么。我们通过查看项目日志,在日志中发现了下面异常信息:

java.io.IOException: 打开的文件过多
at sun.nio.ch.ServerSocketChannelImpl.accept0(Native Method) ~[na:1.8.0_352]
at sun.nio.ch.ServerSocketChannelImpl.accept(ServerSocketChannelImpl.java:421) ~[na:1.8.0_352]
at sun.nio.ch.ServerSocketChannelImpl.accept(ServerSocketChannelImpl.java:249) ~[na:1.8.0_352]
at org.apache.tomcat.util.net.NioEndpoint.serverSocketAccept(NioEndpoint.java:547) ~[tomcat-embed-core-9.0.65.jar:9.0.65]
at org.apache.tomcat.util.net.NioEndpoint.serverSocketAccept(NioEndpoint.java:79) ~[tomcat-embed-core-9.0.65.jar:9.0.65]
at org.apache.tomcat.util.net.Acceptor.run(Acceptor.java:129) ~[tomcat-embed-core-9.0.65.jar:9.0.65]
at java.lang.Thread.run(Thread.java:750) [na:1.8.0_352]

2023-07-09 04:41:38.675 ERROR 53912 --- [o-8081-Acceptor] org.apache.tomcat.util.net.Acceptor      : Socket accept failed
java.io.FileNotFoundException: /website/css/common.css (打开的文件过多)
at java.io.FileInputStream.open0(Native Method) ~[na:1.8.0_352]
at java.io.FileInputStream.open(FileInputStream.java:195) ~[na:1.8.0_352]
at java.io.FileInputStream.<init>(FileInputStream.java:138) ~[na:1.8.0_352]
at java.io.FileInputStream.<init>(FileInputStream.java:93) ~[na:1.8.0_352]

从异常信息中,我们可以确定问题是项目打开的文件数量超出了系统设定的上限

2、分析为什么出现这样的问题

项目打开的文件数量为什么会超出系统设定的限额?这个问题我们进行一下拆解,可以细化为下面两个问题:

1、打开文件太多可能会导致什么问题呢?

  • 内存溢出:如果打开的文件太多,占用了大量的内存,可能会导致内存溢出。
  • 文件描述符不足:在 Linux 系统中,每个进程可打开的文件描述符是有限的。当打开的文件超过系统限制时,再尝试打开文件就会失败。
  • IO 异常:当打开的文件太多时,可能会引起 IO 异常。

2、项目为什么会打开过多的文件?

  • 程序打开文件后没有进行关闭
  • 程序并发打开过多

程序打开文件后没有进行关闭的导致项目运行一段时间之后,出现打开的文件过多的可能性最大。因为项目打开了文件没有关闭,打开的文件肯定会越来越多,从而超出了系统设定的限额。这也是开发者最容易犯下的错误。

3、提出问题的解决思路

通过上面的分析,我们如果只是系统设定限额太低,那很简单,只需要通过提高限额就可以了。使用下面的命令,可以查看系统设定的限额。

ulimit -n

如果需要增加该限额,可以修改系统配置即可:

vim /etc/security/limits.conf  
# 添加或者修改下面两个配置,数字即为限额  
* soft nofile 4096  
* hard nofile 4096 

如果是程序打开文件没有进行关闭,如果我们通过分析代码,是很难快速定位的。我们可以通过下面的步骤来解决问题。

首先通过lsof命令来查看打开文件的情况。为提高效率,我们通过下面的方式先查找到项目的进程ID。查看项目的进程ID,有多种方式。假设项目的启动文件名包含"cms",我们执行下面的指令,会打印出项目的进程ID。

ps aux | grep cms | grep -v grep | awk '{print $2}'
23223

然后执行使用下面的指令(23223为上面指令的结果)就可以查看打开了多少文件。

lsof | grep 23223 | wc -l

如果这个文件数确实非常大,而且在不断的增加,那么可以执行下面的命令查看具体打开了些什么文件。

lsof -p 23223 | grep '/website/' | grep -v '\.jar'

指令 lsof -p 23223 的结果列出进程打开了哪些文件。然后过滤出项目文件夹(假设项目部署在/website)下不包含.jar的其他文件。之所以排除.jar文件,因为那些文件都是项目的程序文件,是必须的。当然如果文件还是挺多,那么你可以使用相同的方法把其他的文件排除掉,例如 .css 和 .js 等,这样让显示的文件范围更加精准。

比如结果中出现很多的 .pdf 文件,那就说明我们的程序中打开 .pdf 文件的地方肯定是打开文件而忘记了关闭。

相关推荐

Centos7虚拟机安装及网络配置(二)

#二、centos7的网络配置-Nat模式NAT模式也是VMware创建虚拟机的默认网络连接模式。使用NAT模式网络连接时,VMware会在主机上建立单独的专用网络,用以在主机和虚拟机之间相互通信。虚...

网络分析shell脚本(实时流量+连接统计)

介绍一个强大的分析网络的shell脚本,此脚本是从EZHTTP拆分出来的,觉得有必要单独介绍下。脚本运行效果截图:此脚本包含的功能有:1、实时监控任意网卡的流量2、统计10秒内平均流量3、统计每个端口...

Centos之Could not retrieve mirrorlist解决方案

Centos之Couldnotretrievemirrorlist解决方案:vi/etc/sysconfig/network-scripts/ifcfg-你的网卡名字修改:ONBOOT=ye...

一文掌握!VirtualBox 中 Rock9.x(Linux)网络配置全攻略

一、前言记得我有一篇文章《必看!VirtualBox中Centos7(Linux)网络配置全攻略》讲的非常明细,但是因为CentOS已经停止维护了,可能很多人都不想继续学CentOS,我也是一样,...

CentOS 6.0 设置IP地址、网关、DNS

在做任何操作之前先备份原文件,我们约定备份文件的名称为:源文件名称+bak,例如原文件名称为:centos.txt那么备份文件名称为:centos.txtbak引言:linux的网卡IP地址是存放在文...

Linux CentOS 基础操作(centos怎么操作)

简介:养成学习Linux的好习惯,第一是多查看manpage(manual)等帮助文档和利用好Tab键;第二是掌握好一些快捷键,比如ctrl+c(停止当前进程),ctrl+r(查看命令历史)...

Linux抓包王者技能!这条命令直接封神,教你精准定位网络问题

在网络故障排查和性能调优中,抓包是一项必不可少的技能。对于Linux环境下的网络工程师和运维人员来说,掌握高效抓包方法至关重要。而要说“抓包界的王炸”,那非tcpdump莫属!今天,我们不仅要介绍...

「干货」如何在 Linux 上划分VLAN?

在某些场景中,我们希望在Linux服务器(CentOS/RHEL)上的同一网卡分配来自不同VLAN的多个ip。这可以通过启用VLAN标记接口来实现,但要实现这一点,首先必须确保交换机上添加多个vl...

CentOS 8 网络配置实战教程:静态IP、路由与DNS设置

一、配置前准备1.查看当前网络信息#查看所有网络接口nmclidevicestatus#查看指定网卡信息(假设网卡名为ens192)ipaddrshowens192#查看路由...

Debian10.7修改网络配置(debian怎么配置网络)

简介:关于Debian获取IP地址的方法主要有两种,动态获取和静态设置。在配置网络之前先要知道Debian的网卡名称是什么,Debian可通过命令#ipa查看网卡名称。本文主要通过介绍Debian...

巧用SSH转发功能深入穿透内网(ssh转发udp)

ssh能够提供客户端到服务端的加密传输,当http、ftp等协议被防火墙所拦截时,可以考虑使用SSH的端口转发功能,将其它TCP端口的网络数据通过SSH连接来转发。转发方式一共有三种,分别是:动态转发...

CentOS Linux 7 的IP地址配置(centos7.4配置ip地址)

前段时间有位朋友,在一台PC机上安装了CentOSLinux7系统,因为要接入局域网,需要配置IP地址和默认网关信息。于是参照一本Linux教程上编辑网卡配置信息的方法,输入:vim/etc/s...

教你如何在 Linux 上划分VLAN(linux怎么分区详解)

在某些场景中,我们希望在Linux服务器(CentOS/RHEL)上的同一网卡分配来自不同VLAN的多个ip。这可以通过启用VLAN标记接口来实现,但要实现这一点,首先必须确保交换机上添加多个vl...

打通数据高速公路:如何在 CentOS 上使用 Thunderbolt 3 和 4

Thunderbolt3与4是现代高速外设连接的代表,带来了40Gbps的惊人带宽,支持数据、视频、音频与供电的“四合一”功能,尤其在专业视频编辑、科研计算、虚拟化扩展等领域具有巨大价值...

VMware 虚拟机 CentOS7 桥接模式静态 IP 配置全攻略

虚拟机桥接模式原理配置成桥接网络连接模式的虚拟机就当作主机所在以太网的一部分,虚拟系统和宿主机器的关系,就像连接在同一个Hub上的两台电脑,可以像主机一样可以访问以太网中的所有共享资源和网络连接,可以...

取消回复欢迎 发表评论: