百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

安装PostgreSQL你不可不知道的系统内核参数

nanshan 2024-10-20 07:35 20 浏览 0 评论

配置Linux内核参数

1. sysctl.conf

注意某些参数,根据内存实际大小进行配置

# vi /etc/sysctl.conf 
 
fs.aio-max-nr = 1048576 
fs.file-max = 76724600 
 
# 可选:kernel.core_pattern = /data01/corefiles/core_%e_%u_%t_%s.%p 
# /data01/corefiles 事先建好,权限777,如果是软链接,对应的目录修改为777 
 
kernel.sem = 4096 2147483647 2147483646 512000 
# 信号量, ipcs -l 或 -u 查看,每16个进程一组,每组信号量需要17个信号量。 
 
kernel.shmall = 107374182 
# 所有共享内存段相加大小限制 (建议内存的80%),单位为页。 
kernel.shmmax = 274877906944 
# 最大单个共享内存段大小 (建议为内存一半), >9.2的版本已大幅降低共享内存的使用,单位为字节。 
kernel.shmmni = 819200 
# 一共能生成多少共享内存段,每个PG数据库集群至少2个共享内存段 
 
net.core.netdev_max_backlog = 10000 
net.core.rmem_default = 262144 
# The default setting of the socket receive buffer in bytes. 
net.core.rmem_max = 4194304 
# The maximum receive socket buffer size in bytes 
net.core.wmem_default = 262144 
# The default setting (in bytes) of the socket send buffer. 
net.core.wmem_max = 4194304 
# The maximum send socket buffer size in bytes. 
net.core.somaxconn = 4096 
net.ipv4.tcp_max_syn_backlog = 4096 
net.ipv4.tcp_keepalive_intvl = 20 
net.ipv4.tcp_keepalive_probes = 3 
net.ipv4.tcp_keepalive_time = 60 
net.ipv4.tcp_mem = 8388608 12582912 16777216 
net.ipv4.tcp_fin_timeout = 5 
net.ipv4.tcp_synack_retries = 2 
net.ipv4.tcp_syncookies = 1 
# 开启SYN Cookies。当出现SYN等待队列溢出时,启用cookie来处理,可防范少量的SYN攻击 
net.ipv4.tcp_timestamps = 1 
# 减少time_wait 
net.ipv4.tcp_tw_recycle = 0 
# 如果=1则开启TCP连接中TIME-WAIT套接字的快速回收,但是NAT环境可能导致连接失败,建议服务端关闭它 
net.ipv4.tcp_tw_reuse = 1 
# 开启重用。允许将TIME-WAIT套接字重新用于新的TCP连接 
net.ipv4.tcp_max_tw_buckets = 262144 
net.ipv4.tcp_rmem = 8192 87380 16777216 
net.ipv4.tcp_wmem = 8192 65536 16777216 
 
net.nf_conntrack_max = 1200000 
net.netfilter.nf_conntrack_max = 1200000 
 
vm.dirty_background_bytes = 409600000 
# 系统脏页到达这个值,系统后台刷脏页调度进程 pdflush(或其他) 自动将(dirty_expire_centisecs/100)秒前的脏页刷到磁盘 
# 默认为10%,大内存机器建议调整为直接指定多少字节 
 
vm.dirty_expire_centisecs = 3000 
# 比这个值老的脏页,将被刷到磁盘。3000表示30秒。 
vm.dirty_ratio = 95 
# 如果系统进程刷脏页太慢,使得系统脏页超过内存 95 % 时,则用户进程如果有写磁盘的操作(如fsync, fdatasync等调用),则需要主动把系统脏页刷出。 
# 有效防止用户进程刷脏页,在单机多实例,并且使用CGROUP限制单实例IOPS的情况下非常有效。 
 
vm.dirty_writeback_centisecs = 100 
# pdflush(或其他)后台刷脏页进程的唤醒间隔, 100表示1秒。 
 
vm.swappiness = 0 
# 不使用交换分区 
 
vm.mmap_min_addr = 65536 
vm.overcommit_memory = 0 
# 在分配内存时,允许少量over malloc, 如果设置为 1, 则认为总是有足够的内存,内存较少的测试环境可以使用 1 . 
 
vm.overcommit_ratio = 90 
# 当overcommit_memory = 2 时,用于参与计算允许指派的内存大小。 
vm.swappiness = 0 
# 关闭交换分区 
vm.zone_reclaim_mode = 0 
# 禁用 numa, 或者在vmlinux中禁止. 
net.ipv4.ip_local_port_range = 40000 65535 
# 本地自动分配的TCP, UDP端口号范围 
fs.nr_open=20480000 
# 单个进程允许打开的文件句柄上限
 
net.ipv4.tcp_max_syn_backlog = 16384
net.core.somaxconn = 16384
 
# 以下参数请注意 
# vm.extra_free_kbytes = 4096000 
# vm.min_free_kbytes = 2097152 # vm.min_free_kbytes 建议每32G内存分配1G vm.min_free_kbytes
# 如果是小内存机器,以上两个值不建议设置 
# vm.nr_hugepages = 66536 
# 建议shared buffer设置超过64GB时 使用大页,页大小 /proc/meminfo Hugepagesize 
# vm.lowmem_reserve_ratio = 1 1 1 
# 对于内存大于64G时,建议设置,否则建议默认值 256 256 32 

2. 使配置生效

sysctl -p 

配置Linux资源限制

# vi /etc/security/limits.conf 
 
# nofile超过1048576的话,一定要先将sysctl的fs.nr_open设置为更大的值,并生效后才能继续设置nofile. 
 
* soft nofile 1024000 
* hard nofile 1024000 
* soft nproc unlimited 
* hard nproc unlimited 
* soft core unlimited 
* hard core unlimited 
* soft memlock unlimited 
* hard memlock unlimited 

最好再关注一下/etc/security/limits.d目录中的文件内容,会覆盖/etc/security/limits.conf的配置。

已有进程的ulimit请查看/proc/pid/limits,例如

Limit Soft Limit Hard Limit Units 
Max cpu time unlimited unlimited seconds 
Max file size unlimited unlimited bytes 
Max data size unlimited unlimited bytes 
Max stack size 10485760 unlimited bytes 
Max core file size 0 unlimited bytes 
Max resident set unlimited unlimited bytes 
Max processes 11286 11286 processes 
Max open files 1024 4096 files 
Max locked memory 65536 65536 bytes 
Max address space unlimited unlimited bytes 
Max file locks unlimited unlimited locks 
Max pending signals 11286 11286 signals 
Max msgqueue size 819200 819200 bytes 
Max nice priority 0 0 
Max realtime priority 0 0 
Max realtime timeout unlimited unlimited us 

如果你要启动其他进程,建议退出SHELL再进一遍,确认ulimit环境配置已生效,再启动。

配置Linux防火墙

(建议按业务场景设置,这里先清除全部规则)

iptables -F 
iptables -X

配置范例:

# 私有网段 
-A INPUT -s 192.168.0.0/16 -j ACCEPT 
-A INPUT -s 10.0.0.0/8 -j ACCEPT 
-A INPUT -s 172.16.0.0/16 -j ACCEPT 

SElinux

如果没有这方面的需求,建议禁用

## 临时生效
setenforce 0
## 永久生效方法,修改配置SElinux文件
# vi /etc/sysconfig/selinux 
 
SELINUX=disabled 
SELINUXTYPE=targeted 

关闭不必要的系统服务

chkconfig --list|grep on 

关闭不必要的, 例如

chkconfig iscsi off 

配置SSD盘的IO调度策略(注意区分grub1和grub2)

1、grub1代采用这种方法:加上前面的默认IO调度,如下:

如果所有盘都是SSD,可以这样。

vi /boot/grub.conf 
 
elevator=deadline numa=off transparent_hugepage=never 

2、如果只是某些盘是SSD,那么只对这些盘设置为deadline。或者如果用的是grub2:

chmod +x /etc/rc.d/rc.local 
vi /etc/rc.local 
 
# 追加 
 
echo deadline > /sys/block/vda/queue/scheduler 
echo deadline > /sys/block/vdb/queue/scheduler 
# 其他盘, ...... 

关闭透明大页

1、grub1代采用这种方法:加上前面的默认IO调度,如下:

vi /boot/grub.conf 
 
elevator=deadline numa=off transparent_hugepage=never 

2、grub2代,可以使用rc.local。

chmod +x /etc/rc.d/rc.local 
vi /etc/rc.local 
 
# 追加 
 
if test -f /sys/kernel/mm/transparent_hugepage/enabled; then 
echo never > /sys/kernel/mm/transparent_hugepage/enabled 
fi 

立即生效:

echo never > /sys/kernel/mm/transparent_hugepage/enabled 
 
cat /sys/kernel/mm/transparent_hugepage/enabled 
always madvise [never] 

相关推荐

0722-6.2.0-如何在RedHat7.2使用rpm安装CDH(无CM)

文档编写目的在前面的文档中,介绍了在有CM和无CM两种情况下使用rpm方式安装CDH5.10.0,本文档将介绍如何在无CM的情况下使用rpm方式安装CDH6.2.0,与之前安装C5进行对比。环境介绍:...

ARM64 平台基于 openEuler + iSula 环境部署 Kubernetes

为什么要在arm64平台上部署Kubernetes,而且还是鲲鹏920的架构。说来话长。。。此处省略5000字。介绍下系统信息;o架构:鲲鹏920(Kunpeng920)oOS:ope...

生产环境starrocks 3.1存算一体集群部署

集群规划FE:节点主要负责元数据管理、客户端连接管理、查询计划和查询调度。>3节点。BE:节点负责数据存储和SQL执行。>3节点。CN:无存储功能能的BE。环境准备CPU检查JDK...

在CentOS上添加swap虚拟内存并设置优先级

现如今很多云服务器都会自己配置好虚拟内存,当然也有很多没有配置虚拟内存的,虚拟内存可以让我们的低配服务器使用更多的内存,可以减少很多硬件成本,比如我们运行很多服务的时候,内存常常会满,当配置了虚拟内存...

国产深度(deepin)操作系统优化指南

1.升级内核随着deepin版本的更新,会自动升级系统内核,但是我们依旧可以通过命令行手动升级内核,以获取更好的性能和更多的硬件支持。具体操作:-添加PPAs使用以下命令添加PPAs:```...

postgresql-15.4 多节点主从(读写分离)

1、下载软件[root@TX-CN-PostgreSQL01-252software]#wgethttps://ftp.postgresql.org/pub/source/v15.4/postg...

Docker 容器 Java 服务内存与 GC 优化实施方案

一、设置Docker容器内存限制(生产环境建议)1.查看宿主机可用内存bashfree-h#示例输出(假设宿主机剩余16GB可用内存)#Mem:64G...

虚拟内存设置、解决linux内存不够问题

虚拟内存设置(解决linux内存不够情况)背景介绍  Memory指机器物理内存,读写速度低于CPU一个量级,但是高于磁盘不止一个量级。所以,程序和数据如果在内存的话,会有非常快的读写速度。但是,内存...

Elasticsearch性能调优(5):服务器配置选择

在选择elasticsearch服务器时,要尽可能地选择与当前业务量相匹配的服务器。如果服务器配置太低,则意味着需要更多的节点来满足需求,一个集群的节点太多时会增加集群管理的成本。如果服务器配置太高,...

Es如何落地

一、配置准备节点类型CPU内存硬盘网络机器数操作系统data节点16C64G2000G本地SSD所有es同一可用区3(ecs)Centos7master节点2C8G200G云SSD所有es同一可用区...

针对Linux内存管理知识学习总结

现在的服务器大部分都是运行在Linux上面的,所以,作为一个程序员有必要简单地了解一下系统是如何运行的。对于内存部分需要知道:地址映射内存管理的方式缺页异常先来看一些基本的知识,在进程看来,内存分为内...

MySQL进阶之性能优化

概述MySQL的性能优化,包括了服务器硬件优化、操作系统的优化、MySQL数据库配置优化、数据库表设计的优化、SQL语句优化等5个方面的优化。在进行优化之前,需要先掌握性能分析的思路和方法,找出问题,...

Linux Cgroups(Control Groups)原理

LinuxCgroups(ControlGroups)是内核提供的资源分配、限制和监控机制,通过层级化进程分组实现资源的精细化控制。以下从核心原理、操作示例和版本演进三方面详细分析:一、核心原理与...

linux 常用性能优化参数及理解

1.优化内核相关参数配置文件/etc/sysctl.conf配置方法直接将参数添加进文件每条一行.sysctl-a可以查看默认配置sysctl-p执行并检测是否有错误例如设置错了参数:[roo...

如何在 Linux 中使用 Sysctl 命令?

sysctl是一个用于配置和查询Linux内核参数的命令行工具。它通过与/proc/sys虚拟文件系统交互,允许用户在运行时动态修改内核参数。这些参数控制着系统的各种行为,包括网络设置、文件...

取消回复欢迎 发表评论: