简小枪
PostgreSQL在CentOS上部署的时候，需要设置一些操作系统的参数，官方文档上列举了一些(传送门)。除了这些，还有一些其他的设置，如单个用户允许的最大进程数，单个进程的最大句柄数等，这些一般也需要调整，否则系统会在一些条件下出现问题，或者性能下降。下面从系统资源限制类和内存参数优化类来进行说明.
系统资源限制类
1.单个用户允许的最大进程数:linux系统默认是1024,如果PG的最大连接数超过1024,则实际的连接数会小于1024(PG的postmaster进程,checkpointer进程,bgwriter进程,WAL发送进程,日志进程等会占用几个进程数,所以给客户段的连接数会小于1024),超过的连接请求会报资源不够的错误信息.所以为了避免这种情况,需要调整PG的linux用户的可以使用的进程数,一般通过limit.conf进行配置.
2.单个进程可以打开的最大文件数:linux默认是1024,在SQL很复杂,打开很多表,或者访问很多分区时,会出现句柄数不够的错误.
内存参数优化类
1.vm.dirty_background_ratio:这个参数控制当系统内存写脏的比例达到多少时,会启动后台进程将buffer刷到磁盘.默认是10%,对于大内存的机器,如超过64G,10%的内存为6.4,一次把6.4G数据写入磁盘,会瞬间产生大量磁盘IO,使系统失去响应,影响其他进程.所以一般8G以上内存的机器,推荐设置为1%.
2.vm.dirty_background_types:这个参数与上面的类似,只不过这个参数可以设置内存脏掉的绝对值.着两个参数其中一个为0,则另外一个会起作用.
下面是配置这几个参数的脚本,在CentOS 6.x上测试OK.
复制代码 代码如下:
#limit process to 4096 instead 1024,for we may have 1024+ connections
echo "postgres soft nproc 4096" >> /etc/security/lmits.conf
#for big query,pg may open more than 1024 files per session
echo "postgres hard nofile 65535" >> /etc/security/limits.conf
echo "postgres soft nofile 65535" >> /etc/security/limits.conf
#default is 10% of memory,to smooth the io peek value,
#set this to tune background process flush buffer more frequently
echo "vm.dirty_background_ratio=0" >> /etc/sysctl.conf
echo "vm.dirty_background_bytes=1024000000" >> /etc/sysctl.conf
#make the sysctl.conf setting take effect
sysctl -p
#make limit to take effect
/etc/init.d/sshd restart
