PgBouncer连接池工具
PgBouncer是为PostgreSQL提供的轻量级连接池工具,作用如下:
1,能够缓存和PostgreSQL的连接,当有连接请求进来的时候,直接分配空闲进程,而不需要PostgreSQL fork出新进程来建立连接,以节省创建新进程,创建连接的资源消耗。
2,能够有效提高连接的利用率,避免过多的无效连接,导致数据库消耗资源过大,CPU占用过高。
3,对客户端连接进行限制,预防过多或恶意的连接请求。
支持三种连接池模型:
1、Session pooling
会话模式,当会话结束时,被会话占用的pgbouncer到PGDB的连接可以被其他会话复用。
适用于短连接,或者其他模式不适用的场景。
不能解决大并发场景连接打满或性能下降的问题(到后端的连接依旧会很多)。
2、Transaction pooling
事务模式,当事务结束时,被会话占用的pgbouncer到PGDB的连接可以被其他会话复用。
适用于大并发、未使用(游标、绑定变量、消息队列、特殊参数)的场景。
3、Statement pooling
语句模式,当SQL执行完成后,被会话占用的pgbouncer到PGDB的连接可以被其他会话复用。
适用于大并发、未使用(游标、绑定变量、消息队列、特殊参数),并且不需要多语句事务的场景(或者说autocommit的场景)。
本例中使用postgresql版本:
postgres=# select version();
version
--------------------------------------------------------------------------------------------------------------------------------------
PostgreSQL 9.6.22 on x86_64-pc-linux-gnu (Debian 9.6.22-1.pgdg90+1), compiled by gcc (Debian 6.3.0-18+deb9u1) 6.3.0 20170516, 64-bit
(1 row)
使用
1、需要先安装libevent依赖。
libevent安装
下载地址:https://github.com/libevent/libevent/releases/tag/release-2.1.12-stable
创建解压目录:
mkdir /home/postgres/libevent
解压安装:
tar -zxvf libevent-2.0.21-stable.tar.gz
cd libevent-2.0.21-stable
./configure --prefix=/home/postgres/libevent
make
make install
环境变量.bashrc文件增加下面内容:
export PKG_CONFIG_PATH=/home/postgres/libevent/lib/pkgconfig
2、安装pgbouncer
下载地址:https://github.com/pgbouncer/pgbouncer/tags
创建解压目录:
mkdir /home/postgres/pgbouncer
解压:
tar -xvf pgbouncer-1.15.0.tar.gzcd pgbouncer-1.15.0/
安装:
./configure --prefix=/home/pg13/pgbouncer/
make
make install
3、配置pgbouncer
新建config目录和log目录:
mkdir -p /home/postgres/pgbouncer/etc/ mkdir -p /home/postgres/pgbouncer/log
配置文件修改如下:
#/home/postgres/pgbouncer/etc/pgbouncer.ini [databases] * = host=127.0.0.1 port=5432 pool_size=50 [pgbouncer] reserve_pool_size=14 logfile = /home/postgres/pgbouncer/log/pgbouncer.log pidfile = /home/postgres/pgbouncer/pgbouncer.pid listen_addr = 0.0.0.0 listen_port = 4001 unix_socket_dir = /home/postgres/pgbouncer unix_socket_mode = 0700 auth_type = md5 auth_file = /home/postgres/pgbouncer/etc/userlist.txt auth_user = jinliauth_query = select i_usename,i_passwd from get_shadow($1) admin_users = jinli stats_users = jinli pool_mode = transaction server_reset_query = DISCARD ALL server_check_query = select 1 max_client_conn = 100 default_pool_size = 20
然后将需要用到的用户密码配置到userlist.txt文件中
#userlist.txt "jinli" "jinli"
4、启动pgbouncer
启动前先修改环境变量:
export LD_LIBRARY_PATH="/home/postgres/libevent/lib":$LD_LIBRARY_PATH export PATH="/home/postgres/pgbouncer/bin":$PATH
然后启动:
pgbouncer -d /home/postgres/pgbouncer/etc/pgbouncer.ini
5、停止pgbouncer
cat /home/postgres/pgbouncer/pgbouncer.pid | xargs kill -9
6、连接pgbouncer
pgbouncer对外提供了一个虚拟数据库pgbouncer,我们可以连接到该库中进行 相关的命令操作:
export PGPASSWORD=jinli psql -h 127.0.0.1 -p 4001 -U jinli pgbouncer
常用的命令:
show clients: 用来查看客户端连接信息;
show pools: 用来查看连接池信息;
show databases:查看连接的数据库;
show config:查看相关配置;
被会话占用的pgbouncer到PGDB的连接被复用前,(通过pgbouncer.ini配置文件)可以设置重置命令(重置一些会话状态),使用discard即可(配置,执行计划缓存,序列,临时表等)。
pgbouncer=# \h discard
Command: DISCARD
Description: discard session state
Syntax:DISCARD { ALL | PLANS | SEQUENCES | TEMPORARY | TEMP }
参考:
https://www.postgresql.org/docs/9.6/sql-discard.html
https://github.com/pgbouncer/pgbouncer
https://blog.csdn.net/weixin_39540651/article/details/117289028
https://github.com/digoal/blog/blob/master/201005/20100511_03.md
PgBouncer连接池工具的更多相关文章
- hasura graphql-engine集成pgbouncer 连接池工具
pgbouncer 是一个轻量的pg 连接池工具,我们可以和hasura graphql-engine集成起来,进行连接的一些优化 环境准备 docker-compose 文件 version: '3 ...
- postgres高可用学习篇二:通过pgbouncer连接池工具来管理postgres连接
安装pgbouncer yum install libevent -y yum install libevent-devel -y wget http://www.pgbouncer.org/down ...
- Druid连接池工具类
package cn.zmh.PingCe; import com.alibaba.druid.pool.DruidDataSourceFactory; import javax.sql.DataSo ...
- 使用PgBouncer连接池
1.pgbouncer 的介绍 pgbouncer是一个针对PostgreSQL数据库的轻量级连接池,任何目标应用都可以把 pgbouncer 当作一个 PostgreSQL/Greenplum 服务 ...
- C3P0连接池工具类实现步骤及方法
C3P0连接池的工具类 使用C3P0获得连接对象连接池有一个规范接口 javax.sal.DataSourse 接口定义了一个从连接池中获得连接的方法getConnection(); 步骤导入jar包 ...
- 004-C3P0连接池工具类模板
package ${enclosing_package}; import java.sql.Connection; import java.sql.ResultSet; import java.sql ...
- Oracle连接池工具类OJDBCUtils
Oraclejdbc.properties driverClassName=oracle.jdbc.driver.OracleDriver url=jdbc:oracle:thin:@127.0.0. ...
- C3P0连接池工具类使用
c3p0的基本连接配置文件 c3p0-config.xml <c3p0-config> <default-config> <property name="dri ...
- jedis 连接池工具类
maven <properties> <jedis.version>3.0.1</jedis.version> <junit.verion>4.12&l ...
- DBCP连接池工具类模板
package ${enclosing_package}; import java.io.InputStream; import java.sql.Connection; import java.sq ...
随机推荐
- docker部署opengauss
下载二进制包到/opt/software/ wget https://opengauss.obs.cn-south-1.myhuaweicloud.com/1.1.0/x86/openGauss-1. ...
- java传递参数调用python完成剪切多个视频最终拼接成一个
需求如题,综合考虑之后我选择python去做视频处理,最终结果也让我非常满意. 我是windows 环境,安装的python3.8和moviepy模块 第一步:安装python3.8 第二步:修改py ...
- Android中动态添加tab
来源过于啰嗦,这里只有简化后的. 转载请注明出处 http://www.cnblogs.com/zaiyuzhong/p/add-tab-dynamic-in-android.html 建立对应的布 ...
- Metasploit渗透测试框架二
Metasploit基本使用方法 Metasploit基本命令 Metasploit程序需要使用Postgresql数据库. Postgresql是一种特性齐全的自由软件的对象-关系型数据库管理系统( ...
- flutter SafeArea和SliverSafeArea,适应特殊屏幕
现如今的手机已经不能提供给应用程序规整的矩形界面了,一些带圆角或者是刘海屏让应用程序的布局更加复杂,甚至是需要单独适配,这对开发者来来太糟糕了. 因此SafeArea控件应用而生,SafeArea通过 ...
- kali修改root用户和密码,以及更新源,超详细教学。
大家好! 又是你们那个傻傻的河东, 今天来讲修改root用户和更新源. 打开上期的kali虚拟机 开启虚拟机 使出吃奶的劲按"e"键:) 进入下面的界面 然后往下找到 Linux ...
- Java多线程编程技术方案原理
一 ,多线程相关的一些概念 1,线程和进程: 线程指的是进程中一个单一顺序的控制流, 进程中可以并发多个线程,每条线程并行执行不同的任务,被认为是一个计算资源的集合.进程不能被任务是一个应用,因为有些 ...
- ES 基础操作
集群 健康值的三种状态 Green:所有索引的所有分片均可用 primary 和 replice 均可用. Yellow 至少有一个 replice不可以用, 但是所有的 primary 正常. Re ...
- 【笔记】BootstrapTable带参数刷新数据的坑
$(<表选择器>).bootstrapTable('refresh', { query: { param1: a, param2: b } ); bootstrapTable中queryP ...
- 读后笔记 -- Python 全栈测试开发 Chapter10:接口的设计与开发
10.1 Django 框架 1. 几个主流的框架: 1)适合初学者的接口框架:Django,Flask 2)针对底层定义:Twisted 3)实现高并发:Tornado 2. install // ...