精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

MySQL與Redis數據庫連接池應用

科技綠洲 ? 來源:Linux開發架構之路 ? 作者:Linux開發架構之路 ? 2023-11-10 16:40 ? 次閱讀

一、概念

數據庫連接池(Connection pooling)是程序啟動時建立足夠的數據庫連接,并將這些連接組成一個連接池,由程序動態地對池中的連接進行申請,使用,釋放。

簡單的說:創建數據庫連接是一個很耗時的操作,也容易對數據庫造成安全隱患。所以,在程序初始化的時候,集中創建多個數據庫連接,并把他們集中管理,供程序使用,可以保證較快的數據庫讀寫速度,還更加安全可靠。

二、圖示

不使用數據庫連接池

如果不使用數據庫連接池,對于每一次SQL操作,都要走一遍下面完整的流程:

1.TCP建立連接的三次握手(客戶端與 MySQL服務器的連接基于TCP協議)

2.MySQL認證的三次我收

3.真正的SQL執行

4.MySQL的關閉

5.TCP的四次握手關閉

可以看出來,為了執行一條SQL,需要進行大量的初始化與關閉操作

圖片

使用數據庫連接池

如果使用數據庫連接池,那么會事先申請(初始化)好相關的數據庫連接,然后在之后的SQL操作中會復用這些數據庫連接,操作結束之后數據庫也不會斷開連接,而是將數據庫對象放回到數據庫連接池中

圖片

三、數據庫連接池的好處

資源重用:由于數據庫連接得到重用,避免了頻繁的創建、釋放連接引起的性能開銷,在減少系統消耗的基礎上,另一方面也增進了系統運行環境的平穩性(減少內存碎片以及數據庫臨時進程/線程的數量)。

更快的系統響應速度:數據庫連接池在初始化過程中,往往已經創建了若干數據庫連接置于池中備用。此時連接的初始化工作均已完成。對于業務請求處理而言,直接利用現有可用連接,避免了從數據庫連接初始化和釋放過程的開銷,從而縮減了系統整體響應時間。

統一的連接管理,避免數據庫連接泄露:在較為完備的數據庫連接池實現中,可根據預先的連接占用超時設定,強制收回被占用連接。從而避免了常規數據庫連接操作中可能出現的資源泄露。

四、連接池數量設置

連接數 = ((核心數 * 2) + 有效磁盤數)

如果說你的服務器CPU是4核i7的,連接池大小應該為((4*2)+1)=9

五、MySQL連接池演示

源碼下載

下載方式:
https://github.com/dongyusheng/csdn-code/tree/master/db_pool(Github中下載)

db_pool目錄下有兩個目錄,mysql_pool目錄為MySQL連接池代碼,redis_pool為redis連接池代碼

圖片

下面介紹mysql_pool

CDBConn解析

class CDBConn {
public:
	// ...
private:
	CDBPool* 	m_pDBPool;	// to get MySQL server information
	MYSQL* 		m_mysql;	// 對應一個連接
	char		m_escape_string[MAX_ESCAPE_STRING_LEN + 1];
};

概念:代表一個數據連接對象實例

相關成員:

m_pDBPool:該數據庫連接對象所屬的數據庫連接池

構造函數:綁定自己所屬于哪個數據庫連接池

CDBConn::CDBConn(CDBPool *pPool)
{
	m_pDBPool = pPool;
	m_mysql = NULL;
}

Init()函數:創建數據庫連接句柄

int CDBConn::Init()
{
	m_mysql = mysql_init(NULL);
	if (!m_mysql)
	{
		log_error("mysql_init failedn");
		return 1;
	}

	my_bool reconnect = true;
	mysql_options(m_mysql, MYSQL_OPT_RECONNECT, &reconnect);	// 配合mysql_ping實現自動重連
	mysql_options(m_mysql, MYSQL_SET_CHARSET_NAME, "utf8mb4");

	if (!mysql_real_connect(m_mysql, m_pDBPool- >GetDBServerIP(), m_pDBPool- >GetUsername(), m_pDBPool- >GetPasswrod(),
							m_pDBPool- >GetDBName(), m_pDBPool- >GetDBServerPort(), NULL, 0))
	{
		log_error("mysql_real_connect failed: %sn", mysql_error(m_mysql));
		return 2;
	}

	return 0;
}

CDBPool解析

class CDBPool {
public:
	// ...
private:
	string 		m_pool_name;	// 連接池名稱
	string 		m_db_server_ip;	// 數據庫ip
	uint16_t	m_db_server_port; // 數據庫端口
	string 		m_username;  	// 用戶名
	string 		m_password;		// 用戶密碼
	string 		m_db_name;		// db名稱
	int			m_db_cur_conn_cnt;	// 當前啟用的連接數量
	int 		m_db_max_conn_cnt;	// 最大連接數量
	list< CDBConn* >	m_free_list;	// 空閑的連接
	CThreadNotify	m_free_notify;	// 信號
};

概念:代表一個數據庫連接池

相關成員:

  • m_db_cur_conn_cnt:當前數據庫連接池的連接數量
  • m_db_max_conn_cnt:數據庫連接池支持的最大連接數量(m_db_cur_conn_cnt<=m_db_max_conn_cnt)
  • m_free_list:存放空閑數據庫連接對象的(可以從這里取出數據庫連接對象使用)

Init()函數:常見指定數量的數據庫實例句柄,然后添加到m_free_list中,供后面使用

int CDBPool::Init()
{
	// 創建固定最小的連接數量
	for (int i = 0; i < m_db_cur_conn_cnt; i++)
	{
		CDBConn *pDBConn = new CDBConn(this);
		int ret = pDBConn- >Init();
		if (ret)
		{
			delete pDBConn;
			return ret;
		}

		m_free_list.push_back(pDBConn);
	}

	// log_error("db pool: %s, size: %dn", m_pool_name.c_str(), (int)m_free_list.size());
	return 0;
}

GetDBConn()函數:用于從空閑隊列中返回可以使用的數據庫連接句柄

/*
 *TODO: 增加保護機制,把分配的連接加入另一個隊列,這樣獲取連接時,如果沒有空閑連接,
 *TODO: 檢查已經分配的連接多久沒有返回,如果超過一定時間,則自動收回連接,放在用戶忘了調用釋放連接的接口
 */
CDBConn *CDBPool::GetDBConn()
{
	m_free_notify.Lock();

	while (m_free_list.empty())
	{
		// m_db_cur_conn_cnt是總共多少個連接,不是指空閑的
		if (m_db_cur_conn_cnt >= m_db_max_conn_cnt)
		{
			m_free_notify.Wait();
		}
		else
		{
			CDBConn *pDBConn = new CDBConn(this);
			int ret = pDBConn- >Init();
			if (ret)
			{
				log_error("Init DBConnecton failednn");
				delete pDBConn;
				m_free_notify.Unlock();
				return NULL;
			}
			else
			{
				m_free_list.push_back(pDBConn);
				m_db_cur_conn_cnt++;
				log("new db connection: %s, conn_cnt: %dn", m_pool_name.c_str(), m_db_cur_conn_cnt);
			}
		}
	}

	CDBConn *pConn = m_free_list.front();	// 獲取連接
	m_free_list.pop_front();	// STL 吐出連接,從空閑隊列刪除

	m_free_notify.Unlock();

	return pConn;
}

RelDBConn()函數:程序使用完該數據庫句柄之后,將句柄放回到空閑隊列中

void CDBPool::RelDBConn(CDBConn *pConn)
{
	m_free_notify.Lock();

	list< CDBConn * >::iterator it = m_free_list.begin();
	for (; it != m_free_list.end(); it++)
	{
		if (*it == pConn)
		{
			break;
		}
	}

	if (it == m_free_list.end())

測試

測試之前,將代碼中的數據庫地址、端口、賬號密碼等改為自己的(代碼中有好幾處)

圖片

進入MySQL,創建mysql_pool_test數據庫

CREATE DATABASE mysql_pool_test;

圖片

進入到mysql_pool目錄下,創建一個build目錄并進入:

mkdir build
cd build

圖片

然后輸入如下的命令進行編譯

cmake ..
make

圖片

之后就會在目錄下生成如下的可執行文件

圖片

輸入如下兩條命令進行測試:可以看到不使用數據庫連接池,整個操作耗時4秒左右;使用連接池之后,整個操作耗時2秒左右,提升了一倍

# 不使用數據庫連接池
./test_ThreadPool 4 4 0
# 使用數據庫連接池
./test_ThreadPool 4 4 1

圖片

六、Redis連接池演示

源碼下載

  • 下載方式:https://github.com/dongyusheng/csdn-code/tree/master/db_pool(Github中下載)

圖片

下面介紹redis_pool

測試

進入到redis_pool目錄下,創建一個build目錄并進入:

mkdir build
cd build

圖片

然后輸入如下的命令進行編譯

cmake ..
make

圖片

之后就會在目錄下生成如下的可執行文件

圖片

輸入如下的命令進行測試:可以看到不使用數據庫連接池,整個操作耗時182ms;使用連接池之后,整個操作耗時21ms,提升了很多

# 不使用數據庫連接池
./test_ThreadPool 4 4 0
# 使用數據庫連接池
./test_ThreadPool 4 4 1

圖片

進入redis,可以看到我們新建的key:

圖片

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 服務器
    +關注

    關注

    12

    文章

    9024

    瀏覽量

    85186
  • 數據庫
    +關注

    關注

    7

    文章

    3766

    瀏覽量

    64277
  • MySQL
    +關注

    關注

    1

    文章

    802

    瀏覽量

    26446
  • Redis
    +關注

    關注

    0

    文章

    371

    瀏覽量

    10846
收藏 人收藏

    評論

    相關推薦

    關于數據庫連接池總結

    數據庫連接池小結
    發表于 04-30 08:07

    數據庫連接池C3p0的使用方法

    數據庫連接池C3p0的使用
    發表于 06-04 17:31

    數據庫連接池技術在WEB系統開發中的應用

    在基于JDBC的數據庫應用開發中,數據庫連接的管理是決定該應用性能的一個重要因素。在對數據庫連接進行分析的基礎上,提出了一種合理、有效的
    發表于 09-11 16:25 ?14次下載

    數據庫連接池技術在WEB系統開發中的應用

    在基于JDBC的數據庫應用開發中,數據庫連接的管理是決定該應用性能的一個重要因素。在對數據庫連接進行分析的基礎上,提出了一種合理、有效的
    發表于 09-12 17:11 ?18次下載

    什么是數據庫連接池

    什么是數據庫連接池       數據庫連接是一種關鍵的有限的昂貴的資源,這一點在多用戶的網頁應用程序中體現得尤
    發表于 06-17 07:42 ?1258次閱讀

    關于 Redis連接池解析

    一、關于連接池 一個數據庫服務器只擁有有限的資源,并且如果你沒有充分使用這些資源,你可以通過使用更多的連接來提高吞吐量。一旦所有的資源都在使用,那么你就不能通過增加更多的連接來提高吞吐
    發表于 10-12 16:02 ?0次下載

    連接池工作原理

    連接池技術的核心思想是連接復用,通過建立一個數據庫連接池以及一套連接使用、分配和管理策略,使得該連接池
    的頭像 發表于 03-22 16:16 ?7658次閱讀

    數據庫連接池的優點

    本視頻主要詳細介紹了數據庫連接池的優點,分別是資源重用、更快的系統響應速度、統一的連接管理,避免數據庫連接泄漏、新的資源分配手段。
    的頭像 發表于 03-22 16:24 ?1.1w次閱讀

    數據庫連接池工作機制

    數據庫連接池負責分配、管理和釋放數據庫連接,它允許應用程序重復使用一個現有的數據庫連接,而不是再
    的頭像 發表于 03-22 16:28 ?3725次閱讀

    數據庫連接池的設置怎么確定大小

    數據庫連接池的配置是開發者們常常搞出坑的地方,在配置數據庫連接池時,有幾個可以說是和直覺背道而馳的原則需要明確。
    的頭像 發表于 05-04 14:23 ?2717次閱讀
    <b class='flag-5'>數據庫</b><b class='flag-5'>連接池</b>的設置怎么確定大小

    教你怎么配置數據庫連接池,保證無憂慮

    我在研究HikariCP(一個數據庫連接池)時無意間在HikariCP的Github wiki上看到了一篇文章(即前面給出的鏈接),這篇文章有力地消除了我一直以來的疑慮,看完之后感覺神清氣爽。故在此做譯文分享。
    發表于 08-10 16:34 ?1425次閱讀
    教你怎么配置<b class='flag-5'>數據庫</b><b class='flag-5'>連接池</b>,保證無憂慮

    華為云數據庫-RDS for MySQL數據庫

    華為云數據庫-RDS for MySQL數據庫 華為云數據庫作為華為云的一款數據庫產品,它主要是以MyS
    的頭像 發表于 10-27 11:06 ?1477次閱讀

    MySQL數據庫性能優化的意義及其措施

    數據庫性能優化的常見手段有很多,比如添加索引、分庫分表、優化連接池
    的頭像 發表于 02-03 14:12 ?1252次閱讀

    如何提高Mysql數據庫的訪問瓶頸

    為了提高Mysql數據庫的訪問瓶頸,常用的方法有如下兩個: 在服務器端增加緩存服務器緩存常用的數據(例如redis) 增加連接池,來提高
    的頭像 發表于 11-08 16:22 ?1008次閱讀
    如何提高<b class='flag-5'>Mysql</b><b class='flag-5'>數據庫</b>的訪問瓶頸

    了解連接池、線程、內存、異步請求

    可被重復使用像常見的線程、內存、連接池、對象都具有以上的共同特點。 連接池 什么是數據庫
    的頭像 發表于 11-09 14:44 ?1216次閱讀
    了解<b class='flag-5'>連接池</b>、線程<b class='flag-5'>池</b>、內存<b class='flag-5'>池</b>、異步請求<b class='flag-5'>池</b>