精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

SELECT COUNT(*) 會造成全表掃描?

Android編程精選 ? 來源:程序員大彬 ? 2023-03-25 09:53 ? 次閱讀

前言

SELECTCOUNT(*)會不會導致全表掃描引起慢查詢呢?

SELECTCOUNT(*)FROMSomeTable

網上有一種說法,針對無where_clauseCOUNT(*),MySQL 是有優化的,優化器會選擇成本最小的輔助索引查詢計數,其實反而性能最高,這種說法對不對呢

針對這個疑問,我首先去生產上找了一個千萬級別的表使用 EXPLAIN來查詢了一下執行計劃

EXPLAINSELECTCOUNT(*)FROMSomeTable

結果如下

f5a79de0-caa7-11ed-bfe3-dac502259ad0.jpg

如圖所示: 發現確實此條語句在此例中用到的并不是主鍵索引,而是輔助索引,實際上在此例中我試驗了,不管是COUNT(1),還是COUNT(*),MySQL 都會用成本最小的輔助索引查詢方式來計數,也就是使用COUNT(*)由于 MySQL 的優化已經保證了它的查詢性能是最好的!隨帶提一句,COUNT(*)是 SQL92 定義的標準統計行數的語法,并且效率高,所以請直接使用COUNT(*)查詢表的行數!

所以這種說法確實是對的。但有個前提,在 MySQL 5.6 之后的版本中才有這種優化。

那么這個成本最小該怎么定義呢,有時候在 WHERE 中指定了多個條件,為啥最終 MySQL 執行的時候卻選擇了另一個索引,甚至不選索引?

本文將會給你答案,本文將會從以下兩方面來分析

  • SQL 選用索引的執行成本如何計算

  • 實例說明

SQL 選用索引的執行成本如何計算

就如前文所述,在有多個索引的情況下, 在查詢數據前,MySQL 會選擇成本最小原則來選擇使用對應的索引,這里的成本主要包含兩個方面。

  • IO 成本: 即從磁盤把數據加載到內存的成本,默認情況下,讀取數據頁的 IO 成本是 1,MySQL 是以頁的形式讀取數據的,即當用到某個數據時,并不會只讀取這個數據,而會把這個數據相鄰的數據也一起讀到內存中,這就是有名的程序局部性原理,所以 MySQL 每次會讀取一整頁,一頁的成本就是 1。所以 IO 的成本主要和頁的大小有關

  • CPU 成本:將數據讀入內存后,還要檢測數據是否滿足條件和排序等 CPU 操作的成本,顯然它與行數有關,默認情況下,檢測記錄的成本是 0.2。

實例說明

為了根據以上兩個成本來算出使用索引的最終成本,我們先準備一個表(以下操作基于 MySQL 5.7.18)

CREATETABLE`person`(
`id`bigint(20)NOTNULLAUTO_INCREMENT,
`name`varchar(255)NOTNULL,
`score`int(11)NOTNULL,
`create_time`timestampNOTNULLDEFAULTCURRENT_TIMESTAMPONUPDATECURRENT_TIMESTAMP,
PRIMARYKEY(`id`),
KEY`name_score`(`name`(191),`score`),
KEY`create_time`(`create_time`)
)ENGINE=InnoDBDEFAULTCHARSET=utf8mb4;

這個表除了主鍵索引之外,還有另外兩個索引,name_scorecreate_time。然后我們在此表中插入 10 w 行數據,只要寫一個存儲過程調用即可,如下:

CREATEPROCEDUREinsert_person()
begin
declarec_idintegerdefault1;
whilec_id<=100000?do
insertintopersonvalues(c_id,concat('name',c_id),c_id+100,date_sub(NOW(),intervalc_idsecond));
setc_id=c_id+1;
endwhile;
end

插入之后我們現在使用 EXPLAIN 來計算下統計總行數到底使用的是哪個索引

EXPLAINSELECTCOUNT(*)FROMperson
f5bbf420-caa7-11ed-bfe3-dac502259ad0.png

從結果上看它選擇了create_time輔助索引,顯然 MySQL 認為使用此索引進行查詢成本最小,這也是符合我們的預期,使用輔助索引來查詢確實是性能最高的!

我們再來看以下 SQL 會使用哪個索引

SELECT*FROMpersonWHERENAME>'name84059'ANDcreate_time>'2020-05-231418'
f5d67b56-caa7-11ed-bfe3-dac502259ad0.png

用了全表掃描!理論上應該用name_score或者create_time索引才對,從 WHERE 的查詢條件來看確實都能命中索引,那是否是使用SELECT *造成的回表代價太大所致呢,我們改成覆蓋索引的形式試一下

SELECTcreate_timeFROMpersonWHERENAME>'name84059'ANDcreate_time>'2020-05-231418'

結果 MySQL 依然選擇了全表掃描!這就比較有意思了,理論上采用了覆蓋索引的方式進行查找性能肯定是比全表掃描更好的,為啥 MySQL 選擇了全表掃描呢,既然它認為全表掃描比使用覆蓋索引的形式性能更好,那我們分別用這兩者執行來比較下查詢時間吧

--全表掃描執行時間:4.0ms
SELECTcreate_timeFROMpersonWHERENAME>'name84059'ANDcreate_time>'2020-05-231418'

--使用覆蓋索引執行時間:2.0ms
SELECTcreate_timeFROMpersonforceindex(create_time)WHERENAME>'name84059'ANDcreate_time>'2020-05-231418'

從實際執行的效果看使用覆蓋索引查詢比使用全表掃描執行的時間快了一倍!說明 MySQL 在查詢前做的成本估算不準!我們先來看看 MySQL 做全表掃描的成本有多少。

前面我們說了成本主要 IO 成本和 CPU 成本有關,對于全表掃描來說也就是分別和聚簇索引占用的頁面數和表中的記錄數。執行以下命令

SHOWTABLESTATUSLIKE'person'
f5f0ceac-caa7-11ed-bfe3-dac502259ad0.png

可以發現

  1. 行數是 100264,我們不是插入了 10 w 行的數據了嗎,怎么算出的數據反而多了,其實這里的計算是估算,也有可能這里的行數統計出來比 10 w 少了,估算方式有興趣大家去網上查找,這里不是本文重點,就不展開了。得知行數,那我們知道 CPU 成本是100264 * 0.2 = 20052.8

  2. 數據長度是 5783552,InnoDB 每個頁面的大小是 16 KB,可以算出頁面數量是 353。

也就是說全表掃描的成本是20052.8 + 353 = 20406

這個結果對不對呢,我們可以用一個工具驗證一下。在 MySQL 5.6 及之后的版本中,我們可以用optimizer trace功能來查看優化器生成計劃的整個過程 ,它列出了選擇每個索引的執行計劃成本以及最終的選擇結果,我們可以依賴這些信息來進一步優化我們的 SQL。

optimizer_trace功能使用如下

SEToptimizer_trace="enabled=on";
SELECTcreate_timeFROMpersonWHERENAME>'name84059'ANDcreate_time>'2020-05-231418';
SELECT*FROMinformation_schema.OPTIMIZER_TRACE;
SEToptimizer_trace="enabled=off";

執行之后我們主要觀察使用name_scorecreate_time索引及全表掃描的成本。

先來看下使用name_score索引執行的的預估執行成本:

{
"index":"name_score",
"ranges":[
"name84059<=?name"
],
"index_dives_for_eq_ranges":true,
"rows":25372,
"cost":30447
}

可以看到執行成本為 30447,高于我們之前算出來的全表掃描成本:20406。所以沒選擇此索引執行

注意:這里的 30447 是查詢二級索引的 IO 成本和 CPU 成本之和,再加上回表查詢聚簇索引的 IO 成本和 CPU 成本之和。

再來看下使用create_time索引執行的的預估執行成本:

{
"index":"create_time",
"ranges":[
"0x5ec8c516
],
"index_dives_for_eq_ranges":true,
"rows":50132,
"cost":60159,
"cause":"cost"
}

可以看到成本是 60159,遠大于全表掃描成本 20406,自然也沒選擇此索引。

再來看計算出的全表掃描成本:

{
"considered_execution_plans":[
{
"plan_prefix":[
],
"table":"`person`",
"best_access_path":{
"considered_access_paths":[
{
"rows_to_scan":100264,
"access_type":"scan",
"resulting_rows":100264,
"cost":20406,
"chosen":true
}
]
},
"condition_filtering_pct":100,
"rows_for_plan":100264,
"cost_for_plan":20406,
"chosen":true
}
]
}

注意看 cost:20406,與我們之前算出來的完全一樣!這個值在以上三者算出的執行成本中最小,所以最終 MySQL 選擇了用全表掃描的方式來執行此 SQL。

實際上optimizer trace詳細列出了覆蓋索引,回表的成本統計情況,有興趣的可以去研究一下。

從以上分析可以看出, MySQL 選擇的執行計劃未必是最佳的,原因有挺多,就比如上文說的行數統計信息不準,再比如 MySQL 認為的最優跟我們認為不一樣,我們可以認為執行時間短的是最優的,但 MySQL 認為的成本小未必意味著執行時間短。

總結

本文通過一個例子深入剖析了 MySQL 的執行計劃是如何選擇的,以及為什么它的選擇未必是我們認為的最優的,這也提醒我們,在生產中如果有多個索引的情況,使用 WHERE 進行過濾未必會選中你認為的索引,我們可以提前使用 EXPLAIN,optimizer trace來優化我們的查詢語句。

審核編輯 :李倩


聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • MySQL
    +關注

    關注

    1

    文章

    802

    瀏覽量

    26448
  • 索引
    +關注

    關注

    0

    文章

    59

    瀏覽量

    10465

原文標題:SELECT COUNT(*) 會造成全表掃描?回去等通知吧

文章出處:【微信號:AndroidPush,微信公眾號:Android編程精選】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    基于索引的SQL語句優化之降龍十八掌

    型數據與數值型數據比較,ORACLE自動將字符型用to_number()函數進行轉換,從而導致全掃描。例2:tab1中的列col1是字符型(char),則以下語句存在類型轉換:
    發表于 09-25 13:24

    實現延遲函數是ReadCoreTimer還是_CP0_GET_COUNT

    大家好,我正在嘗試實現一個延遲函數,我的問題是關于我應該使用哪一個?代碼顯示了如何定義:#._CP0_GET_COUNT()_mfc0(_CP0_COUNT,_CP0_COUNT_SELECT)無符號int_.((nomips1
    發表于 10-10 14:16

    ucos節拍過快造成系統負荷加重怎么解決?

    書上說時鐘節拍一般為每秒10-100次為好,節拍過快造成系統負荷加重。但是在許多儀表中,LED數碼管需要動態掃描激勵,簡易的矩陣鍵盤也需要考動態掃描來識別按鍵是否被人按下。這樣,10
    發表于 06-17 08:09

    基礎SQL語句-使用SELECT索引數據

    SELECT 語句是最常用的SQL語句了,用來索引一個或者多個信息。關鍵字(keyword)作為SQL組成部分的字段,關鍵字不能作為或者列的名字。使用SELECT索引數據,必須至少
    發表于 11-03 14:34

    SuperK_SELECT數據手冊

    The SuperK SELECT is a tunable wavelength filter based on Acousto-optic Tunable Filters (AOTF
    發表于 12-25 22:04 ?0次下載

    20秒完成全身3D掃描的醫學成像設備

    一款最新的醫學成像設備只需20秒就能完成全身3D掃描,不久或將在研究和臨床領域得到廣泛應用。傳統的正電子發射斷層掃描儀(PET)一般需要20分鐘的成像時間,而這款經過改良的PET掃描
    發表于 06-30 10:58 ?2927次閱讀

    SQL告別count改用LIMIT 1

    根據某一條件從數據庫中查詢 『有』與『沒有』,只有兩種狀態,那為什么在寫SQL的時候,還要SELECT count(*) 呢?無論是剛入道的程序員新星,還是精湛沙場多年的程序員老白,都是一如既往
    的頭像 發表于 07-26 10:57 ?2033次閱讀

    select......for update還是鎖行?

    驗證 結合一下實例驗證 結果 ? select查詢語句是不會加鎖的,但是select .......for update除了有查詢的作用外,還會加鎖呢,而且它是悲觀鎖。 那么它加的是行鎖還是
    的頭像 發表于 10-10 15:54 ?1488次閱讀

    Select、Switch組件的使用

    Element UI 的 Select 直接使用 el-select / el-option 標簽即可,屬性 v-model 表示該下拉框綁定的對象,即最終選擇的值賦給該對象,直接用于
    的頭像 發表于 02-28 15:40 ?1088次閱讀
    <b class='flag-5'>Select</b>、Switch組件的使用

    rt-smart select的實現

    select()是常用的多路IO復用的posix調用接口。select () 函數指示指定的文件描述符中的哪些已準備好讀取、準備好寫入或有待處理的錯誤條件。
    的頭像 發表于 08-09 16:05 ?696次閱讀

    基于select!宏的進階用法

    Tokio 是一個基于 Rust 語言的異步編程框架,它提供了一組工具和庫,使得異步編程變得更加容易和高效。其中最重要的組件之一就是 select!宏。 select!宏是 Tokio 中的一個核心
    的頭像 發表于 09-19 15:35 ?614次閱讀

    epoll和select使用區別

    epoll 和select 相比于select,epoll最大的好處在于它不會隨著監聽fd數目的增長而降低效率。因為在內核中的select實現中,它是采用輪詢來處理的,輪詢的fd數目越多,自然耗時
    的頭像 發表于 11-09 14:14 ?1060次閱讀
    epoll和<b class='flag-5'>select</b>使用區別

    數據庫select語句的基本用法

    數據庫中的SELECT語句是用于從數據庫中檢索數據的基本工具。它是數據庫語言(如SQL)中最常用的命令之一,幾乎在每個數據庫管理系統中都有。 SELECT語句的基本語法如下: SELECT
    的頭像 發表于 11-17 15:08 ?1924次閱讀

    SELECT語句的基本格式

    列名 1 , 列名 2 , ..., 列名n FROM 名; 在這個格式中, SELECT 關鍵字用于指示我們正在執行一個查詢操作。緊接著是我們要檢索的列名,用逗號分隔。如果我們想檢索所有列,可以使用星號(*)代替列名。接下來,是 FROM 關鍵字,用于指定我們要從哪
    的頭像 發表于 11-17 15:10 ?2593次閱讀

    select語句的基本語法

    、詳實、細致地解釋SELECT語句的基本語法以及關鍵部分。 SELECT語句的基本語法如下: SELECT 列名 1 , 列名 2 , ... FROM 名 WHERE 條件 上述語
    的頭像 發表于 11-17 16:23 ?1916次閱讀