SQL優化-有解無憂

1.步驟（具體場景，具體分析，以下大致思路）

根據慢日志定位慢查詢sql
使用explain等工具分析sql
修改sql或者盡量讓sql走索引

2.具體步驟

2.1 根據慢日志定位慢查詢sql

show variables like '%quer%'

slow_query_log 慢日志狀態

slow_query_log_file 慢日志檔案地址

long_query_time 慢日志記錄的最低查詢時間

show status like '%slow_queries%' -- 查詢本次慢查詢資料數量

set global show_query_log = on; -- 設定打開慢查詢日志
set global long_query_time = 1; -- 設定慢日志記錄的最低查詢時間為一秒 需要重新連接才生效
以上可以在 my.ini 組態檔內修改， set 不是永久生效，重啟服務器會回歸默認設定

2.2 使用explain等工具分析sql

explain + 需要分析sql陳述句

id	select_type	table	partitions	type	possible_keys	key	key_len	ref	rows	filtered	Extra

欄位名解釋

id: select查詢的序列號，包含一組數字，表示查詢中執行select子句或操作表的順序

select_type: 表示查詢的型別，

table: 指的就是當前執行的表

partitions: 匹配的磁區

type: type所顯示的是查詢使用了哪種型別

possible_keys: 顯示可能應用在這張表中的索引，一個或多個，查詢涉及到的欄位上若存在索引，則該索引將被列出，但不一定被查詢實際使用，

key: 實際使用的索引，如果為NULL，則沒有使用索引，（可能原因包括沒有建立索引或索引失效）

key_len: 表示索引中使用的位元組數，可通過該列計算查詢中使用的索引的長度，在不損失精確性的情況下，長度越短越好，key_len顯示的值為索引欄位的最大可能長度，并非實際使用長度，即key_len是根據表定義計算而得，不是通過表內檢索出的，

ref: 顯示索引的那一列被使用了，如果可能的話，最好是一個常數，哪些列或常量被用于查找索引列上的值，

rows: 根據表統計資訊及索引選用情況，大致估算出找到所需的記錄所需要讀取的行數，也就是說，用的越少越好

filtered: 按表條件過濾的行百分比

Extra: 列回傳的描述的意義

關鍵欄位

type

system > const>eq_ref > ref>fulltext > ref_or_null > index_merge > unique_subquery >

index_subquery > range > index > all

index ,all 需要優化

system 表只有一行記錄（等于系統表），這是const型別的特列，平時不會出現，這個也可以忽略不計

const 表示通過索引一次就找到了，const用于比較primary key 或者unique索引，因為只匹配一行資料，所以很快，如將主鍵置于where串列中，MySQL就能將該查詢轉換為一個常量，
eq_ref 唯一性索引掃描，對于每個索引鍵，表中只有一條記錄與之匹配，常見于主鍵或唯一索引掃描
ref 非唯一性索引掃描，回傳匹配某個單獨值的所有行，本質上也是一種索引訪問，它回傳所有匹配某個單獨值的行，然而，它可能會找到多個符合條件的行，所以他應該屬于查找和掃描的混合體，
range 只檢索給定范圍的行，使用一個索引來選擇行，key列顯示使用了哪個索引，一般就是在你的where陳述句中出現between、< 、>、in等的查詢，這種范圍掃描索引比全表掃描要好，因為它只需要開始于索引的某一點，而結束于另一點，不用掃描全部索引，
index Full Index Scan，Index與All區別為index型別只遍歷索引樹，這通常比ALL快，因為索引檔案通常比資料檔案小，（也就是說雖然all和Index都是讀全表，但index是從索引中讀取的，而all是從硬碟讀取
all Full Table Scan 將遍歷全表以找到匹配的行
extra

extra項	說明
Using filesort	（看到這個的時候，查詢就需要優化了）表示 mysql會對結果使用一個外部索引排序，而不是從表里按索引次序讀到相關內容，可能在記憶體或者磁盤上進行排序，mysql 中無法利用索引完成的排序操作稱為“檔案排序”，
Using temporary	（看到這個的時候，查詢需要優化了）表示 mysql 在對查詢結果排序時使用臨時表，常見于排序order by 和分組查詢 group by ，
Using index	表示相應的select操作中使用了覆寫索引（Covering Index），避免訪問了表的資料行，效率不錯，如果同時出現using where，表明索引被用來執行索引鍵值的查找；如果沒有同時出現using where，表明索參考來讀取資料而非執行查找動作，
Using where	表明使用了where過濾
Using join buffer	表明使用了連接快取,比如說在查詢的時候，多表join的次數非常多，那么將組態檔中的緩沖區的join buffer調大一些，
impossible where	where子句的值`總是false`，不能用來獲取任何元組
select tables optimized away	在沒有GROUPBY子句的情況下，基于索引優化MIN/MAX操作或者對于MyISAM存盤引擎優化COUNT(*)操作，不必等到執行階段再進行計算，查詢執行計劃生成的階段即完成優化，
distinct	優化distinct操作，在找到第一匹配的元組后即停止找同樣值的動作

2.3 修改sql或者盡量讓sql走索引

1.對查詢進行優化，應盡量避免全表掃描，首先應考慮在 where 及 order by 涉及的列上建立索引，

2.應盡量避免在 where 子句中對欄位進行 null 值判斷，否則將導致引擎放棄使用索引而進行全表掃描，如：
select id from t where num is null
可以在num上設定默認值0，確保表中num列沒有null值，然后這樣查詢：
select id from t where num=0

3.應盡量避免在 where 子句中使用!=或<>運算子，否則將引擎放棄使用索引而進行全表掃描，

4.應盡量避免在 where 子句中使用 or 來連接條件，否則將導致引擎放棄使用索引而進行全表掃描，如：
select id from t where num=10 or num=20
可以這樣查詢：
select id from t where num=10
union all
select id from t where num=20

5.in 和 not in 也要慎用，否則會導致全表掃描，如：
select id from t where num in(1,2,3)
對于連續的數值，能用 between 就不要用 in 了：
select id from t where num between 1 and 3

6.下面的查詢也將導致全表掃描：
select id from t where name like '%abc%'

7.應盡量避免在 where 子句中對欄位進行運算式操作，這將導致引擎放棄使用索引而進行全表掃描，如：
select id from t where num/2=100
應改為:
select id from t where num=100*2

8.應盡量避免在where子句中對欄位進行函式操作，這將導致引擎放棄使用索引而進行全表掃描，如：
select id from t where substring(name,1,3)='abc'--name以abc開頭的id
應改為:
select id from t where name like 'abc%'

9.不要在 where 子句中的“=”左邊進行函式、算術運算或其他運算式運算，否則系統將可能無法正確使用索引，

10.在使用索引欄位作為條件時，如果該索引是復合索引，那么必須使用到該索引中的第一個欄位作為條件時才能保證系統使用該索引，否則該索引將不會被使用，并且應盡可能的讓欄位順序與索引順序相一致，

11.不要寫一些沒有意義的查詢，如需要生成一個空表結構：
select col1,col2 into #t from t where 1=0
這類代碼不會回傳任何結果集，但是會消耗系統資源的，應改成這樣：
create table #t(...)

12.很多時候用 exists 代替 in 是一個好的選擇：
select num from a where num in(select num from b)
用下面的陳述句替換：
select num from a where exists(select 1 from b where num=a.num)

13.并不是所有索引對查詢都有效，SQL是根據表中資料來進行查詢優化的，當索引列有大量資料重復時，SQL查詢可能不會去利用索引，如一表中有欄位sex，male、female幾乎各一半，那么即使在sex上建了索引也對查詢效率起不了作用，

14.索引并不是越多越好，索引固然可以提高相應的 select 的效率，但同時也降低了 insert 及 update 的效率，
因為 insert 或 update 時有可能會重建索引，所以怎樣建索引需要慎重考慮，視具體情況而定，
一個表的索引數最好不要超過6個，若太多則應考慮一些不常使用到的列上建的索引是否有必要，

15.盡量使用數字型欄位，若只含數值資訊的欄位盡量不要設計為字符型，這會降低查詢和連接的性能，并會增加存盤開銷，
這是因為引擎在處理查詢和連接時會逐個比較字串中每一個字符，而對于數字型而言只需要比較一次就夠了，

16.盡可能的使用 varchar 代替 char ，因為首先變長欄位存盤空間小，可以節省存盤空間，
其次對于查詢來說，在一個相對較小的欄位內搜索效率顯然要高些，

17.任何地方都不要使用 select * from t ，用具體的欄位串列代替“*”，不要回傳用不到的任何欄位，

18.避免頻繁創建和洗掉臨時表，以減少系統表資源的消耗，

19.臨時表并不是不可使用，適當地使用它們可以使某些例程更有效，例如，當需要重復參考大型表或常用表中的某個資料集時，但是，對于一次性事件，最好使用匯出表，

20.在新建臨時表時，如果一次性插入資料量很大，那么可以使用 select into 代替 create table，避免造成大量 log ，
以提高速度；如果資料量不大，為了緩和系統表的資源，應先create table，然后insert，

21.如果使用到了臨時表，在存盤程序的最后務必將所有的臨時表顯式洗掉，先 truncate table ，然后 drop table ，這樣可以避免系統表的較長時間鎖定，

22.盡量避免使用游標，因為游標的效率較差，如果游標操作的資料超過1萬行，那么就應該考慮改寫，

23.使用基于游標的方法或臨時表方法之前，應先尋找基于集的解決方案來解決問題，基于集的方法通常更有效，

24.與臨時表一樣，游標并不是不可使用，對小型資料集使用 FAST_FORWARD 游標通常要優于其他逐行處理方法，尤其是在必須參考幾個表才能獲得所需的資料時，
在結果集中包括“合計”的例程通常要比使用游標執行的速度快，如果開發時間允許，基于游標的方法和基于集的方法都可以嘗試一下，看哪一種方法的效果更好，

25.盡量避免大事務操作，提高系統并發能力，

26.盡量避免向客戶端回傳大資料量，若資料量過大，應該考慮相應需求是否合理，

轉載請註明出處，本文鏈接：https://www.uj5u.com/shujuku/248030.html

標籤：MySQL

上一篇：抖音資料采集從0到1，安卓App加殼與脫殼原理

下一篇：MySql創建存盤程序，并使用事件定時呼叫