主頁 > 區塊鏈 > 堪比培訓機構的MySQL系列博客

堪比培訓機構的MySQL系列博客

2020-09-12 02:15:00 區塊鏈

這個blog,我整理了我之前寫的MySQL開發系列和MySQL運維系列,知識豐富程度堪比培訓機構
個人能力有限,如有錯誤的地方,歡迎指正,

文章目錄

  • 一.MySQL開發系列
    • 1.1 MySQL 行轉列
    • 1.2 MySQL 常用的函式
    • 1.3 MySQL 表連接
    • 1.4 MySQL分組陳述句小結
    • 1.5 MySQL with陳述句
    • 1.6 MySQL高級視窗函式
    • 1.7 MySQL正則運算式
    • 1.8 MySQL編程
  • 二.MySQL運維系列
    • 2.1 MySQL安裝
    • 2.2 MySQL體系結構
    • 2.3 MYSQL啟動和關閉
    • 2.4 MySQL組態檔
    • 2.5 MySQL字符集
    • 2.6 MySQL用戶及權限
    • 2.7 MySQL資料型別
    • 2.8 MySQL資料庫、表、索引相關命令
    • 2.9 MySQL事務和鎖
    • 2.10 MySQL常用的存盤引擎
    • 2.11 MySQL的備份和恢復
    • 2.12 MySQL高可用
    • 2.13 MySQL 運維管理工具--pt(Percona-toolkit)
    • 2.14 MySQL 監控軟體lepus天兔

一.MySQL開發系列

1.1 MySQL 行轉列

MySQL行轉列
MySQL行轉列是MySQL崗位筆試的一個入門級別的考試題目,做一些日常的統計分析報表的時候經常會被使用到,
很多剛開始學MySQL開發都卡在了行轉列這個需求上了,之前B站免費的MySQL高級視頻教程(面向java開發的),居然花了2個課時,接近2個小時來講解MySQL行轉列和列轉行,可見這個知識點的重要性,

1.2 MySQL 常用的函式

MySQL常用流程控制函式小結
MySQL常用數值函式小結
MySQL常用日期時間函式小結
MySQL常用日期時間函式拓展
MySQL常用字符函式小結

每個資料庫都有自己的函式,語法和數量上存在一定的差異,
我遇到過開發(例如java開發,.net開發)的同學,不熟悉資料庫間的差異,將Oracle或SqlServer資料庫的特定函式用在MySQL里,然后問DBA為何報錯,DBA只能改寫成MySQL自己支持的函式來實作需求,

也遇到過開發(例如java開發,.net開發)的同學,不熟悉MySQL的函式,然后重復造輪子,耗時較久的通過多層case when、通過多個表連接、通過java集合、java回圈來實作本來通過MySQL函式就可以輕松完成的事情,

也遇到過開發(例如java開發,.net開發)的同學遇到搞不定的sql,咨詢DBA,結果DBA不熟悉MySQL的函式,通過百度或其它論壇等地提問來解決此類問題,

綜上所述,無論是DBA還是開發人員,甚至資料分析人員,都需要熟悉掌握MySQL的常用函式,對自己的實際作業有很大的幫助,

1.3 MySQL 表連接

MySQL 表連接

作為DBA,經常遇到初中級開發提問關于表連接的,問題無外乎如下幾種:
1.表連接一對多或者多對多,為什么會有重復資料
2.我用了left join 但是where后面有其它條件,為什么還是少資料
3.我的in、exists很慢,能否優化下

其實通過幾個簡單的實驗,可以快速的弄懂表連接的語法,上述的問題也就比較容易的解決,

MySQL的 全連接、左連接、右連接、內連接
以及基于這些連接在where子句加上 col is null,可以實作去交集等操作
如果可以用表連接實作的,盡量通過表連接實作,在一定的使用場景下,性能會優于in和exists

1.4 MySQL分組陳述句小結

MySQL分組陳述句小結
MySQL的高級分組在OLAP應用,如業務報表、資料倉庫等,應用得非常廣泛,
我就見過不用rollup,然后各種union 的代碼
學會這些高級分組函式,進行多維度、多層級分組匯總的時候,可以大大減少代碼行數,提升代碼的可讀性及可維護性,

1.5 MySQL with陳述句

MySQL with陳述句
個人強烈推薦大家使用with陳述句,
沒有with陳述句,進行復雜查詢的時候,from子句后面一堆的臨時表,而且面臨特別復雜的需求的時候,from里的臨時表里面可能還會嵌套臨時表,代碼量可讀性、可維護性特別差,
with陳述句推出后,可以通過with陳述句封裝好各個臨時表,臨時表直接可以根據順序相互參考,
大大簡化了代碼的復雜程度,提升代碼的可讀性、可維護性
with陳述句的遞回,在一些場景也非常有用

1.6 MySQL高級視窗函式

MySQL高級視窗函式
MySQL高級分析函式與統計函式結合使用
個人強烈推薦大家學習并使用高級分析函式,
MySQL的高級分析函式簡直太給力了,往往通過幾層臨時表的復雜統計分析需求,高級分析函式,往往簡單的幾行代碼就可以搞定,而且性能上也有一定程度的提升,

1.7 MySQL正則運算式

MySQL正則運算式
MySQL的正則運算式相對于其他編程語言而言,比較弱,但是有總比沒有強,
MySQL的正則運算式由于要遍歷字串,所以往往性能并不是特別好,
但是,面對復雜、無規則的文本處理的時候,正則運算式可以發揮作用,往往幾行簡單的代碼可以實作復雜的匹配規則,
當然,正則運算式的應用場景較為廣泛,我的blog只是簡單介紹了下幾個正則函式的使用方法,需要在這方面提升的,還需要找尋其它的資料進行練習,

1.8 MySQL編程

MySQL視圖
MySQL流程控制陳述句
MySQL游標
MySQL存盤程序
MySQL函式編程
MySQL觸發器
MySQL事件

MySQL編程的存盤程序,相較于Oracle、SQLServer等資料庫較弱,但是有總比沒有強,
面對一些復雜的需求,sql不好解決或者解決起來比較麻煩的時候,可以嘗試用自定義函式進行解決,
面對一些邏輯特別復雜的,可以通過 事件+存盤程序+游標 來解決,能在資料庫里面實作的,會比在編程語言里面實作速度更快,

當然,如果是生產環境,使用MySQL的存盤程序和游標,要注意性能的開銷,個人建議如果是高并發的環境,就不要使用了,

二.MySQL運維系列

2.1 MySQL安裝

MySQL Windows下安裝
MySQL Linux yum安裝
MySQL Linux 原始碼編譯

MySQL的安裝無論是開發人員還是DBA,都是必修課,針對不同平臺,不同安裝方式,都需要熟悉,安裝知識點較為簡單,對技能要求不高,

正式環境經常遇到復雜的安裝環境:
1.主要的核心系統的MySQL資料庫是DBA統一安裝,規范性高,便于管理
2.部分外購系統MySQL資料庫是合作方安裝,規范性低,引數配置存在一定的問題
3.部分MySQl資料庫是系統運維或開發人員自己安裝,規范性低,引數配置存在一定的問題

針對不同方法安裝的MYSQL,不同版本的MYSQL,DBA都需要熟悉,

2.2 MySQL體系結構

MySQL 體系結構

MySQL的體系結構是DBA的必修課,對于MYSQL的記憶體結構、物理結構、邏輯結構及SQL陳述句的執行程序都需要有一個全面的了解,只有懂底層原理,才能更好的運維和優化自己維護的MySQL資料庫,

2.3 MYSQL啟動和關閉

MySQL 啟動和關閉

MySQL的啟動和關閉的方法多種多樣,對于從Oracle轉到MySQL的DBA,剛開始各種不適應,后面熟悉了,覺得相比較Oracle而言,MySQL更靈活,

2.4 MySQL組態檔

MySQL 組態檔

MySQL的組態檔,對于運維和優化而言是非常重要的,常用的組態檔的選項及各種選項對應的應用場景,
生產環境中,很多例外問題,都是DBA通過調整引數來解決的,
生產環境中,很多慢SQL,都是DBA通過調整引數來優化的,

2.5 MySQL字符集

MySQL 字符集

從Oracle轉到MySQL的DBA想必很多都被MySQL的字符集問題給困擾過,
為什么默認的字符集怎么是latin1?
為什么系統字符集、資料庫字符集、表字符集、列字符集居然都可以不一樣?
為什么除了字符集不同之外,同一個字符集還有不同的排序規則?

其實了解之后,發現MySQL是為了適用不同的應用場景,將字符集設定得更為靈活
這樣帶來的問題就是,如果開發不熟悉字符集,DBA也沒有通過變更前的SQL審核審核出來,隨之而來的亂碼問題會給系統帶來災難性的影響

2.6 MySQL用戶及權限

MySQL用戶及權限

MySQL的用戶及權限,相對于Oracle而言,靈活太多,
user@ip1與user@ip2是不同的用戶,密碼可以相同也可以不同,權限可以相同也可以不同,
而且權限細分得比較多,對于授權而言更為靈活,

2.7 MySQL資料型別

MySQL資料型別

MySQL的資料型別,對于DBA而言非常重要,隨著云平臺的興起,部分DBA的作業已經被自動化了,更多的DBA開始熟悉業務,參與系統架構相關,
越來越多的系統也由更懂資料庫存盤,資料結構的DBA來設計,

2.8 MySQL資料庫、表、索引相關命令

MySQL資料庫相關操作
MySQL表相關操作
MySQL索引相關操作

這些命令DBA要記在心里,如果開發的問過來還得通過百度來查找,那樣會有點丟臉哦

2.9 MySQL事務和鎖

MySQL事務
MySQL鎖

事務和鎖是關系型資料庫的核心,不同關系型資料庫的實作方式都不同,
對于DBA及自身的開發人員,需要懂得自己用的每一種資料庫的鎖機制,這樣才能設計出更好的系統,

從Oracle、SQL Server轉到MySQL的DBA,經常被一些莫名其妙的MySQL給困擾,作為MySQLDBA,我也經常和架構師、開發組長一起排查生產環境的各種鎖,想辦法去優化各種鎖,

2.10 MySQL常用的存盤引擎

MySQL常用的存盤引擎

MySQL的存盤引擎是MySQL的一個獨特優勢,相較于其它關系型資料庫而言,更為靈活,
之前遇到過公司的購買的某系統,供應商的軟體,mysql用的存盤引擎是MyISAM,每次停電或者例外關機,都需要DBA去手工執行修復表的命令,不然庫都啟動不起來,

Innodb已經越來越強大,MySQL 8.0開始,Innodb已經是MySQL系統表的存盤引擎,也是MySQL建表的默認存盤引擎,祝愿MySQL發展越來越好,

2.11 MySQL的備份和恢復

MySQL邏輯備份mysqldump
MySQL 8.0 物理備份xtrabackup
MySQL 5.6 xtrabackup
MySQL 二進制日志binlog
MySQL 工具之mysqldumper
MySQL 資料恢復工具之binlog2sql
MySQL資料恢復工具之MyFlash

DBA作業的核心之一就是保障資料的安全,

MySQL的備份恢復對于DBA而言是重中之重,資料丟失會給企業帶來災難性的影響,
2020年初的微盟事件,讓公司的市場份額被競爭對手搶去,給公司發展帶來了災難性的影響,

DBA生涯中,經常遇到權限管控不嚴格,開發誤刪資料,或產品頁面配置錯誤,需要找DBA進行資料恢復,
DBA必須制定一套資料庫備份、容災的體系,模擬任何例外情況帶來的資料丟失場景的資料恢復,
DBA必須熟悉市面上流行的各種資料備份、恢復、日志挖掘的工具的應用,
DBA必須在遇到例外情況下,保持一顆大心臟,膽大、心細,盡一切可能降低企業的損失,

2.12 MySQL高可用

MySQl主從搭建
MySQL 8.0 半同步復制
MySQL 8.0 GTID復制
MySQL 8.0 延遲復制
MySQL MGR單主模式搭建
MySQL MGR 聯機配置
MySQL主從高可用之Keepalived
MySQL MHA高可用實戰

DBA作業的核心之一是保障資料庫的高可用,

隨著資訊化的不斷深入,人們對于資訊系統的依賴性越來越高,往往資訊系統的不可用會給人們的生活帶來諸多不便利,甚至會嚴重影響到人們的生產和生活,
對于DBA而言,要部署高可用的資料庫系統架構,指導開發合理的使用資料庫,定期優化資料庫,保障資料庫持續對外輸出服務,

2.13 MySQL 運維管理工具–pt(Percona-toolkit)

MySQL 運維管理工具–pt(Percona-toolkit)

pt是percona開發的運維管理工具,大大方便了DBA的作業,建議MySQL DBA都熟悉下pt工具,優化自身的運維作業,

2.14 MySQL 監控軟體lepus天兔

MySQL 監控軟體lepus天兔

監控是運維的一個重點,監控主機、監控資料庫、監控網路、監控存盤,遇到問題早發現,早處理,
lepus是國內開發人員用php開發的一個開源的資料庫監控系統,界面友好,功能強大,相較于zabbix而言,更輕量,建議MySQL DBA可以支持lepus這個專案,

轉載請註明出處,本文鏈接:https://www.uj5u.com/qukuanlian/9430.html

標籤:區塊鏈

上一篇:SQL優化-索引

下一篇:PostgreSQL資料庫備份和恢復

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • JAVA使用 web3j 進行token轉賬

    最近新學習了下區塊鏈這方面的知識,所學不多,給大家分享下。 # 1. 關于web3j web3j是一個高度模塊化,反應性,型別安全的Java和Android庫,用于與智能合約配合并與以太坊網路上的客戶端(節點)集成。 # 2. 準備作業 jdk版本1.8 引入maven <dependency> < ......

    uj5u.com 2020-09-10 03:03:06 more
  • 以太坊智能合約開發框架Truffle

    前言 部署智能合約有多種方式,命令列的瀏覽器的渠道都有,但往往跟我們程式員的風格不太相符,因為我們習慣了在IDE里寫了代碼然后打包運行看效果。 雖然現在IDE中已經存在了Solidity插件,可以撰寫智能合約,但是部署智能合約卻要另走他路,沒辦法進行一個快捷的部署與測驗。 如果團隊管理的區塊節點多、 ......

    uj5u.com 2020-09-10 03:03:12 more
  • 谷歌二次驗證碼成為區塊鏈專用安全碼,你怎么看?

    前言 谷歌身份驗證器,前些年大家都比較陌生,但隨著國內互聯網安全的加強,它越來越多地出現在大家的視野中。 比較廣泛接觸的人群是國際3A游戲愛好者,游戲盜號現象嚴重+國外賬號安全應用廣泛,這類游戲一般都會要求用戶系結名為“兩步驗證”、“雙重驗證”等,平臺一般都推薦用谷歌身份驗證器。 后來區塊鏈業務風靡 ......

    uj5u.com 2020-09-10 03:03:17 more
  • 密碼學DAY1

    目錄 ##1.1 密碼學基本概念 密碼在我們的生活中有著重要的作用,那么密碼究竟來自何方,為何會產生呢? 密碼學是網路安全、資訊安全、區塊鏈等產品的基礎,常見的非對稱加密、對稱加密、散列函式等,都屬于密碼學范疇。 密碼學有數千年的歷史,從最開始的替換法到如今的非對稱加密演算法,經歷了古典密碼學,近代密 ......

    uj5u.com 2020-09-10 03:03:50 more
  • 密碼學DAY1_02

    目錄 ##1.1 ASCII編碼 ASCII(American Standard Code for Information Interchange,美國資訊交換標準代碼)是基于拉丁字母的一套電腦編碼系統,主要用于顯示現代英語和其他西歐語言。它是現今最通用的單位元組編碼系統,并等同于國際標準ISO/IE ......

    uj5u.com 2020-09-10 03:04:50 more
  • 密碼學DAY2

    ##1.1 加密模式 加密模式:https://docs.oracle.com/javase/8/docs/api/javax/crypto/Cipher.html ECB ECB : Electronic codebook, 電子密碼本. 需要加密的訊息按照塊密碼的塊大小被分為數個塊,并對每個塊進 ......

    uj5u.com 2020-09-10 03:05:42 more
  • NTP時鐘服務器的特點(京準電子)

    NTP時鐘服務器的特點(京準電子) NTP時鐘服務器的特點(京準電子) 京準電子官V——ahjzsz 首先對時間同步進行了背景介紹,然后討論了不同的時間同步網路技術,最后指出了建立全球或區域時間同步網存在的問題。 一、概 述 在通信領域,“同步”概念是指頻率的同步,即網路各個節點的時鐘頻率和相位同步 ......

    uj5u.com 2020-09-10 03:05:47 more
  • 標準化考場時鐘同步系統推進智能化校園建設

    標準化考場時鐘同步系統推進智能化校園建設 標準化考場時鐘同步系統推進智能化校園建設 安徽京準電子科技官微——ahjzsz 一、背景概述隨著教育事業的快速發展,學校建設如雨后春筍,隨之而來的學校教育、管理、安全方面的問題成了學校管理人員面臨的最大的挑戰,這些問題同時也是學生家長所擔心的。為了讓學生有更 ......

    uj5u.com 2020-09-10 03:05:51 more
  • 位元幣入門

    引言 位元幣基本結構 位元幣基礎知識 1)哈希演算法 2)非對稱加密技術 3)數字簽名 4)MerkleTree 5)哪有位元幣,有的是UTXO 6)位元幣挖礦與共識 7)區塊驗證(共識) 總結 引言 上一篇我們已經知道了什么是區塊鏈,此篇說一下區塊鏈的第一個應用——位元幣。其實先有位元幣,后有的區塊 ......

    uj5u.com 2020-09-10 03:06:15 more
  • 北斗對時服務器(北斗對時設備)電力系統應用

    北斗對時服務器(北斗對時設備)電力系統應用 北斗對時服務器(北斗對時設備)電力系統應用 京準電子科技官微(ahjzsz) 中國北斗衛星導航系統(英文名稱:BeiDou Navigation Satellite System,簡稱BDS),因為是目前世界范圍內唯一可以大面積提供免費定位服務的系統,所以 ......

    uj5u.com 2020-09-10 03:06:20 more
最新发布
  • web3 產品介紹:metamask 錢包 使用最多的瀏覽器插件錢包

    Metamask錢包是一種基于區塊鏈技術的數字貨幣錢包,它允許用戶在安全、便捷的環境下管理自己的加密資產。Metamask錢包是以太坊生態系統中最流行的錢包之一,它具有易于使用、安全性高和功能強大等優點。 本文將詳細介紹Metamask錢包的功能和使用方法。 一、 Metamask錢包的功能 數字資 ......

    uj5u.com 2023-04-20 08:46:47 more
  • Hyperledger Fabric 使用 CouchDB 和復雜智能合約開發

    在上個實驗中,我們已經實作了簡單智能合約實作及客戶端開發,但該實驗中智能合約只有基礎的增刪改查功能,且其中的資料管理功能與傳統 MySQL 比相差甚遠。本文將在前面實驗的基礎上,將 Hyperledger Fabric 的默認資料庫支持 LevelDB 改為 CouchDB 模式,以實作更復雜的資料... ......

    uj5u.com 2023-04-16 07:28:31 more
  • .NET Core 波場鏈離線簽名、廣播交易(發送 TRX和USDT)筆記

    Get Started NuGet You can run the following command to install the Tron.Wallet.Net in your project. PM> Install-Package Tron.Wallet.Net 配置 public reco ......

    uj5u.com 2023-04-14 08:08:00 more
  • DKP 黑客分析——不正確的代幣對比率計算

    概述: 2023 年 2 月 8 日,針對 DKP 協議的閃電貸攻擊導致該協議的用戶損失了 8 萬美元,因為 execute() 函式取決于 USDT-DKP 對中兩種代幣的余額比率。 智能合約黑客概述: 攻擊者的交易:0x0c850f,0x2d31 攻擊者地址:0xF38 利用合同:0xf34ad ......

    uj5u.com 2023-04-07 07:46:09 more
  • Defi開發簡介

    Defi開發簡介 介紹 Defi是去中心化金融的縮寫, 是一項旨在利用區塊鏈技術和智能合約創建更加開放,可訪問和透明的金融體系的運動. 這與傳統金融形成鮮明對比,傳統金融通常由少數大型銀行和金融機構控制 在Defi的世界里,用戶可以直接從他們的電腦或移動設備上訪問廣泛的金融服務,而不需要像銀行或者信 ......

    uj5u.com 2023-04-05 08:01:34 more
  • solidity簡單的ERC20代幣實作

    // SPDX-License-Identifier: GPL-3.0 pragma solidity >=0.7.0 <0.9.0; import "hardhat/console.sol"; //ERC20 同質化代幣,每個代幣的本質或性質都是相同 //ETH 是原生代幣,它不是ERC20代幣, ......

    uj5u.com 2023-03-21 07:56:29 more
  • solidity 參考型別修飾符memory、calldata與storage 常量修飾符C

    在solidity語言中 參考型別修飾符(參考型別為存盤空間不固定的數值型別) memory、calldata與storage,它們只能修飾參考型別變數,比如字串、陣列、位元組等... memory 適用于方法傳參、返參或在方法體內使用,使用完就會清除掉,釋放記憶體 calldata 僅適用于方法傳參 ......

    uj5u.com 2023-03-08 07:57:54 more
  • solidity注解標簽

    在solidity語言中 注釋符為// 注解符為/* 內容*/ 或者 是 ///內容 注解中含有這幾個標簽給予我們使用 @title 一個應該描述合約/介面的標題 contract, library, interface @author 作者的名字 contract, library, interf ......

    uj5u.com 2023-03-08 07:57:49 more
  • 評價指標:相似度、GAS消耗

    【代碼注釋自動生成方法綜述】 這些評測指標主要來自機器翻譯和文本總結等研究領域,可以評估候選文本(即基于代碼注釋自動方法而生成)和參考文本(即基于手工方式而生成)的相似度. BLEU指標^[^?88^^?^]^:其全稱是bilingual evaluation understudy.該指標是最早用于 ......

    uj5u.com 2023-02-23 07:27:39 more
  • 基于NOSTR協議的“公有制”版本的Twitter,去中心化社交軟體Damus

    最近,一個幽靈,Web3的幽靈,在網路游蕩,它叫Damus,這玩意詮釋了什么叫做病毒式營銷,滑稽的是,一個Web3產品卻在Web2的產品鏈上瘋狂傳銷,各方大佬紛紛為其背書,到底發生了什么?Damus的葫蘆里,賣的是什么藥? 注冊和簡單實用 很少有什么產品在用戶注冊環節會有什么噱頭,但Damus確實出 ......

    uj5u.com 2023-02-05 06:48:39 more