主頁 > 資料庫 > MySQL總結

MySQL總結

2021-01-01 14:04:03 資料庫

一、資料庫簡介

1、MySQL資料庫介紹
MySQL是一個關系型資料庫管理系統，有瑞典MySQL AB公司開發，后來被sun公司收購，sun公司后來后被Oracle公司收購，目前是Oracle旗下產品，
MySQL開源，支持多平臺、免費、使用范圍廣，是了解學習關系型資料庫的首選，
特點：
1、使用c和c++撰寫，并使用了多種編譯器進行測驗沒保證源代碼的可移植性
2、支持多種作業系統，如linux、windows、unix等
3、為多種編程語言提供了API，如c++、c、java、python、PHP等
4、優化的SQL查詢演算法，有效地提高查詢速度
5、可以處理擁有上千萬條記錄的大型資料庫
6、使用標準的SQl資料語言形式
2、資料庫定義
資料存盤-資料庫階段
資料庫：是指長期存盤在計算機內，有組織的資料集合，簡而言之，資料庫就是一個存盤資料的地方，
表：是資料庫中存盤的基本單位，資料按照分類存盤到不同的表中，能夠非常高效的查詢其中的資料，

二、SQL語言

1、SQL語言定義
Structured Query Language
結構化查詢語言
SQL是一門特殊的語言，專門用來操作關系型資料庫，當前關系型資料庫都支持使用SQL語言進行操作，也就是說可以通過SQL語言操作Oracle、mysql、SqlServer、sqlite等等所有的關系型資料庫，
2、SQL語言主要分為：

DQL：資料查詢語言，用于對資料進行查詢，如select
DDL：資料定義語言，進行資料庫、表的管理等，如create、drop
DML：資料操作語言，對資料庫進行增刪改，如 insert、delete、update
TPL：事務處理語言，對事物進行處理，包括begin transaction、commit、rollback
3、關系型資料庫的主要產品：
Oracle：在大型專案中使用，如銀行、電信專案；
MySQL：web時代使用最為廣泛的關系型資料庫；
Microsoft SQL Server： 在微軟平臺的專案常用；
SQLite：輕量級資料庫主要應用在移動平臺，

三、SQL語言基礎

掌握create table、drop table陳述句；
掌握 增加insert、洗掉delete、查詢select、更新update表陳述句；
1、SQL語言中的注釋
單行注釋
格式：-- 注釋內容
Select * --簡單的查詢陳述句
From student;
多行注釋
格式： /注釋內容/
·在Navicat中按住ctrl+/快速注釋選中的SQL陳述句
·在Navicat中按ctrl+shift+/選中SQL代碼取消注釋，
2、mysql常用資料型別
·整數：int，有符號范圍（-2147483648，2147483647），無符號范圍（0，,494967295），如：intunsigned，代表設定一個無符號整數；
·小整數tinyint，有符號范圍（-128,127），無符號范圍（0,255），如天陰天unsigned，代表設定一個吻無符號位的小整數，
·小數;decimal, 如decimal（5,2）表示共存5位數，小數占兩位，不能超過2位數；整數占3位，不能超過3位；
·字串varchar; 如varchar（3）表示最多存3個字符，一個中文或一個字母都占一個字符；
·日期時間：datetime， 范圍（10000-01-01 00:00:00~9999-12-31 23:59:59）
如’2020-01-01 12:29:59’.
3、表、欄位、記錄
表（table），資料庫中存盤資料的基本單位，表示一個有行和列組成的二維表格結構，
欄位（filed）表中的列，在資料庫中，叫做欄位（filed），
記錄（record）表中的一行，在資料庫中叫做記錄（record），
4、創建表的語法
Create table 表名(欄位名 資料型別 約束條件，，，);
5、添加資料的語法
Insert into table values（）;
6、洗掉表內容的語法
Delete from 表名
Delete from表名 where 條件
Truncate 表名
7、洗掉表
8、Drop table表名

四、約束

約束：對資料庫表中的資料進行限制和約定，
目的：為保證資料庫中的資料合理性、準確性、合理化、規范化定義的，
在創建表的時候加約束：
Create table 表名(
欄位名 資料型別 約束，
欄位名 資料型別 約束，
…
);
約束分類：
1、非空約束 not null
2、默認約束 default 值
3、唯一約束 unique
4、主鍵約束
Primary key ===not null +unique
主鍵是表中所有資料用來唯一識別的標志
5、自增約束 auto_increment
6、檢查約束 check mysql中有檢查約束，但自動忽略
7、外鍵約束
Foreign key(外鍵) references 主表(主鍵)
外鍵是表與表之間建立連接的通道（橋梁）
有外鍵的表示從表
有主鍵的表示主表
從表中的外鍵值要依賴于主表中的主鍵值
創建時先創建主表，再創建從表

五、單表查詢

1、分組查詢
Select * from 表名 where 條件 order by 欄位名 desc limit 2;
Select后跟查詢的結果欄位資訊
From后跟查詢的表
Where 查詢的條件
Order by 排序資訊 desc降序 asc升序，默認升序
Limit 分頁展示 limit
2、不分組查詢
Select * from 表名 where 條件 group by 條件 having，， order by，， limit 3
Select … 查詢結果的欄位資訊
Form … 查詢的表資訊
Where … 查詢的條件
Group by … 分組依據
Having … 對分組后的結果進行二次篩選
Order by … 對分組后的結果進行排序
Limit … 對分組后的結果進行分頁展示
Where和having：
Where是對分組簽的資料進行條件篩選，然后再分組
Having是對分組后的結果進行二次篩選
Distinct：消除重復行
As 取別名

六、函式

函式： mysql中提供的方法

聚合函式： count() sum() avg() min() max()
普通函式：
數字函式：
abs() mod(n,m)==% floor() ceiling() round()

		案例：
			select abs(-20)
			select abs(sage) from student;
			select mod(15,7);
			select 15%7;
			select round(15.6)

字串函式：
concat(…) length() trim() repalce() insert()

		案例：
			select concat('my','sql')
			select concat(sname,sage) from student;
			select length(sname) from student;
			select sname from student;
			select replace(sname,SUBSTR(sname,2),'先生/女士') from student;

日期函式：
DAYOFMONTH() DAYOFYEAR() QUARTER()
YEAR() MONTH() DATE() HOUR() MINUTE() SECOND()
DATE_ADD() DATE_SUB() CURRENT_TIME() NOW()

	案例：
		select now(),current_time();
		select year(now()),MONTH(now()),DAYOFMONTH(now()),HOUR(now()),minute(now()),second(now());
		SELECT now(), DATE_ADD(now(),INTERVAL 7 DAY);

控制流程函式：
case 變數
when 值1 then 結果
when 值2 then 結果
else 結果
end
if(條件,true結果，false結果)
Strcmp(str1,str2):如果str1>str2回傳1,str1=str2反回0，str1<str2回傳-1)

		案例：

		select case 1 when 1 then 'one' when 2 then 'two' else 'more' end;
		select  if(1>2,'yes','no')

加密函式：
password() md5()

		案例：
			select length(md5('abc'));

			insert into student values('admin',md5('abc'))

其他函式：
FORMAT(x,n)函式可以將數字x進行格式化，將x保留到小數點后n位，這個程序需要進行四舍五入

七、多表查詢

多表查詢： 就是把多張具有關系的表進行資料的查詢和拼接
格式：
select … from 表1，表2… …
分類： 交叉連接 等值連接 內連接 左外連接 右外連接 全外連接 自連接 子連接
如何判斷查詢陳述句中使用的是哪種連接查詢？
單表查詢：
查詢結果是當前表中的直接欄位
查詢的條件是當前表中的欄位值條件
多表查詢：
查詢的結果是多張表中的直接欄位
條件是多張表中的欄位值條件
子連接查詢：
查詢的結果是當前表的直接欄位或者非直接欄位
查詢條件不是當前表中的直接的欄位值
創建兩張表并放置資料：

CREATE TABLE `dept` ( 
`dno` int(11) NOT NULL AUTO_INCREMENT, 
`dname` varchar(30) DEFAULT NULL, 
`dtext` varchar(30) DEFAULT NULL, 
PRIMARY KEY (`dno`))
INSERT INTO `dept` VALUES ('10', '研發部', '程式研發和開發'); 
INSERT INTO `dept` VALUES ('20', '教學部', '新員工培訓和新技術培養'); 
INSERT INTO `dept` VALUES ('30', '銷售部', '銷售程式和專案'); 
INSERT INTO `dept` VALUES ('40', '硬體部', '公司運營和設備維護'); 
CREATE TABLE `employee` ( 
`empno` int(11) NOT NULL AUTO_INCREMENT, 
`ename` varchar(30) DEFAULT NULL, 
`job` varchar(30) DEFAULT NULL, 
`mgr` int(11) DEFAULT NULL, 
`hiredate` date DEFAULT NULL, 
`sal` double DEFAULT NULL, 
`COMM` double DEFAULT NULL, 
`deptno` int(11) DEFAULT NULL, 
PRIMARY KEY (`empno`), 
foreign key(`deptno` ) references `dept` (`dno` ) 
)
INSERT INTO `employee` VALUES ('1001', '甘寧', '文員', '1013', '2000-12-17', 
'8000', null, '20'); 
INSERT INTO `employee` VALUES ('1002', '黛綺絲', '銷售員', '1006', '2001-02-20', 
'16000', '3000', '30'); 
INSERT INTO `employee` VALUES ('1003', '殷天正', '銷售員', '1006', '2001-02-22', 
'12500', '5000', '30'); 
INSERT INTO `employee` VALUES ('1004', '劉備', '經理', '1009', '2001-04-02', 
'29750', null, '20'); 
INSERT INTO `employee` VALUES ('1005', '謝遜', '銷售員', '1006', '2001-09-28', 
'12500', '14000', '30'); 
INSERT INTO `employee` VALUES ('1006', '關羽', '經理', '1009', '2001-05-01', 
'28500', null, '30'); 
INSERT INTO `employee` VALUES ('1007', '張飛', '經理', '1009', '2001-09-01', 
'24500', null, '10'); 
INSERT INTO `employee` VALUES ('1008', '諸葛亮', '分析員', '1004', '2007-04-19', 
'30000', null, '20');

交叉連接
交叉連接查詢： 笛卡爾積查詢 , 簡單的把多張表中的資料建立一一對應原則，拼接再一起.
注意： 交叉連接查詢的結果有很多條資料不合理，稍微了解即可
格式： select … from 表1，表2，…
等值連接
等值連接查詢： 其實是交叉連接查詢中的特殊情況，把交叉連接查詢的結果中的進行條件判斷，獲取
其中合理 的資料 ，以后經常被使用，
注意： 條件 外鍵 = 主鍵
格式： select … from 表1，表2 where 表1.外鍵 = 表2.主鍵
– 查詢員工的姓名，職位，工資，所屬的部門名稱，部門簡介select ename,job,sal ,dname,dtext from employee,dept where
employee.deptno=dept.dno
– 查詢工資高于15000的員工的姓名，職位，工資，部門名稱
select ename,job,sal,dname from dept,employee where employee.deptno = dept.dno
and sal>15000
– 查詢工資高于15000的員工的姓名，職位，工資，部門名稱,結果按照工資降序排序
select ename,job,sal,dname from dept,employee where employee.deptno = dept.dno
and sal>15000 order by sal desc;
– 查詢部門20的經理和部門30的銷售員且工資高于12000以上的
– 人員資訊和所屬的部門名稱和部門簡介
select e.,d.dname,d.dtext from employee e,dept d
where e.deptno=d.dno
and (d.dno=20 and e.job=‘經理’)
or (d.dno=30 and e.job=‘銷售員’ and e.sal>12000)
內連接
內連接查詢： 是join連接查詢的一種，查詢結果資料與等值連接查詢的結果資料一模一樣
格式： select … from 表1 inner join 表2 on 表1.外鍵=表2.主鍵
注意： inner 可以省略
– 查詢員工的姓名及所有的部門名稱
select ename,dname from employee,dept where employee.deptno=dept.dno
select ename,dname from employee inner join dept on employee.deptno=dept.dno
select ename,dname from employee join dept on employee.deptno=dept.dno
– 查詢工資高于12000的員工資訊和所屬的部門資訊，結果按照工資降序排序
select * from employee inner join dept
on employee.deptno = dept.dno and sal>12000
order by sal desc
– 查詢部門20的經理和部門30的銷售員且工資高于12000以上的
– 人員資訊和所屬的部門名稱和部門簡介
select e.,d.dname,d.dtext
from employee e inner join dept d
on e.deptno=d.dno and (dno=20 and job=‘經理’)
or (dno=30 and job=‘銷售員’ and sal>12000)
左外連接
左外連接查詢 ： 是join的一種外鏈接查詢的方式之一
格式： select … from 表1 left outer join 表2 on 表1.外鍵=表2.主鍵
注意：outer 可以省略
把左邊的表中的資料全部顯示，如果右表有資料對應則顯示；如果沒有資料對應，則以null補
全
select * from employee , dept where employee.deptno=dept.dno
select * from employee inner join dept on employee.deptno=dept.dno
– 查詢員工資訊及所屬的部門資訊，人員資訊必須展示所有
select * from employee left outer join dept
on employee.deptno=dept.dno
select * from employee left join dept
on employee.deptno=dept.dno
order by sal desc;
右外連接
右外連接查詢 ： 是join的一種外鏈接查詢的方式之一
格式： select … from 表1 right outer join 表2 on 表1.外鍵=表2.主鍵
注意：
outer 可以省略
把右邊的表中的資料全部顯示，如果左表有資料對應則顯示；如果沒有資料對應，則以null補全
– 查詢員工資訊及所屬的部門資訊，人員資訊必須展示所有
select * from dept right outer join employee
on employee.deptno = dept.dno
select * from dept right join employee
on employee.deptno = dept.dno
全外連接查詢
全外連接查詢： 是join外連接查詢的方式之一
格式： select … from 表1 full outer join 表2 on 表1.外鍵=表2.主鍵
注意： mysql默認不支持全外連接查詢，oralcle和DB2才支持
解決方案：
并集查詢 union 非并集查詢 union all
– union ： 獲取兩條sql語言查詢結果的并集【把兩個查詢陳述句的結果合并,如果相同則去除重復，如果不同，則展示】
– 注意： 兩條sql陳述句查詢的結果列要保持一致
– 查詢所有的員工資訊和部門資訊，要求全部要展示人員資訊和部門資訊
– 1, 查詢所有的員工資訊和部門資訊，人員資訊全部展示
select * from employee left join dept on deptno=dno
– 2,查詢所有的員工資訊和部門資訊，部門資訊全部展示select * from employee right join dept on deptno=dno
– 3,把以上兩條sql求其并集
select * from employee left join dept on deptno=dno
union
select * from employee right join dept on deptno=dno
– union all
select * from employee left join dept on deptno=dno
union all
select * from employee right join dept on deptno=dno
自連接
子連接查詢 ： 把一張表當成多張表來使用查詢
格式： 一張看成多張并取別名查詢
– 查詢員工的姓名和工資及其上級的姓名
select yg.ename,yg.sal,yg.mgr,sj.empno,sj.ename from employee yg ,employee
sj
where yg.mgr = sj.empno
– 查詢員工的姓名和工資及其上級的姓名，如果沒有上級也要展示
select yg.ename,yg.sal,sj.ename from employee yg left join employee sj
on yg.mgr = sj.empno
– 查詢入職時間早于其上級的員工的資訊
select yg.* from employee yg,employee sj
where yg.mgr = sj.empno and yg.hiredate<sj.hiredate
子連接查詢
子連接查詢 ： 查詢的sql中會存在多條查詢陳述句進行整合
方式：
1, 把一條查詢陳述句的結果當成另一條查詢陳述句的條件
2,把一條查詢陳述句的結果看成一張虛擬表，再此表中進行聯合查詢
結果情況：
單行單列 > >= < <= = !=
多行單列in not in
多行多列虛擬表
select * from employee;
– 查詢與甘寧再同一部門的員工資訊
– 1，先查詢甘寧所在的部門編號
select deptno from employee where ename=‘甘寧’
– 2,然后把1中查詢的編號當成條件來查詢員工資訊
select * from employee where deptno=20select * from employee
where deptno=(select deptno from employee where ename=‘甘寧’)
– 查詢研發部中的所有的員工資訊和部門資訊
select * from employee,dept
where employee.deptno=dept.dno and dept.dname=‘研發部’
– 查詢研發部中的所有的員工資訊
– 1,先查詢研發部的部門編號
select dno from dept where dname=‘研發部’
– 2,再根據部門編號來查詢員工資訊
select * from employee where deptno=10;
select * from employee where deptno=(select dno from dept where dname=‘研
發部’);
– 查詢工資高于張飛的員工資訊
– 1，先查詢張飛的工資
select sal from employee where ename=‘張飛’
– 2，根據工資進行條件查詢
select * from employee where sal>24500
select * from employee where sal>(select sal from employee where
ename=‘張飛’)
– 查詢工資再 謝遜和黛麗絲 工資之間的員工資訊
– 1查詢謝遜的工資
select sal from employee where ename=‘謝遜’
– 2查詢黛麗絲的工資
select sal from employee where ename=‘黛麗絲’
– 3根據1,2的查詢結果作為條件，查詢
select * from employee
where sal>(select sal from employee where ename=‘黛綺絲’)
and sal<(select sal from employee where ename=‘諸葛亮’)
– 查詢銷售部和研發部下的所有的員工資訊
– 1，查詢研發部和銷售部的部門編號
select dno from dept where dname in(‘研發部’,‘銷售部’)
– 2，根據部門編號來查詢員工資訊
select * from employee
where deptno in(select dno from dept where dname in(‘研發部’,‘銷售部’))
– 查詢員工的姓名和工資
– 1,先查詢員工的所有的資訊
select * from employee;
– 2,把1中的結果當成一張虛擬表，再此表中查詢姓名和工資
select s.ename,s.sal from (select * from employee) s
– 查詢部門資訊及該部門的員工人數
– 1,查詢部門編號及該部門的員工人數
select deptno,count(1) from employee group by deptno
select * from dept;
– 2,把1中查詢的結果當成虛擬表，與dept表進行聯查即可
select * from (select deptno,count(1) from employee group by
deptno)s,dept
where dept.dno=s.deptno

八、視圖

視圖：在資料庫中用來簡化復雜的sql陳述句的一種方式
一般可以把視圖看成一張虛擬的表，其本質是一條復雜的sql陳述句

作用：
1、簡化復雜的sql陳述句
2、用來隱藏敏感欄位資訊
創建視圖：
Create view 視圖名 as select ，，，，，
查詢視圖：
Select，，，From視圖名 where，，，order by ，，Limit，，
洗掉視圖：
Drop view 視圖名；

九、索引

索引是一種允許直接訪問資料庫表中某一資料行的屬性結構，為了提高查詢效率而引入，是獨立魚表的物件，可以存放在與表不同的表空間（TABLESPACE）中
索引記錄中存有索引關鍵字和指向表中資料的指標（地址），對索引進行的I/O操作比對表進行操作要少很多，
索引一旦被建立就將被Rracle系統自動維護，查詢陳述句中不能用指定使用那個索引，是一種提高查詢效率的機制
索引類似于書本的目錄，主要目的是提高查詢效率的
如果創建一個索引，則該索引對應的保護空間就會是原來的1.5倍左右，
分類： 主鍵索引、唯一索引、外鍵索引、普通索引
創建索引：
Create index 索引名 on 表名（列名，列名，）;
修改索引：
Alter index 索引名 rebulid
洗掉索引：
Drop index 索引名稱 on 表名
為提高查詢效率，創建和使用索引的原則：
為經常出現在where子句中的列創建索引
為經常出現在order by、distinct后面的欄位建立索引，如果建立的索引是復合索引，索引的欄位順序要和這些關鍵字后面的欄位順序一致
為經常作為表的連接條件的列創建索引
不要在經常做DML操作的表上建立索引
不要在小表上建立索引
限制表上的索引數目，索引并不是越多越好
洗掉很少使用的，不合理的索引
列中值較少的不要加索引
索引
create index in_ename on employee(ename);
– 復制表
create table emp select * from employee;
select * from emp;
– 短期內插入大量資料
insert into emp select * from emp;
select count(1) from emp;
– 根據ename來查詢李博文的資訊
select * from emp where ename=‘李博文’
– 沒有索引 時間 1.817s
– 為ename加入索引
create index in_ename on emp(ename)
– 加入索引后 時間 0.001s
select * from emp where ename=‘李博文’

十、事務

事務的四大特性：ACID：原子性（atomicity，或稱為不可分割性）、一致性（Consistency）、隔離性（Isolation，又稱獨立性）、持久性（Durability）
·原子性：一個事務中所有的操作，要么全部完成，要么全不完成，不會結束在中間某個環節，事務在執行程序中發生錯誤，會被回滾到事務開始前的狀態，就像這個事務從來沒有執行過一樣，
·一致性：在事務開始之前和事務結束之后，資料庫的完整性沒有被破壞，這表示寫入的資料必須完全符合所有的預設規則，這包含資料的精準度、串聯性以及后續資料庫可以自發性地完成預定的作業，
·隔離性：資料庫允許多個并發事務同時對其資料進行讀寫和修改的能力，隔離性可以防止多個事務并發執行時由于交叉執行而導致資料的不一致，事務隔離分為不同級別，包括讀未提交，讀提交，可重復讀，串行化
·持久化：事務處理結束后，對資料的修改就是永久的，即便系統故障依然不會丟失，

事務：
mysql中的事務自動提交，默認是每一條sql都是一個單獨的事務
oracle中的事務不會自動提交，默認事務是開啟，如果你沒有提交，則事務不會提交
開啟事務：begin / start trancation
提交事務：commit
事務回滾： rollback

-- 事務 
select * from employee;r 
-- mysql 默認每一條sql都是一個事務，會自動提交 
update employee set sal=40000 where ename='諸葛亮' 
-- 開啟事務 
begin 
update employee set sal=30000 where ename='諸葛亮' 
select * from employee; 
delete from employee where job='銷售員' 
-- 回滾 資料會恢復到修改和洗掉前 
rollback; 
-- 提交 如果提交，則上面的臨時修改和洗掉會直接作用再真實表中，實作修改和洗掉 
commit 
查詢事務是否默認提交： 
select @@autocommit; 1 : 自動提交 0 ：手動提交 
修改事務的提交方式： 
set @@autocommit = 值; 
設定保存點： 
savepoint 保存點名; 
回滾到保存點： 
rollback to 保存點; 
-- 8上班 設定保存點a 
savepoint a; 
update employee set sal=8000 where ename='諸葛亮' 
-- 9 設定保存點b 
savepoint b; 
update employee set sal=9000 where ename='諸葛亮' 
-- 10 設定保存點c 
savepoint c; 
update employee set sal=10000 where ename='諸葛亮' 
-- 11 發現10點后的DML有錯誤，回滾到c保存點 
select * from employee; 
rollback to c; 
-- 都成功，則提交事務即可
Commit；

十一、權限：

一個用戶是否擁有操作表的能力
權限串列
Insert
Select
Update
Delect
All
授權和撤回權利
表操作：
資料庫.表名
資料庫.*
.*
為用戶賦予權限：
Grant 權限列名 on 資料庫.表名 to ’用戶名’@’主機’
從用戶中撤回權限：
Revoke 權限列名 on 資料庫.表名 from ’用戶名’@’主機’

轉載請註明出處，本文鏈接：https://www.uj5u.com/shujuku/243365.html

標籤：其他

上一篇：SQL Server死鎖報錯分析

下一篇：詳細講解MySQL（一）：字符集、資料型別、列屬性、SELECT、UNION、子查詢、連接查詢、TRUNCATE

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C＃(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • GPU虛擬機創建時間深度優化

    **?桔妹導讀：**GPU虛擬機實體創建速度慢是公有云面臨的普遍問題，由于通常情況下創建虛擬機屬于低頻操作而未引起業界的重視，實際生產中還是存在對GPU實體創建時間有苛刻要求的業務場景。本文將介紹滴滴云在解決該問題時的思路、方法、并展示最終的優化成果。 從公有云服務商那里購買過虛擬主機的資深用戶，一 ......

    uj5u.com 2020-09-10 06:09:13 more
  • 可編程網卡芯片在滴滴云網路的應用實踐

    **?桔妹導讀：**隨著云規模不斷擴大以及業務層面對延遲、帶寬的要求越來越高，采用DPDK 加速網路報文處理的方式在橫向縱向擴展都出現了局限性。可編程芯片成為業界熱點。本文主要講述了可編程網卡芯片在滴滴云網路中的應用實踐，遇到的問題、帶來的收益以及開源社區貢獻。 #1. 資料中心面臨的問題 隨著滴滴 ......

    uj5u.com 2020-09-10 06:10:21 more
  • 滴滴資料通道服務演進之路

    **?桔妹導讀：**滴滴資料通道引擎承載著全公司的資料同步，為下游實時和離線場景提供了必不可少的源資料。隨著任務量的不斷增加，資料通道的整體架構也隨之發生改變。本文介紹了滴滴資料通道的發展歷程，遇到的問題以及今后的規劃。 #1. 背景 資料，對于任何一家互聯網公司來說都是非常重要的資產，公司的大資料 ......

    uj5u.com 2020-09-10 06:11:05 more
  • 滴滴AI Labs斬獲國際機器翻譯大賽中譯英方向世界第三

    **桔妹導讀：**深耕人工智能領域，致力于探索AI讓出行更美好的滴滴AI Labs再次斬獲國際大獎，這次獲獎的專案是什么呢？一起來看看詳細報道吧！ 近日，由國際計算語言學協會ACL（The Association for Computational Linguistics）舉辦的世界最具影響力的機器 ......

    uj5u.com 2020-09-10 06:11:29 more
  • MPP (Massively Parallel Processing)大規模并行處理

    1、什么是mpp？ MPP (Massively Parallel Processing)，即大規模并行處理，在資料庫非共享集群中，每個節點都有獨立的磁盤存盤系統和記憶體系統，業務資料根據資料庫模型和應用特點劃分到各個節點上，每臺資料節點通過專用網路或者商業通用網路互相連接，彼此協同計算，作為整體提供 ......

    uj5u.com 2020-09-10 06:11:41 more
  • 滴滴資料倉庫指標體系建設實踐

    **桔妹導讀：**指標體系是什么？如何使用OSM模型和AARRR模型搭建指標體系？如何統一流程、規范化、工具化管理指標體系？本文會對建設的方法論結合滴滴資料指標體系建設實踐進行解答分析。 #1. 什么是指標體系 ##1.1 指標體系定義 指標體系是將零散單點的具有相互聯系的指標，系統化的組織起來，通 ......

    uj5u.com 2020-09-10 06:12:52 more
  • 單表千萬行資料庫 LIKE 搜索優化手記

    我們經常在資料庫中使用 LIKE 運算子來完成對資料的模糊搜索，LIKE 運算子用于在 WHERE 子句中搜索列中的指定模式。 如果需要查找客戶表中所有姓氏是“張”的資料，可以使用下面的 SQL 陳述句： SELECT * FROM Customer WHERE Name LIKE '張%' 如果需要 ......

    uj5u.com 2020-09-10 06:13:25 more
  • 滴滴Ceph分布式存盤系統優化之鎖優化

    **桔妹導讀：**Ceph是國際知名的開源分布式存盤系統，在工業界和學術界都有著重要的影響。Ceph的架構和演算法設計發表在國際系統領域頂級會議OSDI、SOSP、SC等上。Ceph社區得到Red Hat、SUSE、Intel等大公司的大力支持。Ceph是國際云計算領域應用最廣泛的開源分布式存盤系統， ......

    uj5u.com 2020-09-10 06:14:51 more
  • es~通過ElasticsearchTemplate進行聚合~嵌套聚合

    之前寫過《es~通過ElasticsearchTemplate進行聚合操作》的文章，這一次主要寫一個嵌套的聚合，例如先對sex集合，再對desc聚合，最后再對age求和，共三層嵌套。 Aggregations的部分特性類似于SQL語言中的group by，avg，sum等函式,Aggregation ......

    uj5u.com 2020-09-10 06:14:59 more
  • 爬蟲日志監控 -- Elastc Stack（ELK）部署

    傻瓜式部署，只需替換IP與用戶 導讀： 現ELK四大組件分別為：Elasticsearch（核心）、logstash（處理）、filebeat（采集）、kibana（可視化） 下載均在https://www.elastic.co/cn/downloads/下tar包，各組件版本最好一致，配合fdm會 ......

    uj5u.com 2020-09-10 06:15:05 more
最新发布
  • day02-2-商鋪查詢快取

    功能02-商鋪查詢快取 3.商鋪詳情快取查詢 3.1什么是快取？ 快取就是資料交換的緩沖區（稱作Cache），是存盤資料的臨時地方，一般讀寫性能較高。 快取的作用： 降低后端負載 提高讀寫效率，降低回應時間 快取的成本： 資料一致性成本 代碼維護成本 運維成本 3.2需求說明 如下，當我們點擊商店詳 ......

    uj5u.com 2023-04-20 08:33:24 more
  • MySQL中binlog備份腳本分享

    關于MySQL的二進制日志（binlog），我們都知道二進制日志（binlog）非常重要，尤其當你需要point to point災難恢復的時侯，所以我們要對其進行備份。關于二進制日志（binlog)的備份,可以基于flush logs方式先切換binlog，然后拷貝&壓縮到到遠程服務器或本地服務器 ......

    uj5u.com 2023-04-20 08:28:06 more
  • day02-短信登錄

    功能實作02 2.功能01-短信登錄 2.1基于Session實作登錄 2.1.1思路分析 2.1.2代碼實作 2.1.2.1發送短信驗證碼 發送短信驗證碼： 發送驗證碼的介面為：http://127.0.0.1:8080/api/user/code?phone=xxxxx<手機號> 請求方式：PO ......

    uj5u.com 2023-04-20 08:27:27 more
  • 快取與資料庫雙寫一致性幾種策略分析

    本文將對幾種快取與資料庫保證資料一致性的使用方式進行分析。為保證高并發性能，以下分析場景不考慮執行的原子性及加鎖等強一致性要求的場景，僅追求最終一致性。 ......

    uj5u.com 2023-04-20 08:26:48 more
  • sql陳述句優化

    問題查找及措施 問題查找 需要找到具體的代碼，對其進行一對一優化，而非一直把關注點放在服務器和sql平臺 降低簡化每個事務中處理的問題，盡量不要讓一個事務拖太長的時間 例如檔案上傳時，應將檔案上傳這一步放在事務外面 微軟建議 4.啟動sql定時執行計劃 怎么啟動sqlserver代理服務-百度經驗 ......

    uj5u.com 2023-04-20 08:26:35 more
  • 云時代，MySQL到ClickHouse資料同步產品對比推薦

    ClickHouse 在執行分析查詢時的速度優勢很好的彌補了MySQL的不足，但是對于很多開發者和DBA來說，如何將MySQL穩定、高效、簡單的同步到 ClickHouse 卻很困難。本文對比了 NineData、MaterializeMySQL（ClickHouse自帶）、Bifrost 三款產品... ......

    uj5u.com 2023-04-20 08:26:29 more
  • sql陳述句優化

    問題查找及措施 問題查找 需要找到具體的代碼，對其進行一對一優化，而非一直把關注點放在服務器和sql平臺 降低簡化每個事務中處理的問題，盡量不要讓一個事務拖太長的時間 例如檔案上傳時，應將檔案上傳這一步放在事務外面 微軟建議 4.啟動sql定時執行計劃 怎么啟動sqlserver代理服務-百度經驗 ......

    uj5u.com 2023-04-20 08:25:13 more
  • Redis 報”OutOfDirectMemoryError“（堆外記憶體溢位)

    Redis 報錯“OutOfDirectMemoryError（堆外記憶體溢位) ”問題如下： 一、報錯資訊： 使用 Redis 的業務介面 ，產生 OutOfDirectMemoryError（堆外記憶體溢位），如圖： 格式化后的報錯資訊： { "timestamp": "2023-04-17 22: ......

    uj5u.com 2023-04-20 08:24:54 more
  • day02-2-商鋪查詢快取

    功能02-商鋪查詢快取 3.商鋪詳情快取查詢 3.1什么是快取？ 快取就是資料交換的緩沖區（稱作Cache），是存盤資料的臨時地方，一般讀寫性能較高。 快取的作用： 降低后端負載 提高讀寫效率，降低回應時間 快取的成本： 資料一致性成本 代碼維護成本 運維成本 3.2需求說明 如下，當我們點擊商店詳 ......

    uj5u.com 2023-04-20 08:24:03 more
  • day02-短信登錄

    功能實作02 2.功能01-短信登錄 2.1基于Session實作登錄 2.1.1思路分析 2.1.2代碼實作 2.1.2.1發送短信驗證碼 發送短信驗證碼： 發送驗證碼的介面為：http://127.0.0.1:8080/api/user/code?phone=xxxxx<手機號> 請求方式：PO ......

    uj5u.com 2023-04-20 08:23:11 more

Copyright © 2010-2020 有解無憂