前言 面試官:同學,你能說說Mysql 快取池嗎? 是CPP啊:啊,這么難嗎,容我組織一下語言。(內心OS:這TM還不簡單?我能給你扯半小時!) 面試官:可以,給你一分鐘時間想一想吧。 ....一分鐘后.... 是CPP啊:我準備好了,你可聽好,我要開始表演了。 為什么要有快取池? MySQL 的 ......
2021-01-11 more數倉建模首推書籍《資料倉庫工具箱:維度建模權威指南》,本篇文章參考此書而作。 文章首發公眾號:五分鐘學大資料,公眾號中發送“維度建模”即可獲取此書籍第三版電子書 先來介紹下此書,此書是基于作者 60 多年的實際業務環境而總結的經驗及教訓,為讀者提供正式的維度設計和開發技術。面向數倉和BI設計人員,書 ......
2021-01-11 more概要 資料庫切換角色 重新創建資料庫 已有資料庫 概要 postgresql 默認的賬戶 postgres 權限太高, 當一個資料庫服務上有多個專案的資料庫時, 大家都通過 postgres 賬戶來連接資料庫安全性太差. 最好的方式是, 每個資料庫有自己的賬戶, 該賬戶只能查看特定的資料庫, 無法訪 ......
2021-01-11 more前言 面試官:同學,你能說說Mysql 快取池嗎? 是CPP啊:啊,這么難嗎,容我組織一下語言。(內心OS:這TM還不簡單?我能給你扯半小時!) 面試官:可以,給你一分鐘時間想一想吧。 ....一分鐘后.... 是CPP啊:我準備好了,你可聽好,我要開始表演了。 為什么要有快取池? MySQL 的 ......
2021-01-11 more數倉建模首推書籍《資料倉庫工具箱:維度建模權威指南》,本篇文章參考此書而作。 文章首發公眾號:五分鐘學大資料,公眾號中發送“維度建模”即可獲取此書籍第三版電子書 先來介紹下此書,此書是基于作者 60 多年的實際業務環境而總結的經驗及教訓,為讀者提供正式的維度設計和開發技術。面向數倉和BI設計人員,書 ......
2021-01-11 more索引具有時間和空間上的代價。空間上的代價:每建立一個索引,都會建立一棵B+樹,每一棵B+樹的每個節點都是一個資料頁,一個資料頁會默認占用16KB的存盤空間,一棵很大的B+樹由很多資料頁組成,這將占用很大一片空間。時間上的代價:每當對表中的資料進行增刪改查操作時,都需要修改各個B+樹索引。存盤引擎需要額外的時間進行頁面 分裂,頁面回收等操作,以維護節點和記錄的排序。掃描區間和邊界條件select * from single_table where id>=2 and id<=100;比...
2021-01-11 more什么是MyCatMycat 是什么?從定義和分類來看,它是一個開源的分布式資料庫系統,是一個實作了MySQL 協議的的Server,前端用戶可以把它看作是一個資料庫代理,用MySQL 客戶端工具和命令列訪問,而其后端可以用MySQL 原生(Native)協議與多個MySQL 服務器通信,也可以用JDBC 協議與大多數主流資料庫服務器通信,其核心功能是分表分庫,即將一個大表水平分割為N 個小表,存盤在后端MySQL 服務器里或者其他資料庫里。Mycat 發展到目前的版本,已經不是一個單純的MySQL...
2021-01-11 more層級關系:操作資料庫 > 操作資料庫中的表 > 操作資料庫中表的資料學習技巧:對照sqlyog的可視化對比歷史記錄來查看操作的代碼程序。固定的語法或者關鍵字強行記住精通。mysql關鍵字不區分大小寫1.操作資料庫(了解和熟練)1.1創建資料庫:CREATE DATABASE [IF NOT EXISTS] `資料庫昵稱`-- CREATE創建 IF NOT EXISTS如果不存在的話([]代表可選)。 1.2洗掉資料庫DROP DATABASE [IF EXIST....
2021-01-11 more一、條件查詢介紹語法:select 查詢串列 from 表名 where 篩選條件;分類:一、按條件運算式篩選簡單條件運算子:> < = != <> <= >=二、按邏輯運算式篩選邏輯運算子:作用:用于連接條件運算式&& || !and or not&&和and:兩個條件都為true,結果true,反之為false||或or:只要有一個條件為true,結果為true,反之為false!或not:如果連接的條件本身為...
2021-01-11 moreHBase是一種分布式、可擴展、支持海量結構化資料存盤的NoSQL資料庫。HBase在Hadoop之上提供了類似于Bigtable的能力,基于列存盤模式的而不是基于行的模式。存盤資料特點:非結構化或者松散的半結構化資料,存盤大表自然是需要具備水平擴展的能力,基于服務集群處理海量龐大資料。 ......
2021-01-11 more**?桔妹導讀:**GPU虛擬機實體創建速度慢是公有云面臨的普遍問題,由于通常情況下創建虛擬機屬于低頻操作而未引起業界的重視,實際生產中還是存在對GPU實體創建時間有苛刻要求的業務場景。本文將介紹滴滴云在解決該問題時的思路、方法、并展示最終的優化成果。 從公有云服務商那里購買過虛擬主機的資深用戶,一 ......
uj5u.com 2020-09-10 06:09:13 more**?桔妹導讀:**隨著云規模不斷擴大以及業務層面對延遲、帶寬的要求越來越高,采用DPDK 加速網路報文處理的方式在橫向縱向擴展都出現了局限性。可編程芯片成為業界熱點。本文主要講述了可編程網卡芯片在滴滴云網路中的應用實踐,遇到的問題、帶來的收益以及開源社區貢獻。 #1. 資料中心面臨的問題 隨著滴滴 ......
uj5u.com 2020-09-10 06:10:21 more**?桔妹導讀:**滴滴資料通道引擎承載著全公司的資料同步,為下游實時和離線場景提供了必不可少的源資料。隨著任務量的不斷增加,資料通道的整體架構也隨之發生改變。本文介紹了滴滴資料通道的發展歷程,遇到的問題以及今后的規劃。 #1. 背景 資料,對于任何一家互聯網公司來說都是非常重要的資產,公司的大資料 ......
uj5u.com 2020-09-10 06:11:05 more**桔妹導讀:**深耕人工智能領域,致力于探索AI讓出行更美好的滴滴AI Labs再次斬獲國際大獎,這次獲獎的專案是什么呢?一起來看看詳細報道吧! 近日,由國際計算語言學協會ACL(The Association for Computational Linguistics)舉辦的世界最具影響力的機器 ......
uj5u.com 2020-09-10 06:11:29 more1、什么是mpp? MPP (Massively Parallel Processing),即大規模并行處理,在資料庫非共享集群中,每個節點都有獨立的磁盤存盤系統和記憶體系統,業務資料根據資料庫模型和應用特點劃分到各個節點上,每臺資料節點通過專用網路或者商業通用網路互相連接,彼此協同計算,作為整體提供 ......
uj5u.com 2020-09-10 06:11:41 more**桔妹導讀:**指標體系是什么?如何使用OSM模型和AARRR模型搭建指標體系?如何統一流程、規范化、工具化管理指標體系?本文會對建設的方法論結合滴滴資料指標體系建設實踐進行解答分析。 #1. 什么是指標體系 ##1.1 指標體系定義 指標體系是將零散單點的具有相互聯系的指標,系統化的組織起來,通 ......
uj5u.com 2020-09-10 06:12:52 more我們經常在資料庫中使用 LIKE 運算子來完成對資料的模糊搜索,LIKE 運算子用于在 WHERE 子句中搜索列中的指定模式。 如果需要查找客戶表中所有姓氏是“張”的資料,可以使用下面的 SQL 陳述句: SELECT * FROM Customer WHERE Name LIKE '張%' 如果需要 ......
uj5u.com 2020-09-10 06:13:25 more**桔妹導讀:**Ceph是國際知名的開源分布式存盤系統,在工業界和學術界都有著重要的影響。Ceph的架構和演算法設計發表在國際系統領域頂級會議OSDI、SOSP、SC等上。Ceph社區得到Red Hat、SUSE、Intel等大公司的大力支持。Ceph是國際云計算領域應用最廣泛的開源分布式存盤系統, ......
uj5u.com 2020-09-10 06:14:51 more之前寫過《es~通過ElasticsearchTemplate進行聚合操作》的文章,這一次主要寫一個嵌套的聚合,例如先對sex集合,再對desc聚合,最后再對age求和,共三層嵌套。 Aggregations的部分特性類似于SQL語言中的group by,avg,sum等函式,Aggregation ......
uj5u.com 2020-09-10 06:14:59 more傻瓜式部署,只需替換IP與用戶 導讀: 現ELK四大組件分別為:Elasticsearch(核心)、logstash(處理)、filebeat(采集)、kibana(可視化) 下載均在https://www.elastic.co/cn/downloads/下tar包,各組件版本最好一致,配合fdm會 ......
uj5u.com 2020-09-10 06:15:05 moreMysql復習的一個小總結,用xmind寫的。(字數沒有都不給我發博客😹) 下面是一些備注 子查詢 MySQL子查詢稱為內部查詢,而包含子查詢的查詢稱為外部查詢。 子查詢可以在使用運算式的任何地方使用,并且必須在括號中關閉。 視圖 基本語法可以使用 CREATE VIEW 陳述句來創建視圖。 語法格 ......
uj5u.com 2022-05-09 07:13:07 more?大資料概述 在大資料這個概念興起之前,資訊系統存盤資料的方法主要是我們熟知的關系型資料庫,關系型資料庫,關系型模型之父 Edgar F. Codd,在 1970 年 Communications of ACM 上發表了《大型共享資料庫資料的關系模型》的經典論文,從此之后關系模型的語意設計達到了 4 ......
uj5u.com 2022-05-09 07:13:01 more一、下載安裝IDEA IDEA2020.2.3版本:https://www.cnblogs.com/liugp/p/13868346.html 最新版本安裝詳情請參考:https://www.jb51.net/article/196349.htm 二、搭建本地hadoop環境(window10) 可 ......
uj5u.com 2022-05-09 07:12:17 moreMySQL8新增降序索引 桃花塢里桃花庵,桃花庵里桃花仙。桃花仙人種桃樹,又摘桃花賣酒錢。 一、MySQL5.7 降序索引 MySQL在語法上很早就已經支持降序索引,但實際上創建的卻仍然是升序索引,如下MySQL 5.7 所示,row2欄位降序,但是從show create table看 row2 ......
uj5u.com 2022-05-09 07:11:36 moreLinux環境下,MySQL的主要目錄及其作用、資料庫和資料表在檔案系統上的存盤結構。 ......
uj5u.com 2022-05-09 07:11:28 moreMysql復習的一個小總結,用xmind寫的。(字數沒有都不給我發博客😹) 下面是一些備注 子查詢 MySQL子查詢稱為內部查詢,而包含子查詢的查詢稱為外部查詢。 子查詢可以在使用運算式的任何地方使用,并且必須在括號中關閉。 視圖 基本語法可以使用 CREATE VIEW 陳述句來創建視圖。 語法格 ......
uj5u.com 2022-05-09 07:10:34 moreMySQL8新增降序索引 桃花塢里桃花庵,桃花庵里桃花仙。桃花仙人種桃樹,又摘桃花賣酒錢。 一、MySQL5.7 降序索引 MySQL在語法上很早就已經支持降序索引,但實際上創建的卻仍然是升序索引,如下MySQL 5.7 所示,row2欄位降序,但是從show create table看 row2 ......
uj5u.com 2022-05-09 07:10:25 moreLinux環境下,MySQL的主要目錄及其作用、資料庫和資料表在檔案系統上的存盤結構。 ......
uj5u.com 2022-05-09 07:10:19 more?大資料概述 在大資料這個概念興起之前,資訊系統存盤資料的方法主要是我們熟知的關系型資料庫,關系型資料庫,關系型模型之父 Edgar F. Codd,在 1970 年 Communications of ACM 上發表了《大型共享資料庫資料的關系模型》的經典論文,從此之后關系模型的語意設計達到了 4 ......
uj5u.com 2022-05-09 07:10:05 more一、下載安裝IDEA IDEA2020.2.3版本:https://www.cnblogs.com/liugp/p/13868346.html 最新版本安裝詳情請參考:https://www.jb51.net/article/196349.htm 二、搭建本地hadoop環境(window10) 可 ......
uj5u.com 2022-05-09 07:09:25 more