主頁 > 資料庫 > 視圖和臨時表哪個查詢效率高?

視圖和臨時表哪個查詢效率高?

2020-09-11 23:44:17 資料庫

在做查詢報表的時候,經常有一些資料是需要關聯的,比如 品類集合。
比如銷售報表、采購報表、庫存報表等,都經常需要關聯這個品類集合,那么我之前都是在每個查詢報表中,把品類集合插入到臨時表后進行關聯的。如果我把這個品類集合做成一個視圖,后續的報表直接關聯這個視圖,查詢效率會提高嗎?
哪種方法比較好?或者有無更好的方法推薦一下?謝謝

uj5u.com熱心網友回復:

具體情況 具體分析吧!
   但我傾向于臨時表!

uj5u.com熱心網友回復:

up一下~~

uj5u.com熱心網友回復:

如果是確定數目的資料,我傾向視圖

如果是不確定數目的大量資料,我傾向臨時表

比如,從一個800萬資料的表中篩選出的記錄約10萬,參與到另一個表的關聯查詢,用臨時表比較好

簡單來說,子查詢復雜的,會對查詢計劃造成阻礙的,用臨時表

uj5u.com熱心網友回復:

可能我才疏學淺,視圖就是SQL只是封裝了一下,對效率沒有半點提高

uj5u.com熱心網友回復:

參考 4 樓 sxq129601 的回復:
可能我才疏學淺,視圖就是SQL只是封裝了一下,對效率沒有半點提高


在視圖中可以指定參考的索引,有時候自動計劃的索引并不合適,這個時候用視圖固定下索引比較好

嗯,個人見解

uj5u.com熱心網友回復:

加到 200,推薦置頂。

歡迎大家討論!

uj5u.com熱心網友回復:

應該是臨時表效率高

uj5u.com熱心網友回復:

對于報表來說, 關聯比較多, 邏輯復雜, 資料量大, 這種情況只有臨時表是最合適的。
但臨時表, 最好也加一下索引, 便于提高效率。

至于視圖中強制用索引, 有用處, 但對報表來說改善并不明顯。 何況也普通sql也是可以指定索引的。
而且指定索引會帶來一些問題, 比如索引的洗掉,修改就會造成原有查詢出錯, 所以不建議在查詢寫死索引。

uj5u.com熱心網友回復:

總體上臨時表要快些

uj5u.com熱心網友回復:

兩者是不同的東西,其實我覺得沒啥可比性,都有自己的應用場景。
但是樓主說的這種情況,要說這倆哪個更好,推薦臨時表。

uj5u.com熱心網友回復:

其實自己算算就明白了

假如有兩個表,表A500萬資料,表B800萬資料,這兩個表都有各自的篩選條件,然后關聯查詢

在一般情況下,執行計劃都是先關聯,也就是產生遍歷了,最大資料量變成了500萬*800萬,然后在用關聯條件匹配,然后執行兩個條件

如果用臨時表,先把各自的條件執行了存入到臨時,這個時候資料量就會小很多很多,自然效率就上來了

uj5u.com熱心網友回復:

可以看看,學習學習

uj5u.com熱心網友回復:

在這里好好學習一下

uj5u.com熱心網友回復:

在這里好好學習一下

uj5u.com熱心網友回復:

根據經驗是臨時表比視圖快。

uj5u.com熱心網友回復:

還是要看應用場景,不能一概而論

1、如果你對同一批資料進行多次查詢,那肯定就是臨時表了,畢竟臨時表只需要查一次所有資料,把多張大表關聯變成一張小表,之后的多次查詢都不用再去動大表,這種情況下肯定是臨時表了

2、臨時表需要手動維護,維護時要寫入,如果資料量大時,本身插入臨時表就吃了大量的資源,而且使用的次數還不多,可能你插入這批資料,只使用一兩次,這時候可以選擇視圖,畢竟你查詢臨時資料時,可能就已經把資料查出來了,又只使用一兩次,何必再寫臨時表?

所以不能一概而論的,要看你準備干啥

uj5u.com熱心網友回復:

可以看看,學習學習

uj5u.com熱心網友回復:

可以看看交流交流 學習

uj5u.com熱心網友回復:

視圖吧 感覺視圖效果會更好些

uj5u.com熱心網友回復:

好好學習一下

uj5u.com熱心網友回復:

哪個快用哪個,這個還用說嘛,環境不同結果肯定也不同

uj5u.com熱心網友回復:

資料多用臨時表!

uj5u.com熱心網友回復:

實際使用時臨時表多些

uj5u.com熱心網友回復:

000000看看

uj5u.com熱心網友回復:

學習學習下~~

uj5u.com熱心網友回復:

視圖就是sql的封裝,方便的是操作,對性能沒有提高

uj5u.com熱心網友回復:

select * from(
select * from b 
left join (
select * from a where xxx) c on b.xx =c.xx) d
left join f on xxx  這樣寫個視圖 不行么

uj5u.com熱心網友回復:

我認為效率問題值得討論。效率高低, 我認為只有放在特定context下討論才有意義。

它取決于SQL選取的執行計劃,索引的建立,表關系,資料量級以及企業Reporting的具體需求

我認為視圖的貢獻在于模塊化,便于企業中其他人使用。視圖在實際操作中,我記得是直接查找底層表的。不過,要注意在建立視圖時不要偷懶,要列明table.columns并添加shema binding和check option以防止不可預期的insert and delete破壞資料完整性

最有可能優化的地方是如何聯接各表 / 聯接各表的順序。 哪些表要放在左側 以及是否有相關查詢,是否可以使用開窗函式 是優化的重點。

uj5u.com熱心網友回復:

必須是臨時表快啊,視圖這玩意就圖個方便,資料量大了不能搞視圖。 如果資料量很小,且固定不會增長,視圖確實方便

uj5u.com熱心網友回復:

我覺得還是臨時表好些吧

uj5u.com熱心網友回復:

臨時表好些哦

uj5u.com熱心網友回復:

選邊站:臨時表

uj5u.com熱心網友回復:

也可以用 CTE 啊

uj5u.com熱心網友回復:

臨時表比較快。

uj5u.com熱心網友回復:

臨時表,資料已經在記憶體中;視圖,只是減少了查詢陳述句的檢查時間。

uj5u.com熱心網友回復:

如何賺取積分,求版主告訴我

uj5u.com熱心網友回復:

視圖效率更高

uj5u.com熱心網友回復:

根據資料量和應用場景,具體情況具體分析。看樓主表達的一些情況,估計用臨時表更好,建議兩個方法使用對比下,測驗下結果。

uj5u.com熱心網友回復:

視圖的設計就是為了查詢放便,將你經常查詢的資料,放在一張虛擬表中,并不占用記憶體。而你自己去建立一張臨時表,這是沒必要的。你可以了解一下視圖的定義。它就是為了查詢放便產生的。

uj5u.com熱心網友回復:

臨時表效率高一點吧

uj5u.com熱心網友回復:

如果非要比效率的話,肯定臨時表快。
視圖只是一個資料的整理,并沒有額外存盤,不能建立索引,只能用原表的索引,我的理解就是資料視窗,從這個視窗看資料而已。
臨時表是將結果存盤起來的,可以額外建立索引,資料大了有合適索引肯定快。
但是如果你每次都是select * 就沒區別了。而且臨時表,就是臨時用的嘛。一般生命周期就只是一個小流程,一個存盤程序中。視圖則是永久的一個視窗。

uj5u.com熱心網友回復:

視圖贊同于直接把視圖陳述句直接放到你的查詢中
臨時表意味著你改變了執行程序,先把視圖的查詢結果放到臨時表,再基于臨時表做查詢
所以兩者通常沒有可比性,因為它們的執行程序已經不同了,應該根據實際情況選擇
簡單地說
create view v as select * from tb where id=1;
go
select * from v where a=1;
它等同于:
select * from tb where id=1 and a=1;
而用臨時表,意味著一定是先 id=1的結果存到臨時表,再基于臨時表取 a=1
如果你的表資料量很大,id=1 并不能有效過濾資料,那么這個時候視圖肯定更優勢
但如果你的查詢非常復雜,那么用視圖無法簡化查詢,這個時候的查詢方案可能會非常多,那么選擇的查詢方案可能不是最優的,這個時候用臨時表干預一下可能會獲得列好的效果

個人的看法是除非明確知道臨時表能提升性能,否則直接用視圖
當然,這里的視圖指的是普通視圖,索引視圖的情況而又不同,索引視圖在一定程度上相當于臨時表了,對于資料變化幅度小,視圖結果重復使用率多的情況,索引視圖應該優先考慮

uj5u.com熱心網友回復:

真的很好,謝謝了。真的很好,謝謝了。真的很好,謝謝了。

uj5u.com熱心網友回復:

支持一下
支持一下,非常有用,感謝好像

uj5u.com熱心網友回復:

開始學時用過視圖,后來都用臨時表了!學習中!多謝分享!

uj5u.com熱心網友回復:

要看對表的查詢頻率,如果頻率高,建議使用視圖,否則使用臨時表就可以。

uj5u.com熱心網友回復:

視圖吧,個人認為

uj5u.com熱心網友回復:

臨時表要高一些

uj5u.com熱心網友回復:

具體情況具體分析被

uj5u.com熱心網友回復:

視圖更多是一種多模塊間共享的資料標準,臨時表是內部自定義的,放一塊兒比效率不合適吧

非要比的話支持臨時表會在一些特定環境下高一些,大多數情況下差別不大。

uj5u.com熱心網友回復:

視圖吧~~~~

uj5u.com熱心網友回復:

版主大大寫的都很精彩。
應當說,各有妙用。只是要如何發揮最大效率,就看你的手段了。

存在便是道理。學習了

uj5u.com熱心網友回復:

視圖吧,視圖優化了效率

uj5u.com熱心網友回復:

哈哈哈零時表

uj5u.com熱心網友回復:

過來學習學習

uj5u.com熱心網友回復:

視圖更多是一種多模塊間共享的資料標準
,臨時表是內部自定義的。非要比的話支持臨時表會在一些特定環境下高一些,大多數情況下差別不大。

uj5u.com熱心網友回復:

在這里好好學習一下

uj5u.com熱心網友回復:

啃你 rect.width = 100;
System.out.println(rect.width);
rect.height = 200;
System.out.println(rect.height = 200);
Rectangle rect2 = new Rectangle();
rect2.width = 10;
System.out.println(rect2.width);
rect2.height =20;
System.out.println(rect2.height);

uj5u.com熱心網友回復:

    public void onNoButtonClick(View view)
{
TextView textView = (TextView) findViewById(R.id.mainTextView1);
textView.setText("Wrong!");
}

uj5u.com熱心網友回復:

具體情況具體分析

uj5u.com熱心網友回復:

這個看情況吧

uj5u.com熱心網友回復:

視圖最好,因為物理視圖效率比較高。

uj5u.com熱心網友回復:

個人感覺臨時表快

uj5u.com熱心網友回復:

具體情況具體分析。我習慣用視圖。

uj5u.com熱心網友回復:

一個查詢寫不出來嗎?我很少在專案中用臨時表,當然你說的視圖我也很少用。即使很復雜的動態報表,感覺也能一個存盤程序搞定!

uj5u.com熱心網友回復:

臨時表比較好

uj5u.com熱心網友回復:

參考 75 樓 gw6328 的回復:
一個查詢寫不出來嗎?我很少在專案中用臨時表,當然你說的視圖我也很少用。即使很復雜的動態報表,感覺也能一個存盤程序搞定!


事實上,臨時表和視圖都很有用

比如一個無限級分類,如果想獲得某一個分類的完整路徑,用sql查詢當然可以,但每次都寫一遍很麻煩,而且,不是很標準,當結構略有調整,需要修改的地方就太多了,這個時候通常用視圖來代替大部分查詢指令

另一個就是在很大的資料量上查詢,比如300萬資料,查詢正文中包含某個關鍵字的內容,且滿足其他條件,由于表結構相對欄位較多,用復合了很多欄位的索引肯定不合適,這個時候一般都是用臨時表,將符合關鍵字的主鍵值扔到臨時表后,再inner join原始表查詢,效率比一個指令寫下所有查詢高出太多了,沒有可比性了都

uj5u.com熱心網友回復:

參考 78 樓 文盲老顧 的回復:
Quote: 參考 75 樓 gw6328 的回復:

一個查詢寫不出來嗎?我很少在專案中用臨時表,當然你說的視圖我也很少用。即使很復雜的動態報表,感覺也能一個存盤程序搞定!


事實上,臨時表和視圖都很有用

比如一個無限級分類,如果想獲得某一個分類的完整路徑,用sql查詢當然可以,但每次都寫一遍很麻煩,而且,不是很標準,當結構略有調整,需要修改的地方就太多了,這個時候通常用視圖來代替大部分查詢指令

另一個就是在很大的資料量上查詢,比如300萬資料,查詢正文中包含某個關鍵字的內容,且滿足其他條件,由于表結構相對欄位較多,用復合了很多欄位的索引肯定不合適,這個時候一般都是用臨時表,將符合關鍵字的主鍵值扔到臨時表后,再inner join原始表查詢,效率比一個指令寫下所有查詢高出太多了,沒有可比性了都


每次都寫一遍有點搞笑哈,如果經常用到結構性的東西就不是視圖和臨時表的討論了,為什么不直接一個表?你要明白臨時表是用之前要寫,用完要處理掉,如果不處理的或者長期保存的為什么要這樣?

還有一點我表達的主要是實際的情況,如果經常視圖,臨時表代替查詢的,我只能說sql寫得很low.確實見過,比如一個存盤程序上千行的東西,但是讓別人改造一下,一個查詢搞定!一個查詢在索引的使用方面我感覺比臨時表要好,因為用的就是原生,你非要用臨時表寫資料,建索引,再查詢,再銷毀,我感覺很累!干脆就建個表得了!

再說一個視圖吧,其實微軟也推薦了視圖的一些主要的應用場景,比如欄位權限,開窗。或者對于維護性的東西不原意改表建表,這們確實省很大部作業。系統對接,開放表結構用視圖確實比較方便。
但是用來純為了當成子查詢,我認為沒有什么優化的效果。

uj5u.com熱心網友回復:

參考 79 樓 gw6328 的回復:
Quote: 參考 78 樓 文盲老顧 的回復:

Quote: 參考 75 樓 gw6328 的回復:

一個查詢寫不出來嗎?我很少在專案中用臨時表,當然你說的視圖我也很少用。即使很復雜的動態報表,感覺也能一個存盤程序搞定!


事實上,臨時表和視圖都很有用

比如一個無限級分類,如果想獲得某一個分類的完整路徑,用sql查詢當然可以,但每次都寫一遍很麻煩,而且,不是很標準,當結構略有調整,需要修改的地方就太多了,這個時候通常用視圖來代替大部分查詢指令

另一個就是在很大的資料量上查詢,比如300萬資料,查詢正文中包含某個關鍵字的內容,且滿足其他條件,由于表結構相對欄位較多,用復合了很多欄位的索引肯定不合適,這個時候一般都是用臨時表,將符合關鍵字的主鍵值扔到臨時表后,再inner join原始表查詢,效率比一個指令寫下所有查詢高出太多了,沒有可比性了都


每次都寫一遍有點搞笑哈,如果經常用到結構性的東西就不是視圖和臨時表的討論了,為什么不直接一個表?你要明白臨時表是用之前要寫,用完要處理掉,如果不處理的或者長期保存的為什么要這樣?

還有一點我表達的主要是實際的情況,如果經常視圖,臨時表代替查詢的,我只能說sql寫得很low.確實見過,比如一個存盤程序上千行的東西,但是讓別人改造一下,一個查詢搞定!一個查詢在索引的使用方面我感覺比臨時表要好,因為用的就是原生,你非要用臨時表寫資料,建索引,再查詢,再銷毀,我感覺很累!干脆就建個表得了!

再說一個視圖吧,其實微軟也推薦了視圖的一些主要的應用場景,比如欄位權限,開窗。或者對于維護性的東西不原意改表建表,這們確實省很大部作業。系統對接,開放表結構用視圖確實比較方便。
但是用來純為了當成子查詢,我認為沒有什么優化的效果。


好吧,來個實際點的命題

資料庫中存在文章表(50萬),產品表(300萬),企業表(10萬),綜合搜索,查詢出包含特定關鍵字的內容(關鍵字不可預知),以上3個表資料約40Gb以上,并發頻率約200次/秒,問怎么設計資料庫查詢效率較高,其中三個原始資料表的表結構不可變動,可以使用存盤程序、冗余表,觸發器等一些列你認為可以提高效率的東西

uj5u.com熱心網友回復:

參考 80 樓 文盲老顧 的回復:
Quote: 參考 79 樓 gw6328 的回復:

Quote: 參考 78 樓 文盲老顧 的回復:

Quote: 參考 75 樓 gw6328 的回復:

一個查詢寫不出來嗎?我很少在專案中用臨時表,當然你說的視圖我也很少用。即使很復雜的動態報表,感覺也能一個存盤程序搞定!


事實上,臨時表和視圖都很有用

比如一個無限級分類,如果想獲得某一個分類的完整路徑,用sql查詢當然可以,但每次都寫一遍很麻煩,而且,不是很標準,當結構略有調整,需要修改的地方就太多了,這個時候通常用視圖來代替大部分查詢指令

另一個就是在很大的資料量上查詢,比如300萬資料,查詢正文中包含某個關鍵字的內容,且滿足其他條件,由于表結構相對欄位較多,用復合了很多欄位的索引肯定不合適,這個時候一般都是用臨時表,將符合關鍵字的主鍵值扔到臨時表后,再inner join原始表查詢,效率比一個指令寫下所有查詢高出太多了,沒有可比性了都


每次都寫一遍有點搞笑哈,如果經常用到結構性的東西就不是視圖和臨時表的討論了,為什么不直接一個表?你要明白臨時表是用之前要寫,用完要處理掉,如果不處理的或者長期保存的為什么要這樣?

還有一點我表達的主要是實際的情況,如果經常視圖,臨時表代替查詢的,我只能說sql寫得很low.確實見過,比如一個存盤程序上千行的東西,但是讓別人改造一下,一個查詢搞定!一個查詢在索引的使用方面我感覺比臨時表要好,因為用的就是原生,你非要用臨時表寫資料,建索引,再查詢,再銷毀,我感覺很累!干脆就建個表得了!

再說一個視圖吧,其實微軟也推薦了視圖的一些主要的應用場景,比如欄位權限,開窗。或者對于維護性的東西不原意改表建表,這們確實省很大部作業。系統對接,開放表結構用視圖確實比較方便。
但是用來純為了當成子查詢,我認為沒有什么優化的效果。


好吧,來個實際點的命題

資料庫中存在文章表(50萬),產品表(300萬),企業表(10萬),綜合搜索,查詢出包含特定關鍵字的內容(關鍵字不可預知),以上3個表資料約40Gb以上,并發頻率約200次/秒,問怎么設計資料庫查詢效率較高,其中三個原始資料表的表結構不可變動,可以使用存盤程序、冗余表,觸發器等一些列你認為可以提高效率的東西
 
這個叫臨時表?
我假設你全部都要查詢,這種如果不考慮換其他型別資料庫,用空間換時間,提前把關鍵詞提取出來,我認為這種就是永久臨的表了。
但是我可以說你這個資料一點都不多。按你上面的回答是想提取關鍵字,寫入臨時表,再來查哦?

uj5u.com熱心網友回復:

問題在于,關鍵字不可預知,我在實際使用中,每天檢索的關鍵字超過幾萬個,你不可能為每個關鍵字建立永久性冗余表,那樣冗余資料的結構就算再簡單,資料量也會超過千億級別,效率不一定有提高

再一個就是,即便你建立了永久臨時表,即冗余表,維護這個冗余資料也是一個很占用資源的事情,每次修改以前的資訊,再按照幾十萬的關鍵字從新更新一遍永久臨時表,不太現實

當然,我這里是小成本,僅僅一個資料庫服務器的情況,如果你要用多組服務器,或者其他什么增加成本的方式解決,那就當我沒問

uj5u.com熱心網友回復:

我一般是固定格式的用視圖,否則用臨時表

uj5u.com熱心網友回復:

很多報表,多個存盤程序都會用到 品類集合, 把  品類集合 建成視圖相比于臨時表, 只是減少SQL代碼的重寫, 對效率提高不會有幫助

uj5u.com熱心網友回復:

結貼吧,就像高鐵和飛機哪個運輸效率高一樣,永遠沒有絕對的答案。

uj5u.com熱心網友回復:

臨時表比較快,把需要的資料提取出來再去關聯

uj5u.com熱心網友回復:

參考 4 樓 sxq129601的回復:
可能我才疏學淺,視圖就是SQL只是封裝了一下,對效率沒有半點提高

111同求,同詢問。。。。

uj5u.com熱心網友回復:

可能我才疏學淺,視圖就是SQL只是封裝了一下,對效率沒有半點提高

轉載請註明出處,本文鏈接:https://www.uj5u.com/shujuku/8390.html

標籤:應用實例

上一篇:SQL字符截取問題

下一篇:MyEclipse 的new里面沒有Servlet怎么辦?

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • GPU虛擬機創建時間深度優化

    **?桔妹導讀:**GPU虛擬機實體創建速度慢是公有云面臨的普遍問題,由于通常情況下創建虛擬機屬于低頻操作而未引起業界的重視,實際生產中還是存在對GPU實體創建時間有苛刻要求的業務場景。本文將介紹滴滴云在解決該問題時的思路、方法、并展示最終的優化成果。 從公有云服務商那里購買過虛擬主機的資深用戶,一 ......

    uj5u.com 2020-09-10 06:09:13 more
  • 可編程網卡芯片在滴滴云網路的應用實踐

    **?桔妹導讀:**隨著云規模不斷擴大以及業務層面對延遲、帶寬的要求越來越高,采用DPDK 加速網路報文處理的方式在橫向縱向擴展都出現了局限性。可編程芯片成為業界熱點。本文主要講述了可編程網卡芯片在滴滴云網路中的應用實踐,遇到的問題、帶來的收益以及開源社區貢獻。 #1. 資料中心面臨的問題 隨著滴滴 ......

    uj5u.com 2020-09-10 06:10:21 more
  • 滴滴資料通道服務演進之路

    **?桔妹導讀:**滴滴資料通道引擎承載著全公司的資料同步,為下游實時和離線場景提供了必不可少的源資料。隨著任務量的不斷增加,資料通道的整體架構也隨之發生改變。本文介紹了滴滴資料通道的發展歷程,遇到的問題以及今后的規劃。 #1. 背景 資料,對于任何一家互聯網公司來說都是非常重要的資產,公司的大資料 ......

    uj5u.com 2020-09-10 06:11:05 more
  • 滴滴AI Labs斬獲國際機器翻譯大賽中譯英方向世界第三

    **桔妹導讀:**深耕人工智能領域,致力于探索AI讓出行更美好的滴滴AI Labs再次斬獲國際大獎,這次獲獎的專案是什么呢?一起來看看詳細報道吧! 近日,由國際計算語言學協會ACL(The Association for Computational Linguistics)舉辦的世界最具影響力的機器 ......

    uj5u.com 2020-09-10 06:11:29 more
  • MPP (Massively Parallel Processing)大規模并行處理

    1、什么是mpp? MPP (Massively Parallel Processing),即大規模并行處理,在資料庫非共享集群中,每個節點都有獨立的磁盤存盤系統和記憶體系統,業務資料根據資料庫模型和應用特點劃分到各個節點上,每臺資料節點通過專用網路或者商業通用網路互相連接,彼此協同計算,作為整體提供 ......

    uj5u.com 2020-09-10 06:11:41 more
  • 滴滴資料倉庫指標體系建設實踐

    **桔妹導讀:**指標體系是什么?如何使用OSM模型和AARRR模型搭建指標體系?如何統一流程、規范化、工具化管理指標體系?本文會對建設的方法論結合滴滴資料指標體系建設實踐進行解答分析。 #1. 什么是指標體系 ##1.1 指標體系定義 指標體系是將零散單點的具有相互聯系的指標,系統化的組織起來,通 ......

    uj5u.com 2020-09-10 06:12:52 more
  • 單表千萬行資料庫 LIKE 搜索優化手記

    我們經常在資料庫中使用 LIKE 運算子來完成對資料的模糊搜索,LIKE 運算子用于在 WHERE 子句中搜索列中的指定模式。 如果需要查找客戶表中所有姓氏是“張”的資料,可以使用下面的 SQL 陳述句: SELECT * FROM Customer WHERE Name LIKE '張%' 如果需要 ......

    uj5u.com 2020-09-10 06:13:25 more
  • 滴滴Ceph分布式存盤系統優化之鎖優化

    **桔妹導讀:**Ceph是國際知名的開源分布式存盤系統,在工業界和學術界都有著重要的影響。Ceph的架構和演算法設計發表在國際系統領域頂級會議OSDI、SOSP、SC等上。Ceph社區得到Red Hat、SUSE、Intel等大公司的大力支持。Ceph是國際云計算領域應用最廣泛的開源分布式存盤系統, ......

    uj5u.com 2020-09-10 06:14:51 more
  • es~通過ElasticsearchTemplate進行聚合~嵌套聚合

    之前寫過《es~通過ElasticsearchTemplate進行聚合操作》的文章,這一次主要寫一個嵌套的聚合,例如先對sex集合,再對desc聚合,最后再對age求和,共三層嵌套。 Aggregations的部分特性類似于SQL語言中的group by,avg,sum等函式,Aggregation ......

    uj5u.com 2020-09-10 06:14:59 more
  • 爬蟲日志監控 -- Elastc Stack(ELK)部署

    傻瓜式部署,只需替換IP與用戶 導讀: 現ELK四大組件分別為:Elasticsearch(核心)、logstash(處理)、filebeat(采集)、kibana(可視化) 下載均在https://www.elastic.co/cn/downloads/下tar包,各組件版本最好一致,配合fdm會 ......

    uj5u.com 2020-09-10 06:15:05 more
最新发布
  • day02-2-商鋪查詢快取

    功能02-商鋪查詢快取 3.商鋪詳情快取查詢 3.1什么是快取? 快取就是資料交換的緩沖區(稱作Cache),是存盤資料的臨時地方,一般讀寫性能較高。 快取的作用: 降低后端負載 提高讀寫效率,降低回應時間 快取的成本: 資料一致性成本 代碼維護成本 運維成本 3.2需求說明 如下,當我們點擊商店詳 ......

    uj5u.com 2023-04-20 08:33:24 more
  • MySQL中binlog備份腳本分享

    關于MySQL的二進制日志(binlog),我們都知道二進制日志(binlog)非常重要,尤其當你需要point to point災難恢復的時侯,所以我們要對其進行備份。關于二進制日志(binlog)的備份,可以基于flush logs方式先切換binlog,然后拷貝&壓縮到到遠程服務器或本地服務器 ......

    uj5u.com 2023-04-20 08:28:06 more
  • day02-短信登錄

    功能實作02 2.功能01-短信登錄 2.1基于Session實作登錄 2.1.1思路分析 2.1.2代碼實作 2.1.2.1發送短信驗證碼 發送短信驗證碼: 發送驗證碼的介面為:http://127.0.0.1:8080/api/user/code?phone=xxxxx<手機號> 請求方式:PO ......

    uj5u.com 2023-04-20 08:27:27 more
  • 快取與資料庫雙寫一致性幾種策略分析

    本文將對幾種快取與資料庫保證資料一致性的使用方式進行分析。為保證高并發性能,以下分析場景不考慮執行的原子性及加鎖等強一致性要求的場景,僅追求最終一致性。 ......

    uj5u.com 2023-04-20 08:26:48 more
  • sql陳述句優化

    問題查找及措施 問題查找 需要找到具體的代碼,對其進行一對一優化,而非一直把關注點放在服務器和sql平臺 降低簡化每個事務中處理的問題,盡量不要讓一個事務拖太長的時間 例如檔案上傳時,應將檔案上傳這一步放在事務外面 微軟建議 4.啟動sql定時執行計劃 怎么啟動sqlserver代理服務-百度經驗 ......

    uj5u.com 2023-04-20 08:26:35 more
  • 云時代,MySQL到ClickHouse資料同步產品對比推薦

    ClickHouse 在執行分析查詢時的速度優勢很好的彌補了MySQL的不足,但是對于很多開發者和DBA來說,如何將MySQL穩定、高效、簡單的同步到 ClickHouse 卻很困難。本文對比了 NineData、MaterializeMySQL(ClickHouse自帶)、Bifrost 三款產品... ......

    uj5u.com 2023-04-20 08:26:29 more
  • sql陳述句優化

    問題查找及措施 問題查找 需要找到具體的代碼,對其進行一對一優化,而非一直把關注點放在服務器和sql平臺 降低簡化每個事務中處理的問題,盡量不要讓一個事務拖太長的時間 例如檔案上傳時,應將檔案上傳這一步放在事務外面 微軟建議 4.啟動sql定時執行計劃 怎么啟動sqlserver代理服務-百度經驗 ......

    uj5u.com 2023-04-20 08:25:13 more
  • Redis 報”OutOfDirectMemoryError“(堆外記憶體溢位)

    Redis 報錯“OutOfDirectMemoryError(堆外記憶體溢位) ”問題如下: 一、報錯資訊: 使用 Redis 的業務介面 ,產生 OutOfDirectMemoryError(堆外記憶體溢位),如圖: 格式化后的報錯資訊: { "timestamp": "2023-04-17 22: ......

    uj5u.com 2023-04-20 08:24:54 more
  • day02-2-商鋪查詢快取

    功能02-商鋪查詢快取 3.商鋪詳情快取查詢 3.1什么是快取? 快取就是資料交換的緩沖區(稱作Cache),是存盤資料的臨時地方,一般讀寫性能較高。 快取的作用: 降低后端負載 提高讀寫效率,降低回應時間 快取的成本: 資料一致性成本 代碼維護成本 運維成本 3.2需求說明 如下,當我們點擊商店詳 ......

    uj5u.com 2023-04-20 08:24:03 more
  • day02-短信登錄

    功能實作02 2.功能01-短信登錄 2.1基于Session實作登錄 2.1.1思路分析 2.1.2代碼實作 2.1.2.1發送短信驗證碼 發送短信驗證碼: 發送驗證碼的介面為:http://127.0.0.1:8080/api/user/code?phone=xxxxx<手機號> 請求方式:PO ......

    uj5u.com 2023-04-20 08:23:11 more