**傳統資料與大資料處理方式對比**縱向擴展：表示在需要處理更多負載時通過提高單個系統處理能力的方法來解決問題。最簡單的情況就是為應用系統提供更為強大的硬體。例如如果資料庫所在的服務器實體只有2G記憶體、低配CPU、小容量硬碟，進而導致了資料庫不能高效地運行，那么我們就可以通過將該服務器的記憶體擴展至8G、更換大容量硬碟或者更換高性能服務器來解決這個問題橫向擴展：是將服務分割為眾多的子服務并在負載平衡等技術的幫助下在應用中添加新的服務實體例如如果資料庫所在的服務器實體只有一臺服務器，進而導致了數...
2020-10-08 more比較檢驗前言內容引出二項檢驗前言??二項檢驗在周志華老師的西瓜書中并沒有做太多解釋，自己也是網上搜索了相關的資料和其他人的看法，并結合了自己的一些理解寫下博客記錄一下。內容引出??我們在對學習器的性能進行評估比較的時候，有了評估方法和性能度量也不一定能很好判斷學習器的優劣，通常是用統計假設檢驗，基于假設檢驗的結果我們可以推斷出，若在測驗集上觀察到學習器A比B好，則A的泛化性能是否在統計意義上優于B，以及這個結論的把握有多大。這里，默認以錯誤率為性能度量，用?\epsilon?表示，即泛化錯誤率。?...
2020-10-08 more國慶放假幾天，回了趟老家，在昨天下午開了幾個小時車回來了，幸好沒有怎么堵，但是也累的夠嗆的，一回來就早早的洗澡休息了。假期過得挺開心的，難得放松幾天，大家假期過得怎么樣呢？可以評論區留言一起分享假期有意思的事情哦。今天分享的是一篇騰訊的面經，面試者4年的Java經驗。（感謝素材投稿）騰訊的福利蠻好的，這份面試題還是有難度的。一面1、有序陣列排序，二分，復雜度2、常見排序演算法，說下快排程序，時間復雜度3、有N個節點的滿二叉樹的高度。1+logN4、朋友之間的點對點關系用圖維護，怎么判....
2020-10-08 more前言：一年之計在于秋，金九已經過去了，但銀十正在進行，2020已經接近尾聲了，作為一個開發人員，你是否面上了自己理想的公司，薪資達到心中理想的高度？進大廠是大部分程式員的夢想，而進大廠的門檻也是比較高的，所以這里整理了一份阿里、騰訊、位元組跳動、頭條等大廠面試大全其中概括的知識點有：Java基礎，spring，springboot，springcloud，JVM，MyBatis，Redis。Java基礎Java概述 何為編程 什么是Java jdk1.5之后的三大版本 JV......
2020-10-08 more前言如今架構已經被廣泛應用到企業管理和IT等領域，并演變成了各個領域的核心技術之一。架構的設計目標是解決軟體的復雜性，一個好的架構無論是從研發程序、軟體自身還是經濟角度帶來的利益都是巨大的。現在IT領域架構師無疑是個很吃香的職業。架構師一般分為軟體架構師、平臺架構師、硬體架構師、網路架構師、人工智能架構師以及特定領域技術等方面的架構師。想要成為架構師所需要積累的知識肯定不是一星半點的，我們能做的就是站在巨人的肩膀上不斷學習提升自己，目前市面上關于架構的檔案有太多，但真的能把架構系統的梳理清楚的檔案實...
2020-10-08 more過去2年我持續分享了BAT TMD為代表的大廠最新面試題目，特別是螞蟻金服、天貓、淘寶、頭條、拼多多等Java面試題目。過去2年，我已經成功的幫助了部分同學進入了大廠。2020開始，我依然會為大家帶來最新的大廠現場面試專場題目，希望能幫助到更多的同學。回到正題，金九銀十正式到來，這是一個比較重要的漲薪季。我知道很多同學早已經提前未雨綢繆了，已經提前在開始準備了。提前準備一直是我倡導的，任何事情你想要有預期的好的結果，那你就需要提前準備，提前準備，提前準備，重要的事情說三遍。好了，.....
2020-10-08 more隨著一批又一批的程式員新星涌入，所謂長江后浪拍前浪...但前浪可別被拍死在沙灘上呀！除了不斷的學習，提升自己的技術，作為程式員的你我想應該都別無選擇吧，除非想在沙灘上涼涼...前些日子，在某大廠的朋友偷偷給了我本內部學習資料——[JAVA核心手冊]，仔細翻閱一番才知道里面收納整理的知識可真是齊全，不得不來感嘆一番...我將[JAVA核心手冊]大致分為以下5篇內容架構筑基篇：并發編程+JVM+網路+資料結構與演算法+MySQL+Tomcat 設計思想解讀開源框架篇：設計模式+Spring+Spri...
2020-10-08 more在電賽開始前的最后時間我再給大家分享一下我自己實戰的結果。首先這是我個人準備的套件，包括：1.一個stm32單片機2.ad1292心電檢測模塊（按技術手冊布線即可）3.用于捕獲心電信號的電極（最好多買些一次性的備用）4.心電模擬器說一下整體架構：用AD1292采集到的心電信號進行轉換獲得實時心率，同時將心率上傳到螢屏顯示，并且將波形回傳上位機用電腦顯示波形，效果如下：然后我們后續再根據題目做一些變更。這里有一個需要注意的點就是：心電模擬器產生的波形和真正實測人體有著天壤之別，基本沒有噪...
2020-10-08 more前言這次去阿里面試的是我老東家的好朋友，我們之前都是一個專案組的，一起吃飯，一起洗腳，一起。。。他們公司最近也裁員了，不過他是裁員前去的阿里，不知道誰撈到他簡歷了，莫名就走了流程，他莫名的就面了7輪過了。他想著行情這么不好，要不就去了，去了之后，他們公司就裁員了。。。總之今年大環境真的很差，大家都時刻做好準備，我朋友簡歷上是寫了精通dubbo的原始碼，所以你們會發現，面試中dubbo的問題很多，他面經寫得算是比較簡單，但是真實問的程序肯定會扣肯定細節。正文面試總共花費20天左右，包含4...
2020-10-08 more**?桔妹導讀：**GPU虛擬機實體創建速度慢是公有云面臨的普遍問題，由于通常情況下創建虛擬機屬于低頻操作而未引起業界的重視，實際生產中還是存在對GPU實體創建時間有苛刻要求的業務場景。本文將介紹滴滴云在解決該問題時的思路、方法、并展示最終的優化成果。 從公有云服務商那里購買過虛擬主機的資深用戶，一 ......
uj5u.com 2020-09-10 06:09:13 more**?桔妹導讀：**隨著云規模不斷擴大以及業務層面對延遲、帶寬的要求越來越高，采用DPDK 加速網路報文處理的方式在橫向縱向擴展都出現了局限性。可編程芯片成為業界熱點。本文主要講述了可編程網卡芯片在滴滴云網路中的應用實踐，遇到的問題、帶來的收益以及開源社區貢獻。 #1. 資料中心面臨的問題 隨著滴滴 ......
uj5u.com 2020-09-10 06:10:21 more**?桔妹導讀：**滴滴資料通道引擎承載著全公司的資料同步，為下游實時和離線場景提供了必不可少的源資料。隨著任務量的不斷增加，資料通道的整體架構也隨之發生改變。本文介紹了滴滴資料通道的發展歷程，遇到的問題以及今后的規劃。 #1. 背景 資料，對于任何一家互聯網公司來說都是非常重要的資產，公司的大資料 ......
uj5u.com 2020-09-10 06:11:05 more**桔妹導讀：**深耕人工智能領域，致力于探索AI讓出行更美好的滴滴AI Labs再次斬獲國際大獎，這次獲獎的專案是什么呢？一起來看看詳細報道吧！ 近日，由國際計算語言學協會ACL（The Association for Computational Linguistics）舉辦的世界最具影響力的機器 ......
uj5u.com 2020-09-10 06:11:29 more1、什么是mpp？ MPP (Massively Parallel Processing)，即大規模并行處理，在資料庫非共享集群中，每個節點都有獨立的磁盤存盤系統和記憶體系統，業務資料根據資料庫模型和應用特點劃分到各個節點上，每臺資料節點通過專用網路或者商業通用網路互相連接，彼此協同計算，作為整體提供 ......
uj5u.com 2020-09-10 06:11:41 more**桔妹導讀：**指標體系是什么？如何使用OSM模型和AARRR模型搭建指標體系？如何統一流程、規范化、工具化管理指標體系？本文會對建設的方法論結合滴滴資料指標體系建設實踐進行解答分析。 #1. 什么是指標體系 ##1.1 指標體系定義 指標體系是將零散單點的具有相互聯系的指標，系統化的組織起來，通 ......
uj5u.com 2020-09-10 06:12:52 more我們經常在資料庫中使用 LIKE 運算子來完成對資料的模糊搜索，LIKE 運算子用于在 WHERE 子句中搜索列中的指定模式。 如果需要查找客戶表中所有姓氏是“張”的資料，可以使用下面的 SQL 陳述句： SELECT * FROM Customer WHERE Name LIKE '張%' 如果需要 ......
uj5u.com 2020-09-10 06:13:25 more**桔妹導讀：**Ceph是國際知名的開源分布式存盤系統，在工業界和學術界都有著重要的影響。Ceph的架構和演算法設計發表在國際系統領域頂級會議OSDI、SOSP、SC等上。Ceph社區得到Red Hat、SUSE、Intel等大公司的大力支持。Ceph是國際云計算領域應用最廣泛的開源分布式存盤系統， ......
uj5u.com 2020-09-10 06:14:51 more之前寫過《es~通過ElasticsearchTemplate進行聚合操作》的文章，這一次主要寫一個嵌套的聚合，例如先對sex集合，再對desc聚合，最后再對age求和，共三層嵌套。 Aggregations的部分特性類似于SQL語言中的group by，avg，sum等函式,Aggregation ......
uj5u.com 2020-09-10 06:14:59 more傻瓜式部署，只需替換IP與用戶 導讀： 現ELK四大組件分別為：Elasticsearch（核心）、logstash（處理）、filebeat（采集）、kibana（可視化） 下載均在https://www.elastic.co/cn/downloads/下tar包，各組件版本最好一致，配合fdm會 ......
uj5u.com 2020-09-10 06:15:05 moreMysql復習的一個小總結，用xmind寫的。（字數沒有都不給我發博客😹） 下面是一些備注 子查詢 MySQL子查詢稱為內部查詢，而包含子查詢的查詢稱為外部查詢。 子查詢可以在使用運算式的任何地方使用，并且必須在括號中關閉。 視圖 基本語法可以使用 CREATE VIEW 陳述句來創建視圖。 語法格 ......
uj5u.com 2022-05-09 07:13:07 more?大資料概述 在大資料這個概念興起之前，資訊系統存盤資料的方法主要是我們熟知的關系型資料庫，關系型資料庫，關系型模型之父 Edgar F. Codd，在 1970 年 Communications of ACM 上發表了《大型共享資料庫資料的關系模型》的經典論文，從此之后關系模型的語意設計達到了 4 ......
uj5u.com 2022-05-09 07:13:01 more一、下載安裝IDEA IDEA2020.2.3版本：https://www.cnblogs.com/liugp/p/13868346.html 最新版本安裝詳情請參考：https://www.jb51.net/article/196349.htm 二、搭建本地hadoop環境（window10） 可 ......
uj5u.com 2022-05-09 07:12:17 moreMySQL8新增降序索引 桃花塢里桃花庵，桃花庵里桃花仙。桃花仙人種桃樹，又摘桃花賣酒錢。 一、MySQL5.7 降序索引 MySQL在語法上很早就已經支持降序索引，但實際上創建的卻仍然是升序索引，如下MySQL 5.7 所示，row2欄位降序，但是從show create table看 row2 ......
uj5u.com 2022-05-09 07:11:36 moreLinux環境下，MySQL的主要目錄及其作用、資料庫和資料表在檔案系統上的存盤結構。 ......
uj5u.com 2022-05-09 07:11:28 moreMysql復習的一個小總結，用xmind寫的。（字數沒有都不給我發博客😹） 下面是一些備注 子查詢 MySQL子查詢稱為內部查詢，而包含子查詢的查詢稱為外部查詢。 子查詢可以在使用運算式的任何地方使用，并且必須在括號中關閉。 視圖 基本語法可以使用 CREATE VIEW 陳述句來創建視圖。 語法格 ......
uj5u.com 2022-05-09 07:10:34 moreMySQL8新增降序索引 桃花塢里桃花庵，桃花庵里桃花仙。桃花仙人種桃樹，又摘桃花賣酒錢。 一、MySQL5.7 降序索引 MySQL在語法上很早就已經支持降序索引，但實際上創建的卻仍然是升序索引，如下MySQL 5.7 所示，row2欄位降序，但是從show create table看 row2 ......
uj5u.com 2022-05-09 07:10:25 moreLinux環境下，MySQL的主要目錄及其作用、資料庫和資料表在檔案系統上的存盤結構。 ......
uj5u.com 2022-05-09 07:10:19 more?大資料概述 在大資料這個概念興起之前，資訊系統存盤資料的方法主要是我們熟知的關系型資料庫，關系型資料庫，關系型模型之父 Edgar F. Codd，在 1970 年 Communications of ACM 上發表了《大型共享資料庫資料的關系模型》的經典論文，從此之后關系模型的語意設計達到了 4 ......
uj5u.com 2022-05-09 07:10:05 more一、下載安裝IDEA IDEA2020.2.3版本：https://www.cnblogs.com/liugp/p/13868346.html 最新版本安裝詳情請參考：https://www.jb51.net/article/196349.htm 二、搭建本地hadoop環境（window10） 可 ......
uj5u.com 2022-05-09 07:09:25 more