前言本文致力于從架構原理、集群部署、性能優化與使用技巧等方面，闡述在如何基于HBase構建容納大規模資料、支撐高并發、毫秒回應、穩定高效的OLTP實時系統 。一、架構原理1.1 基本架構從上層往下可以看到HBase架構中的角色分配為：Client——>Zookeeper——>HMaster——>RegionServer——>HDFSClientClient是執行查詢、寫入等對HBase表資料進行增刪改查的使用方，可以是使用HBase Client API...
2020-10-05 more分布式鏈路追蹤技術適?場景（問題場景）場景描述為了?撐?益增?的龐?業務量，我們會使?微服務架構設計我們的系統，使得我們的系統不僅能夠通過集群部署抵擋流量的沖擊，?能根據業務進?靈活的擴展。那么，在微服務架構下，?次請求少則經過三四次服務調?完成，多則跨越??個甚?是上百個服務節點。那么問題接踵?來：1）如何動態展示服務的調?鏈路？（?如A服務調?了哪些其他的服務—依賴關系）2）如何分析服務調?鏈路中的瓶頸節點并對其進?調優？(?如A—>B—>C，C服務處理時間特別?)3）如何快速進...
2020-10-05 more提升技術能力比如說我們閱讀RocketMQ 原始碼之后，我們就會對訊息佇列的架構設計思想都有很清楚的了解，然后再去看Kafka 原始碼的時候，我們就會很容易上手。我們吸收了開源框架的設計思想之后，再應用到我們自己的系統上去，這樣我們的系統也會設計的越來越合理。學以致用，我們的技術能力會越來越強。提升競爭力1.當某個技術框架出現生產問題的時候，我們能從原始碼角度去分析定位問題，然后提出解決方案。這樣也會提升競爭力。2.你閱讀過某個技術的原始碼，對這個技術的架構和設計思想都了如指掌。在求職面試的時候，和...
2020-10-05 more1. 分布式原理分布式系統是硬體和軟體分布在不同網路計算機上，彼此間通過訊息傳遞進行通信和協調的系統。1.1 分布式環境存在的問題通信例外：分布式環境存在訊息丟失和訊息延遲的情況。網路磁區：在組成分布式系統的所有節點中只有部分節點能進行正常通信，另一些則不能，形成網路磁區孤島，也稱為腦裂。三態：分布式環境請求有3種狀態，成功、失敗、超時。節點故障：分布式環境中每個節點都有可能出現故障。1.2 分布式系統特性分布性：服務分布在網路的不同的機器上，可能會變動。副本：資料副本：多節點...
2020-10-05 more文章目錄RocketMQ簡介Rocket的分布式架構（高并發、高效率、高可用的保證）詳細四個部分第一，NameServer：第二，Producer第三，Broker第四，ConsumerRocketMQ訊息領域模型一次完整的通信流程是怎樣的？NameService啟動流程ProducerBrokerConsumerRocketMQ簡介RocketMQ是一個純Java、分布式、佇列模型的開源訊息中間件，前身是MetaQ，是阿里參考Kafka特點研發的一個佇列模型的訊息中間件（RocketMQ是阿里開源其自...
2020-10-05 more選取任意一個spring-***檔案寫入：<context:property-placeholder location="classpath:database.properties,classpath:de.properties"/>springmvc @Value取值為NULL的解決方案在spring mvc架構中，如果希望在程式中直接使用properties中定義的配置值，通常使用一下方式來獲取： @Value("${tag}") pri...
2020-10-05 more截至2020年10月，全球手機用戶約54億人，網民約45億人，全球每天產生的資料約300多萬T，每年所需存盤空間約為100億T，我們對資料存盤的需求仍在增長。然而，現實中還存在海量閑置的空間資源未被利用。資料的有效利用，存盤和安全成為大家關注的焦點，LTG分布式存盤公鏈在近兩年的迅猛發展，成為行業亮點，逐步推出了LTG云盤、LTG兌付錢包、LTG萬事達卡、LTG商城等真實的落地應用，近期還將推出游戲，幣彩等板塊，增加LTG通證的流通，促進去中心化生態的可持續性發展。LTG去中心化分布式存盤有其先天的優勢...
2020-10-05 more一、處理器HUAWEI MatePad Pro采用的是華為海思麒麟990處理器，是目前華為系產品中的旗艦處理器。而HUAWEI MatePad采用的是2019年華為系產品的次旗艦處理器華為海思麒麟810.從處理器方面來說，麒麟990處理器無疑更好。華為matepad更多使用感受和評價：https://www.huawei.com/華為matepadpro更多使用感受和評價：https://www.huawei.com/二、網路HUAWEI MatePad Pro有支持5G網路的版本，而HUAWEI...
2020-10-05 moreMoodle 的預設最大上傳檔案大小為 2M，這個限制實在是小了點。我的環境是 Ubuntu + Apache2修改方法Moodle 對于這些的限制，寫在 php.ini 下。我們只需要修改腳本即可。sudo vi /etc/php/7.2/apache2/php.ini修改 post_max_size找到 post_max_size，這個是限制 post 的最大檔案大小。如下圖所示，我修改成為 5G。修改 upload_max_filesize找到 upload_ma...
2020-10-05 more如何從xshell上傳檔案到centos linux虛擬機里及：虛擬機CentOs下執行 yum -y install lrzsz命令，出現錯誤：鏡像無法找到軟體包 前言 一、安裝lrzsz步驟 二、上傳檔案 三、遇到的問題及解決方案 總結 前言 提示：其實很簡單，往虛擬機上安裝一個上傳檔案的工具 ......
uj5u.com 2020-09-10 02:00:47 more一、SQLMAP入門 1、判斷是否存在注入 sqlmap.py -u 網址/id=1 id=1不可缺少。當注入點后面的引數大于兩個時。需要加雙引號， sqlmap.py -u "網址/id=1&uid=1" 2、判斷文本中的請求是否存在注入 從文本中加載http請求，SQLMAP可以從一個文本檔案中 ......
uj5u.com 2020-09-10 02:00:50 moremetasploit 簡單使用教程 浩先生， 2020-08-28 16:18:25 分類專欄： kail 網路安全 linux 文章標簽： linux資訊安全 編輯 著作權 metasploit 使用教程 前言 一、Metasploit是什么？ 二、準備作業 三、具體步驟 前言 Msfconsole ......
uj5u.com 2020-09-10 02:00:53 more驅動層代碼： #pragma once #include <ntifs.h> #define add_code CTL_CODE(FILE_DEVICE_UNKNOWN,0x800,METHOD_BUFFERED,FILE_ANY_ACCESS) /* 更多游戲逆向視頻www.yxfzedu.com ......
uj5u.com 2020-09-10 02:00:56 more北斗電力時鐘（北斗授時服務器）讓網路資料更精準 北斗電力時鐘（北斗授時服務器）讓網路資料更精準 京準電子科技官微——ahjzsz 近幾年，資訊技術的得了快速發展，互聯網在逐漸普及，其在人們生活和生產中都得到了廣泛應用，并且取得了不錯的應用效果。計算機網路資訊在電力系統中的應用，一方面使電力系統的運行 ......
uj5u.com 2020-09-10 02:01:03 more?碎碎念 CTFHub：https://www.ctfhub.com/ 筆者入門CTF時時剛開始刷的是bugku的舊平臺，后來才有了CTFHub。 感覺不論是網頁UI設計，還是題目質量，賽事跟蹤，工具軟體都做得很不錯。 而且因為獨到的金幣制度的確讓人有一種想去刷題賺金幣的感覺。 個人還是非常喜歡這個 ......
uj5u.com 2020-09-10 02:04:05 more我學到了一下幾點 Windows系統目錄結構與滲透的作用 常見Windows的服務詳解 Windows埠詳解 常用的Windows注冊表詳解 hacker DOS命令詳解（net user / type /md /rd/ dir /cd /net use copy、批處理 等） 利用dos命令制作 ......
uj5u.com 2020-09-10 02:04:18 more我學到了以下幾點 01Linux系統介紹02系統安裝，密碼啊破解03Linux常用命令04LAMP 01LINUX windows： win03 8 12 16 19 配置不繁瑣 Linux：redhat,centos(紅帽社區版)，Ubuntu server,suse unix:金融機構，證券，銀 ......
uj5u.com 2020-09-10 02:04:30 more1.Mapmap是一種基礎的RDD轉換操作，用于將RDD中的每一個資料元素通過某種函式進行轉換并回傳新的RDD。例：val distData = https://blog.csdn.net/master_hunter/article/details/List(1, 3, 45, 3, 76)val sq_dist = distData.map(x => x * x)print(sq_dist)List(1, 9, 2025, 9, 5776)2.SortBy()sortBy()是對標準RDD進行排序...
uj5u.com 2021-04-09 11:58:23 more學個技識訓者搞副業，什么靠譜?學姐告訴你:答案是PythonPython語言是所有語言中好上手的語言，簡單易學。只要是懂一點英語，邏輯思維不是很差的人很快就能學會。學成之后能撰寫代碼爬取大量資料，制作各種專業圖表，以及資料分析報…作業.上快速提升，還能利用業余時間接點私活兒，一個月可以拿到近萬的外快。比較輕松、收入也可觀。4基礎30天入門門編程全干貨分享今天我掏出家底，給大家分享一個私藏了2年的神仙學資源,讓你盡情自學Python,從此自學不求人。Python開發環境安裝教程有Pytho.....
uj5u.com 2021-04-09 11:57:56 more1 簡介RocketMQ是一款分布式、佇列模型的訊息中間件，由阿里巴巴自主研發的一款適用于高并發、高可靠性、海量資料場景的訊息中間件。早期開源2.x版本名為Metaq，迭代3.x版本，更名為RocketMQ，16年開始貢獻到Apache。經過1年多的范訓，最終成為Apache頂級的開源專案，更新非常頻繁，社區活躍度也非常高；目前4.8.0-release版本。RocketMQ參考借鑒了優秀的開源訊息中間件Apache - Kafka，其訊息的路由集群劃分都借鑒了Kafka優秀的設計思路，并結合自身的 “...
uj5u.com 2021-04-09 11:57:26 morepython 多執行緒 多行程同時運行多任務要求python 基礎語法python 檔案目錄操作python 模塊應用開發工具pycharm實作方法多任務的實作可以用行程和執行緒來實作行程—> 執行緒----> 多任務應用多行程操作比如下載多個檔案, 利用cpu 資源 提高效率多任務： 同一時間執行多個任務, 比如windows作業系統執行方式有兩種( 表現形式 )并發在單核cpu中:在一段時間內交替執行多個任務, 例如單核cpu 處理多任務, 作業系統讓各個任務交...
uj5u.com 2021-04-09 11:57:08 moreClickHouse集群安裝部署流程（防止踩坑）ClickHouse集群安裝部署Fisrt1、安裝之前1.1、SSE 4.2 指令集1.2、設定用戶的檔案句柄數2、單節點方式2.1、yum方式安裝RPM安裝包方式一2.1.1、推薦使用CentOS、RedHat和所有其他基于rpm的Linux發行版的官方預編譯rpm包。2.1.2、查看安裝包命令：2.1.3、然后運行命令安裝：2.2、yum方式安裝RPM安裝包方式二2.2.1、安裝curl工具2.2.2、添加clickhouse的yum鏡像2.2.3、檢查...
uj5u.com 2021-04-09 11:56:57 moreHadoop集群環境搭建1環境需求本文是用過Vmware搭建的三臺linux虛擬機。Vmware安裝包自取Mac:鏈接:https://pan.baidu.com/s/1unYcc_hc9SA5O5-QvZFe-A 密碼:h20jWindows:鏈接:https://pan.baidu.com/s/1Z5y1DsnT-CmWcGHADd6WwQ 密碼:5v0w2.hadoop集群搭建2.1linux環境配置（需要三臺linux虛擬機都執行）2.1.1 關閉防火墻 （本地環境訪問更加方便，...
uj5u.com 2021-04-09 11:56:39 more當一個組件到了優化部分的時候，基本上這個組件的內容就到了結尾部分了，本文我們給HBase收收尾，來講一下HBase的優化。關注專欄《破繭成蝶——大資料篇》，查看更多相關的內容~一、HBase的高可用在HBase中HMaster負責監控Region Server的生命周期，均衡Region Server的負載，如果HMaster掛掉了，那么整個HBase集群將陷入不健康的狀態，并且此時的作業狀態并不會維持太久。所以HBase支持對HMaster的高可用配置。這里需要注意的是，如果HMaster掛掉，H...
uj5u.com 2021-04-09 11:56:07 moreC站（CSDN）軟體工程師能力認證上線35天，來自全國130所高校的同學自發組建66個學習小組，基于“明確路徑+任務領取+刻意練習+小組學習+大咖指導”的學習模型，讓更多學員，實作了面向實踐、任務驅動、共同成長的目標。今天小編就帶著大家揭秘學習小組的成長秘訣，感受屬于他們的高光時刻。實踐：66個小組自主探索、系統化持續學習經過將近1個月的更新迭代，已經有超過130所高校的同學組建了66個學習小組，越來越多小伙伴加入其中，并且取得了一些階段性成果，經過小編與小組成員的交......
uj5u.com 2021-04-09 11:54:32 more一、前言這段時間在樓下遛娃的時候，發現了一個比較奇怪的現象，我們小區的精英人士，程式員老馬竟然有空出來看孩子了。這可是從來沒有發生過的，以前都是老馬的父母或者老婆在看孩子，因為他作業實在是太忙了。老馬是做程式員作業的，而且從大學畢業開始就一直從事程式員的作業。前幾年，老馬奉行的原則是能跳槽就跳槽，跳槽一回，工資翻番。情況也確實是這樣，他29歲以前，換了3家公司，每次跳槽工資都能加點，直到最終進入了國內某知名企業，成為一名正式員工，才結束了他的跳槽生涯。二、從巔峰跌落谷底那時候老馬才29歲，進入這....
uj5u.com 2021-04-09 11:53:26 more