Centos7系統初始化腳本##前言: 因公司業務增加,陸續新增服務器,時不時的來幾臺,手動地一臺臺對服務器初始化操作感覺太麻煩。于是乎,根據初始化需求整合了一個初始化腳本,實作批量腳本初始化操作。說明: 本腳本根據自身需求撰寫而成,集成了Centos7服務器的基本初始化步驟。其中包含如下基礎優化內容: 1)SELinux關閉; 2)Firewalld關閉; 3)Bash環境修改; 4)Openfile系統最大打開檔案數配置; 5)系統內核引數優化配置; 6)Hostn...
2020-10-12 more實驗環境:本操作說明適合502機房和504機房首先要運行Vmware WorkStation或Virtual Box,啟動master完全分布式,slave1完全分布式,slave2完全分布式第1步:先在第一個臺虛擬機master執行以下操作,再依次在slave1和slave2重復相同的操作:1)執行cd /usr/local/ 切換到安裝目錄2)執行mv hadoop-2.6.0-cdh5.7.0/ hadoop-2.6.0-cdh5.7.0.bak 備份掉之前的Hadoop 或 執行 ......
2020-10-12 moreJobHistory1、namenode修改mapred-site.xml2、namenode修改yarn-site.xml3、修改后的檔案分發到其他機器上面去4、重啟yarn集群以及啟動jobHistoryServer行程5、jobhistoryserver6、頁面訪問jobhistoryserver我們可以通過Hadoop jar的命令來實作我們的程式jar包的運行,關于運行的日志,我們一般都需要通過啟動一個服務來進行查看,就是我們的JobHistoryServer,我們可以啟動一個行程,專門用于查...
2020-10-12 more在大資料、高并發的系統中,為了突破瓶頸,會將系統進行水平擴展和垂直拆分,形成獨立的服務。每個獨立的服務背后,可能是一個集群在對外提供服務。這就會碰到一個問題,整個系統是由多個服務(子系統)組成的,資料需要在各個服務中不停流轉。如果資料在各個子系統中傳輸時,速度過慢,就會形成瓶頸,降低整個系統的性能。從而就形成了以Kafka為中心的解決方案!因為閱讀Kafka原始碼重要性就不言而喻,今天小編就分享一份拼多多Kafka的原始碼筆記,現已面向大眾全面開源!(為了不影響大家的閱讀體驗,免費獲取方式放在了文末!)...
2020-10-12 more相比網站生成火山圖,使用R語言生成火山圖可以滿足更多的要求,但本站相關文章不甚清晰,遂記錄一下生成 帶標簽火山圖 的程序...
2020-10-12 more2020你進步了嘛?你漲薪了嘛?你有什么變化沒有?生活在21世紀,互聯網行業的發展,導致Java缺口供不應求,缺的是技術型人才~~~下文分享Java學習路線,扎實基礎,面試造火箭多執行緒與高并發Jvm調優案例式實戰化作業系統UML建模從底向上網路原理解讀+深入決議23種設計模式針對上續資料整理了視頻,獲取方式如下:......
2020-10-12 more為什么要寫網路協議?寫一本通俗地講解網路協議的書,一直是我的一個夢想。我發現在我的職業生涯中,網路這一關無論如何也繞不過去。本來覺得寫Java程式時可以依賴別人的庫,所以就不用關心這么多底層的技術了,但是到后來才發現,服務數量一多,吞吐量大, 我們關心的不再僅僅是某個Java應用,而是要提升整個集群的性能,這時網路問題就會出現。而且大規模的微服務架構必定要上云、使用VPC網路,這時就必定要考慮雙活和災備,必定要做各個層次的負載均衡,這些都需要網路方面的技術。既然繞不過去,那就必須“啃”下它,于是我就...
2020-10-12 more本文深入淺出的介紹了Redis的五種資料型別,并通過多個實用示例展示了Redis的用法。除此之外還講述了Redis的優化方法和擴展方法。一共由三個部分組成,第一部分對Redis進行了介紹,說明了Redis的基本使用方法、它擁有的5種資料結構以及操作5種資料結構的命令,并詳解了如何使用Redis去構建文章聚合網站、cookie、購物車、網頁快取。資料庫行快取等一系列程式。第二部分對Redis命令進行了更詳細的介紹,并展示了如何使用Redis去構建更為復雜的輔助工具和應用程式,并在最后展示了如何使用Redi...
2020-10-12 more如果你期待對分布式系統有一個更全面的認識,想要了解各個技術在分布式系統中如何應用、分別解決哪些問題、有怎樣優秀的實作,推薦閱讀、收藏本篇。前言分布式系統涉及到的理論知識及技術點比較多,以致于很多童鞋都說,分布式系統的學習是入門容易、深入難,通過網路搜索到的知識點較為零散,難以系統化學習、融會貫通。本篇Mike將從以下幾個方面分享,帶著大家先窺探分布式的全貌,希望為大家厘清分布式學習之路的方向與具體路徑。以上專題資料及學習圖譜,獲取方式:添加下方小助手VX即可本篇主題 分布式系統...
2020-10-12 more如何從xshell上傳檔案到centos linux虛擬機里及:虛擬機CentOs下執行 yum -y install lrzsz命令,出現錯誤:鏡像無法找到軟體包 前言 一、安裝lrzsz步驟 二、上傳檔案 三、遇到的問題及解決方案 總結 前言 提示:其實很簡單,往虛擬機上安裝一個上傳檔案的工具 ......
uj5u.com 2020-09-10 02:00:47 more一、SQLMAP入門 1、判斷是否存在注入 sqlmap.py -u 網址/id=1 id=1不可缺少。當注入點后面的引數大于兩個時。需要加雙引號, sqlmap.py -u "網址/id=1&uid=1" 2、判斷文本中的請求是否存在注入 從文本中加載http請求,SQLMAP可以從一個文本檔案中 ......
uj5u.com 2020-09-10 02:00:50 moremetasploit 簡單使用教程 浩先生, 2020-08-28 16:18:25 分類專欄: kail 網路安全 linux 文章標簽: linux資訊安全 編輯 著作權 metasploit 使用教程 前言 一、Metasploit是什么? 二、準備作業 三、具體步驟 前言 Msfconsole ......
uj5u.com 2020-09-10 02:00:53 more驅動層代碼: #pragma once #include <ntifs.h> #define add_code CTL_CODE(FILE_DEVICE_UNKNOWN,0x800,METHOD_BUFFERED,FILE_ANY_ACCESS) /* 更多游戲逆向視頻www.yxfzedu.com ......
uj5u.com 2020-09-10 02:00:56 more北斗電力時鐘(北斗授時服務器)讓網路資料更精準 北斗電力時鐘(北斗授時服務器)讓網路資料更精準 京準電子科技官微——ahjzsz 近幾年,資訊技術的得了快速發展,互聯網在逐漸普及,其在人們生活和生產中都得到了廣泛應用,并且取得了不錯的應用效果。計算機網路資訊在電力系統中的應用,一方面使電力系統的運行 ......
uj5u.com 2020-09-10 02:01:03 more?碎碎念 CTFHub:https://www.ctfhub.com/ 筆者入門CTF時時剛開始刷的是bugku的舊平臺,后來才有了CTFHub。 感覺不論是網頁UI設計,還是題目質量,賽事跟蹤,工具軟體都做得很不錯。 而且因為獨到的金幣制度的確讓人有一種想去刷題賺金幣的感覺。 個人還是非常喜歡這個 ......
uj5u.com 2020-09-10 02:04:05 more我學到了一下幾點 Windows系統目錄結構與滲透的作用 常見Windows的服務詳解 Windows埠詳解 常用的Windows注冊表詳解 hacker DOS命令詳解(net user / type /md /rd/ dir /cd /net use copy、批處理 等) 利用dos命令制作 ......
uj5u.com 2020-09-10 02:04:18 more我學到了以下幾點 01Linux系統介紹02系統安裝,密碼啊破解03Linux常用命令04LAMP 01LINUX windows: win03 8 12 16 19 配置不繁瑣 Linux:redhat,centos(紅帽社區版),Ubuntu server,suse unix:金融機構,證券,銀 ......
uj5u.com 2020-09-10 02:04:30 more1.Mapmap是一種基礎的RDD轉換操作,用于將RDD中的每一個資料元素通過某種函式進行轉換并回傳新的RDD。例:val distData = https://blog.csdn.net/master_hunter/article/details/List(1, 3, 45, 3, 76)val sq_dist = distData.map(x => x * x)print(sq_dist)List(1, 9, 2025, 9, 5776)2.SortBy()sortBy()是對標準RDD進行排序...
uj5u.com 2021-04-09 11:58:23 more學個技識訓者搞副業,什么靠譜?學姐告訴你:答案是PythonPython語言是所有語言中好上手的語言,簡單易學。只要是懂一點英語,邏輯思維不是很差的人很快就能學會。學成之后能撰寫代碼爬取大量資料,制作各種專業圖表,以及資料分析報…作業.上快速提升,還能利用業余時間接點私活兒,一個月可以拿到近萬的外快。比較輕松、收入也可觀。4基礎30天入門門編程全干貨分享今天我掏出家底,給大家分享一個私藏了2年的神仙學資源,讓你盡情自學Python,從此自學不求人。Python開發環境安裝教程有Pytho.....
uj5u.com 2021-04-09 11:57:56 more1 簡介RocketMQ是一款分布式、佇列模型的訊息中間件,由阿里巴巴自主研發的一款適用于高并發、高可靠性、海量資料場景的訊息中間件。早期開源2.x版本名為Metaq,迭代3.x版本,更名為RocketMQ,16年開始貢獻到Apache。經過1年多的范訓,最終成為Apache頂級的開源專案,更新非常頻繁,社區活躍度也非常高;目前4.8.0-release版本。RocketMQ參考借鑒了優秀的開源訊息中間件Apache - Kafka,其訊息的路由集群劃分都借鑒了Kafka優秀的設計思路,并結合自身的 “...
uj5u.com 2021-04-09 11:57:26 morepython 多執行緒 多行程同時運行多任務要求python 基礎語法python 檔案目錄操作python 模塊應用開發工具pycharm實作方法多任務的實作可以用行程和執行緒來實作行程—> 執行緒----> 多任務應用多行程操作比如下載多個檔案, 利用cpu 資源 提高效率多任務: 同一時間執行多個任務, 比如windows作業系統執行方式有兩種( 表現形式 )并發在單核cpu中:在一段時間內交替執行多個任務, 例如單核cpu 處理多任務, 作業系統讓各個任務交...
uj5u.com 2021-04-09 11:57:08 moreClickHouse集群安裝部署流程(防止踩坑)ClickHouse集群安裝部署Fisrt1、安裝之前1.1、SSE 4.2 指令集1.2、設定用戶的檔案句柄數2、單節點方式2.1、yum方式安裝RPM安裝包方式一2.1.1、推薦使用CentOS、RedHat和所有其他基于rpm的Linux發行版的官方預編譯rpm包。2.1.2、查看安裝包命令:2.1.3、然后運行命令安裝:2.2、yum方式安裝RPM安裝包方式二2.2.1、安裝curl工具2.2.2、添加clickhouse的yum鏡像2.2.3、檢查...
uj5u.com 2021-04-09 11:56:57 moreHadoop集群環境搭建1環境需求本文是用過Vmware搭建的三臺linux虛擬機。Vmware安裝包自取Mac:鏈接:https://pan.baidu.com/s/1unYcc_hc9SA5O5-QvZFe-A 密碼:h20jWindows:鏈接:https://pan.baidu.com/s/1Z5y1DsnT-CmWcGHADd6WwQ 密碼:5v0w2.hadoop集群搭建2.1linux環境配置(需要三臺linux虛擬機都執行)2.1.1 關閉防火墻 (本地環境訪問更加方便,...
uj5u.com 2021-04-09 11:56:39 more當一個組件到了優化部分的時候,基本上這個組件的內容就到了結尾部分了,本文我們給HBase收收尾,來講一下HBase的優化。關注專欄《破繭成蝶——大資料篇》,查看更多相關的內容~一、HBase的高可用在HBase中HMaster負責監控Region Server的生命周期,均衡Region Server的負載,如果HMaster掛掉了,那么整個HBase集群將陷入不健康的狀態,并且此時的作業狀態并不會維持太久。所以HBase支持對HMaster的高可用配置。這里需要注意的是,如果HMaster掛掉,H...
uj5u.com 2021-04-09 11:56:07 moreC站(CSDN)軟體工程師能力認證上線35天,來自全國130所高校的同學自發組建66個學習小組,基于“明確路徑+任務領取+刻意練習+小組學習+大咖指導”的學習模型,讓更多學員,實作了面向實踐、任務驅動、共同成長的目標。今天小編就帶著大家揭秘學習小組的成長秘訣,感受屬于他們的高光時刻。實踐:66個小組自主探索、系統化持續學習經過將近1個月的更新迭代,已經有超過130所高校的同學組建了66個學習小組,越來越多小伙伴加入其中,并且取得了一些階段性成果,經過小編與小組成員的交......
uj5u.com 2021-04-09 11:54:32 more一、前言這段時間在樓下遛娃的時候,發現了一個比較奇怪的現象,我們小區的精英人士,程式員老馬竟然有空出來看孩子了。這可是從來沒有發生過的,以前都是老馬的父母或者老婆在看孩子,因為他作業實在是太忙了。老馬是做程式員作業的,而且從大學畢業開始就一直從事程式員的作業。前幾年,老馬奉行的原則是能跳槽就跳槽,跳槽一回,工資翻番。情況也確實是這樣,他29歲以前,換了3家公司,每次跳槽工資都能加點,直到最終進入了國內某知名企業,成為一名正式員工,才結束了他的跳槽生涯。二、從巔峰跌落谷底那時候老馬才29歲,進入這....
uj5u.com 2021-04-09 11:53:26 more