賽程持續大概了兩個多月的時間,從筆者臨近畢業到作業,算是學生時代最后一個比賽吧,遺憾的是成績并不是很理想,最后只拿到了國二,到了復賽階段又是被迫solo的局面。復賽期間體會到了在職人員的不易,白天上班,晚上熬夜打比賽,真的太難了┭┮﹏┭┮。最后,做為學生時代的“收官之賽”,還是在此記錄下比賽程序中學習到的知識,感謝周周星的分享以及大佬們無私的開源,努力向前排優秀選手學習。一、賽題描述此次比賽基于脫敏和采樣后的資料資訊,對于給定的一定數量到訪過微信視頻號“熱門推薦”的用戶, 根據這些用戶在視頻號內的歷....
2021-08-19 moreJava API 操作ESJava API 操作ESPOM依賴創建Bean定義操作資料介面介面實作類APIJava API 操作ESPOM依賴 <repositories><!-- 代碼庫 --> <repository> <id>aliyun</id> <url>http://maven.aliyun.com/nexus/content/groups/public/...
2021-08-19 more1、聚合后分頁應用場景在常規檢索的基礎上,用戶期望回傳基于特定欄位的聚合結果,且用戶期望分頁查看檢索和聚合結果。如下圖所示:以2020東京奧運會熱點新聞亞洲飛人"蘇炳添”為例,用戶......
2021-08-19 more現在大部分公司都會選擇將應用、中間件、系統等日志存盤在 Elasticsearch 中,如何發現日志中的例外資料并且及時告警通知就顯得十分重要。本文將會介紹兩種主流的日志監控方案,分別是 Yelp 公司開源的 ElastAlert 和 Elastic 官方的商業版功能 Watcher。如下圖所示,日志資料源是一臺 Nginx 服務器,在該服務器上安裝 Filebeat 收集 Nginx 日志并輸出到 Elasticsearch,之后會分別演示用 ElastAlert 和 Watcher 兩種方案監控日志并...
2021-08-19 more希爾排序是在直接插入排序的基礎上的一種優化:因為在逆序情況下,直接插入排序每次插入都要比較大小,遍歷一邊陣列元組,復雜度很高;所以針對這種情況,偉大的希爾,提出了將陣列每輪元素間隔gap重新分組插入排序,gap越大,逆序情況下,大資料就越快回到陣列高位,gap=1時,就是直接插入#include<stdio.h>/*專案需求:對一個陣列中的元素進行,插入排序插入排序:插入一個數字,按照大小順序在整個陣列中排序;類似于接牌的程序,按照牌的大小給牌排序,同時牌越來越多,占用的空間也是越來越...
2021-08-19 more目錄基本概念算子介紹1. reduce2. collect3. count4. first5. take6. takeOrdered案例實操1-67. aggregate8. fold案例實操7-89. countByKey案例實操10. save相關算子案例實操11. foreach案例實操基本概念行動算子主要是將在資料集上運行計算后的數值回傳到驅動程式,從而觸發觸發作業(Job)的執行。其底層代碼呼叫的就是runJob的方法,底層會創建ActiveJob,并提交執行。算子介紹1. reduce...
2021-08-19 more文章大綱簡介正則化標準化(standardization)歸一化spark 中的標準化spark 中的歸一化參考文獻簡介正則化標準化(standardization)資料標準化是將資料按比例縮放,使其落入到一個小的區間內,標準化后的資料可正可負,但是一般絕對值不會太大,一般是z-score標準化方法:減去期望后除以標準差。x?=x?uσx^\ast=\frac{x-u}\sigmax?=σx?u?特點:對不同特征維度的伸縮變換的目的是使其不同度量之間的特征具有可比性,同時不改變原始數...
2021-08-19 more2021年廣東省大資料技術與應用技能大賽 真題測驗資料前面兩章講過關于2021年廣東省專業技能大賽——大資料技術與應用 真題題目及決議:2021年廣東省專業技能大賽——大資料技術與應用 真題題目及決議(1)2021年廣東省專業技能大賽——大資料技術與應用 真題題目及決議(2)本章主要寫的是對于大資料技術與應用這塊當中的任務三《資料清洗與分析》,對于前面兩章如果有認真看的小伙伴,應該可以大概寫出不少的代碼了。但對于資料缺少可能部分小伙伴不知道如何下手,一下提供兩種資料,大致涵蓋了前面兩章任務三所...
2021-08-19 more如何從xshell上傳檔案到centos linux虛擬機里及:虛擬機CentOs下執行 yum -y install lrzsz命令,出現錯誤:鏡像無法找到軟體包 前言 一、安裝lrzsz步驟 二、上傳檔案 三、遇到的問題及解決方案 總結 前言 提示:其實很簡單,往虛擬機上安裝一個上傳檔案的工具 ......
uj5u.com 2020-09-10 02:00:47 more一、SQLMAP入門 1、判斷是否存在注入 sqlmap.py -u 網址/id=1 id=1不可缺少。當注入點后面的引數大于兩個時。需要加雙引號, sqlmap.py -u "網址/id=1&uid=1" 2、判斷文本中的請求是否存在注入 從文本中加載http請求,SQLMAP可以從一個文本檔案中 ......
uj5u.com 2020-09-10 02:00:50 moremetasploit 簡單使用教程 浩先生, 2020-08-28 16:18:25 分類專欄: kail 網路安全 linux 文章標簽: linux資訊安全 編輯 著作權 metasploit 使用教程 前言 一、Metasploit是什么? 二、準備作業 三、具體步驟 前言 Msfconsole ......
uj5u.com 2020-09-10 02:00:53 more驅動層代碼: #pragma once #include <ntifs.h> #define add_code CTL_CODE(FILE_DEVICE_UNKNOWN,0x800,METHOD_BUFFERED,FILE_ANY_ACCESS) /* 更多游戲逆向視頻www.yxfzedu.com ......
uj5u.com 2020-09-10 02:00:56 more北斗電力時鐘(北斗授時服務器)讓網路資料更精準 北斗電力時鐘(北斗授時服務器)讓網路資料更精準 京準電子科技官微——ahjzsz 近幾年,資訊技術的得了快速發展,互聯網在逐漸普及,其在人們生活和生產中都得到了廣泛應用,并且取得了不錯的應用效果。計算機網路資訊在電力系統中的應用,一方面使電力系統的運行 ......
uj5u.com 2020-09-10 02:01:03 more?碎碎念 CTFHub:https://www.ctfhub.com/ 筆者入門CTF時時剛開始刷的是bugku的舊平臺,后來才有了CTFHub。 感覺不論是網頁UI設計,還是題目質量,賽事跟蹤,工具軟體都做得很不錯。 而且因為獨到的金幣制度的確讓人有一種想去刷題賺金幣的感覺。 個人還是非常喜歡這個 ......
uj5u.com 2020-09-10 02:04:05 more我學到了一下幾點 Windows系統目錄結構與滲透的作用 常見Windows的服務詳解 Windows埠詳解 常用的Windows注冊表詳解 hacker DOS命令詳解(net user / type /md /rd/ dir /cd /net use copy、批處理 等) 利用dos命令制作 ......
uj5u.com 2020-09-10 02:04:18 more我學到了以下幾點 01Linux系統介紹02系統安裝,密碼啊破解03Linux常用命令04LAMP 01LINUX windows: win03 8 12 16 19 配置不繁瑣 Linux:redhat,centos(紅帽社區版),Ubuntu server,suse unix:金融機構,證券,銀 ......
uj5u.com 2020-09-10 02:04:30 more信管通低代碼開發工具包括兩個大部分,一部分是公司內部使用的設計工具,負責業務系統的研發設計,另一部分是終端客戶使用的應用工具,是由公司內部業務系統開發人員使用的設計工具設計好的業務系統在終端客戶的一個交換處理軟體平臺,從而滿足用戶的不同業務要求,終端客戶應用工具又分為單機版和網路版,適應用戶的不同應用環境。信管通低代碼開發工具總體結構圖如圖所示。信管通低代碼快速開發平臺就是公司內部使用的設計系統,信管通綜合協辦公資訊管理系統就是終端用戶使用的業務系統互動資訊處理的平臺,信管通低代碼開發工具設計....
uj5u.com 2021-08-23 09:50:11 more虛擬機linux密碼忘記,通過但用戶模式修改密碼第一步:重新啟動虛擬機,再出現進度條時按e鍵(啟動編輯器),進入到以下界面,再次按下e鍵第二步:進入以下界面后,通過上下鍵選擇第二項,按下e鍵第三步:進入以下界面后,在quiet 后面輸入空格和s,然后按回車確認第四步:進入以下界面后,按b鍵(boot啟動)第五步:進入單用戶模式,輸入passwd root (root表示的是需要重置密碼的用戶名)和新密碼,按回車鍵確認第六步:輸入reboot重啟系統第七步:重新啟動后,使用新密碼登陸...
uj5u.com 2021-08-23 09:10:00 more這里寫自定義目錄標題歡迎使用Markdown編輯器新的改變功能快捷鍵合理的創建標題,有助于目錄的生成如何改變文本的樣式插入鏈接與圖片如何插入一段漂亮的代碼片生成一個適合你的串列創建一個表格設定內容居中、居左、居右SmartyPants創建一個自定義串列如何創建一個注腳注釋也是必不可少的KaTeX數學公式新的甘特圖功能,豐富你的文章UML 圖表FLowchart流程圖匯出與匯入匯出匯入歡迎使用Markdown編輯器你好! 這是你第一次使用 Markdown編輯器 所展示的歡迎頁。如果你想學習如何使用Mar...
uj5u.com 2021-08-23 09:09:45 more1、運行時資料區域JVM虛擬機在執行Java程式時,會把它所管理的記憶體劃分為若干個不同的記憶體區域,如下圖所示。這些區域有著各自的用途,它們的生命周期也各不相同。其中,方法區和堆的生命周期與JVM虛擬機相同,隨著虛擬機行程的啟動而存在,因此,它們也是所有Java執行緒共享的資料區域;而虛擬機堆疊、本地方法堆疊和程式計數器,它們的生命周期與用戶執行緒相互依賴,隨著用戶執行緒的啟動和結束而對應地創建和銷毀,因此,它們也是執行緒私有的資料區域,也就是每個執行緒都有各自的虛擬機堆疊、本地方法堆疊和程式計數器。各...
uj5u.com 2021-08-23 09:09:31 morewindows安裝和使用nginx1、下載官網下載【nginx/Windows-1.20.1】下載成功后解壓,檔案如下:2、啟動nginx方式一:直接雙擊nginx.exe方式二:打開cmd命令視窗,切換到nginx解壓目錄下,輸入命令 nginx.exe 或者 start nginx ,回車即可驗證是否啟動成功:在瀏覽器輸入 http://localhost,看到以下界面則說明啟動成功:通過cmd查看nginx運行情況:打開cmd,執行:tasklist /fi "image...
uj5u.com 2021-08-23 09:09:08 more一.簡介1.什么是ansible? ansible的官方標題為:"Ansible is Simple IT Automation",也就是說ansible是一種簡單的自動化IT工具. 工具目標:1.自動化部署APP 2.自動化管理配置項 3.自動化的持續交付 4.自動化的云服務管理2.ansible特性 模塊化:呼叫特定的模塊,完成特定的任務 Paramiko (Python對ssh的實作),PyYaml,Jinja2(模板語言)三個關鍵模塊......
uj5u.com 2021-08-23 09:08:40 more文章目錄:1.容器資料卷是什么?2.容器資料卷能干嘛?3.容器內添加資料卷3.1 直接使用命令添加3.2 使用DockerFile添加4.資料卷容器1.容器資料卷是什么?先來看看Docker的理念:* 將運用與運行的環境打包形成容器運行 ,運行可以伴隨著容器,但是我們對資料的要求希望是持久化的。* 容器之間希望有可能共享資料。Docker容器產生的資料,如果不通過docker commit生成新的鏡像,使得資料做為鏡像的一部分保存下來,那么當容器洗掉后,資料自.....
uj5u.com 2021-08-23 09:08:04 more實驗步驟一根據實驗環境,本實驗的步驟如下:1、測驗環境中獲取DNS資料包。2、分析DNS資料包。任務描述:獲取兩種型別的DNS資料包(1)通過瀏覽器訪問域名(www.baidu.com)來獲取DNS資料雖然合天實驗室環境下,無法抓取此部分資料包(其實也可以自己搭建服務器,配置DNS服務器,但設計者比較懶,就將就下吧),但設計者希望學習的人能根據例子在自己的筆記本上抓取,然后分析。我們以登錄www.baidu.com來獲取DNS資料,啟動Wireshark,在Filter中輸入dns。打開瀏覽器...
uj5u.com 2021-08-23 09:07:06 more