背景：目前公司業務需要統計超過7天以上的特征統計，但是kafka只存7天的資料，如果只想通過flink sql去計算30天的用戶特征要求當天生效，這是完不成的，但是看到下面的分享，感覺未來的方向有了。一、2021 Apache Flink Meetup - Hosted by Netflix 的youtobe視頻分享目前這是Netflix的分享，目前還未將backfilling 的功能貢獻回 iceberg 社區https://www.youtube.com/watch?v=rtz3p_iijP8...
2021-02-03 more本文的主要任務：新建工程，匯入照片，設定輸出坐標系，匯入控制點，匯入POS資料，提交自由空三，匹配的連接點檢查。文章目錄1. 新建工程2. 匯入照片3. 設定輸出坐標系4. 匯入POS5. 匯入像控點6. 自由空三（對齊照片）1. 新建工程打開軟體，軟體會自動新建一個工程，點擊保存按鈕，將工程保存到指定的檔案夾下并命名。2. 匯入照片點擊選單欄【作業流程】，下拉選單中有【添加照片】、【添加檔案夾】選項，分別以選擇照片和選擇整個檔案夾影像方式加入影像，如下圖所示：點擊【添加檔案夾】，出.....
2021-02-03 moreLinux自學之旅-基礎命令（find搜索命令）文章目錄前言一、find二、find使用1.根據檔案名進行搜索2.根據檔案大小進行搜索3.根據修改時間進行搜索4.根據權限進行搜索5.根據所有者和所屬組進行搜索6.根據檔案型別進行搜索7.配合邏輯運算子同時進行搜索8.額外選項總結前言1.上一節我們講述了locate命令，主要講述了其作用及基本使用，還沒看的請點擊下方鏈接進入：locate命令2.這一節我們講一個同樣可以通過檔案名進行搜索的命令find，不過find命令功能還強大些，它不只是可以通過...
2021-02-03 more系列文章目錄文章目錄系列文章目錄Flink 容錯機制檢查點checkpointIncremental checkpointFlink 容錯機制Flink 檢查點的核心作用是確保狀態正確，即使遇到程式中斷，也要正確。流計算Fault Tolerance的一個很大的挑戰是低延遲，很多Blink任務都是7 x 24小時不間斷，端到端的秒級延遲，要想在遇上網路閃斷，機器壞掉等非預期的問題時候快速恢復正常，并且不影響計算結果正確性是一件極其困難的事情。在Blink中以checkpointing的機制進行容...
2021-02-03 more自定義監控項什么是監控項？監控項：就是我們想要監控的指標，例如剩余記憶體，磁盤空間，服務的狀態等等每一個監控項，都有一個唯一的key，簡潔明了(相當于shell腳本的變數名)只需要安裝zabbix-agent，默認就支持大量的監控項，但是linux模板并沒有使用所有監控項Template OS Linux by Zabbix agent主要監控了cpu,記憶體，磁盤，網卡，安全，它們都屬于通用監控應用集是監控項的分組使用內置key監控nginx的狀態（注意：添加監控項之前最好使用zabb...
2021-02-03 more28天自我挑戰，從0開始學 會Python月入28K，Python最近這么火，很多小伙伴還不知道Python到底是什么?能干什么?一句話: Python是最簡潔、最好學的語言。學完Python讓自己的作業效率提高幾倍，不用每天熬夜加班，就能輕松完成任務，處理海量資料，又好又快，還0差錯率，總能交出讓領導和甲方爸爸滿意的成果或方案。如果說編程是一個活躍在現實世界里的語言。那么Python就是所有語言里，最強大高效還簡單易學的。看到這里，我該教你怎么系統地自學Python?我用心整理了很多資源，...
2021-02-03 moremacos使用C+±connector連接mysql環境配置多有借鑒：https://blog.csdn.net/zhang35/article/details/106724791/其實官網的教程只說明了最終步驟，但是你去執行一定會報錯。錯誤可以分為兩種：找不到頭檔案（如mysql.h）找不到lib庫（如libssl.1.1.dylib)第一個問題需要你指定頭檔案所在的目錄，其實就是兩個目錄/usr/local/mysql/include，/usr/local/mysql-connector...
2021-02-03 more對于大中型企業來說，資料處理和分析就是一個深不見底的巨坑。因為經過多年的經營和資訊化建設，系統里早就積累了大量冗雜的資料，如何從這些資料中抽絲剝繭，對關鍵資料進行處理分析，是每個資料分析人必須思考的問題。大家都知道 Excel可以處理資料，可如果要處理一個企業級的海量資料呢？Excel就顯得很吃力了，這時BI（商業智能）工具應運而生，它不僅可以代替Excel處理海量資料，同時能快速生成報表，提供決策依據。市面上BI工具很多，國外的Tableau、PowerBI都是佼佼者，產品做得很好，但存在著本土化...
2021-02-03 more如何從xshell上傳檔案到centos linux虛擬機里及：虛擬機CentOs下執行 yum -y install lrzsz命令，出現錯誤：鏡像無法找到軟體包 前言 一、安裝lrzsz步驟 二、上傳檔案 三、遇到的問題及解決方案 總結 前言 提示：其實很簡單，往虛擬機上安裝一個上傳檔案的工具 ......
uj5u.com 2020-09-10 02:00:47 more一、SQLMAP入門 1、判斷是否存在注入 sqlmap.py -u 網址/id=1 id=1不可缺少。當注入點后面的引數大于兩個時。需要加雙引號， sqlmap.py -u "網址/id=1&uid=1" 2、判斷文本中的請求是否存在注入 從文本中加載http請求，SQLMAP可以從一個文本檔案中 ......
uj5u.com 2020-09-10 02:00:50 moremetasploit 簡單使用教程 浩先生， 2020-08-28 16:18:25 分類專欄： kail 網路安全 linux 文章標簽： linux資訊安全 編輯 著作權 metasploit 使用教程 前言 一、Metasploit是什么？ 二、準備作業 三、具體步驟 前言 Msfconsole ......
uj5u.com 2020-09-10 02:00:53 more驅動層代碼： #pragma once #include <ntifs.h> #define add_code CTL_CODE(FILE_DEVICE_UNKNOWN,0x800,METHOD_BUFFERED,FILE_ANY_ACCESS) /* 更多游戲逆向視頻www.yxfzedu.com ......
uj5u.com 2020-09-10 02:00:56 more北斗電力時鐘（北斗授時服務器）讓網路資料更精準 北斗電力時鐘（北斗授時服務器）讓網路資料更精準 京準電子科技官微——ahjzsz 近幾年，資訊技術的得了快速發展，互聯網在逐漸普及，其在人們生活和生產中都得到了廣泛應用，并且取得了不錯的應用效果。計算機網路資訊在電力系統中的應用，一方面使電力系統的運行 ......
uj5u.com 2020-09-10 02:01:03 more?碎碎念 CTFHub：https://www.ctfhub.com/ 筆者入門CTF時時剛開始刷的是bugku的舊平臺，后來才有了CTFHub。 感覺不論是網頁UI設計，還是題目質量，賽事跟蹤，工具軟體都做得很不錯。 而且因為獨到的金幣制度的確讓人有一種想去刷題賺金幣的感覺。 個人還是非常喜歡這個 ......
uj5u.com 2020-09-10 02:04:05 more我學到了一下幾點 Windows系統目錄結構與滲透的作用 常見Windows的服務詳解 Windows埠詳解 常用的Windows注冊表詳解 hacker DOS命令詳解（net user / type /md /rd/ dir /cd /net use copy、批處理 等） 利用dos命令制作 ......
uj5u.com 2020-09-10 02:04:18 more我學到了以下幾點 01Linux系統介紹02系統安裝，密碼啊破解03Linux常用命令04LAMP 01LINUX windows： win03 8 12 16 19 配置不繁瑣 Linux：redhat,centos(紅帽社區版)，Ubuntu server,suse unix:金融機構，證券，銀 ......
uj5u.com 2020-09-10 02:04:30 more之前的博客寫了一篇，從影像上通過滑鼠點擊獲取坐標區域，并填充顏色，如果需要我們選擇的區域繼續劃分成不同區域，是不是能檢測更多內容，比如那一塊區域通過的人數最多。先來回顧之前的代碼import cv2import numpy as np img = cv2.imread('6.jpg') #加載本地的影像img2 = img.copy()a = [] #用于存放橫坐標b = [] #用于存放縱坐標 print('請....
uj5u.com 2021-08-16 06:33:54 more深度學習目標檢測：RCNN什么是目標檢測？目標檢測主要是明確從圖中看到了什么物體？他們在什么位置。傳統的目標檢測方法一般分為三個階段：首先在給定的影像上選擇一些候選的區域，然后對這些區域提取特征，最后使用訓練的分類器進行分類。1. 區域選擇這一步是為了對目標進行定位。傳統方法是采用窮舉策略。由于目標可能在圖片上的任意位置，而且大小不定，因此使用滑動視窗的策略對整幅影像進行遍歷，而且需要設定不同的長寬。這種策略雖然可以檢測到所有可能出現的位置，但是時間復雜度太高，產生的冗余視窗太多，嚴重影響后續特征的提...
uj5u.com 2021-08-16 06:33:15 more目錄資料集可用資料集sklearn資料集特征提取字典文本特征預處理無量綱化歸一化標準化特征降維特征選擇主成分分析（PCA降維）資料集下面列舉了一些示例來說明哪些內容能算作資料集：包含某些資料的表格或 CSV 檔案組織有序的表格集合采用專有格式的檔案，其中包含資料可共同構成某個有意義資料集的一組檔案包含其他格式的資料的結構化物件，您可能希望將其加載到特殊工具中進行處理捕獲資料的圖...
uj5u.com 2021-08-16 06:30:29 moreopencv_contribute配置總結：--1、opencv_contribute安裝版本必須和opencv一致--2、cmake必須以管理員身份運行（電腦權限）--3、cmake配置時bulid_opencv_world最好不勾選--4、win10可能由于sdk版本太低，導致cmake出現project invalid--5、最好網上找大佬下載好的（.cache）檔案，直接放置在opencv/source/.cache檔案里面，因為里面有些東西很難下載.--6、generate成功后生成....
uj5u.com 2021-08-16 06:29:31 moregithub上有一個開源的作業流專案elsa，elsa-core是core語言的版本，其檔案因為是英文，因此會讓很多人不想看，或者是看不下去，從這篇文章開始我將開始對elsa-core的檔案翻譯成英文并分享出來，方便大家查看與學習。 以下為正文： 在本快速入門中，我們將了解一個執行作業流的最小控制臺 ......
uj5u.com 2021-08-16 06:23:30 moregithub上有一個開源的作業流專案elsa，elsa-core是core語言的版本，其檔案因為是英文，因此會讓很多人不想看，或者是看不下去，從這篇文章開始我將開始對elsa-core的檔案翻譯成英文并分享出來，方便大家查看與學習。 以下為正文： 在本快速入門中，我們將了解一個執行作業流的最小控制臺 ......
uj5u.com 2021-08-16 06:21:25 more一 . 前言檔案目的梳理 Gateway 生產中轉發請求的細節 梳理 轉發的定制點知識補充請求轉發是 Gateway 最核心的功能之一 , 他涉及到三個主要的概念 :Route（路由）: 路由是網關的基本單元，由ID、URI、一組Predicate、一組Filter組成，如果 Predicate 匹配 True ,則進行轉發Predicate（謂語、斷言）: 路由轉發的判斷條件，這是一個 Java 8函式斷言, 輸入型別是 Spring Framework ServerWebEx...
uj5u.com 2021-08-15 19:48:55 more??手把手教你Camel 環境搭建??《??記得收藏??》目錄 ????開講啦！！！！1、Vagrant 環境1.1、Vagrant 是什么1.2、Vagrant 能做什么1.3、Vagrant 相關軟體下載1.4、Vagrant 配置環境變數（Windows）1.4.1、VirtualBox1.4.2、Vagrant1.5、啟動 Vagrant1.5.1、創建 vagrant 環境目錄1.5.2、vagrant box 下載1.5.3、使用 box 方式安裝系統1.5.4、初始化和 Vagrantfil...
uj5u.com 2021-08-15 10:11:01 moreDockerDocker是虛擬化容器技術。可以秒級啟動各種容器。每一種容器都是一個完整地運行環境，容器之間互相隔離。docker 的鏡像倉庫地址：https://hub.docker.com/安裝Docker進入官網選擇自己的版本先卸載以前的舊版本sudo yum remove docker \ docker-client \ docker-client-latest \ doc...
uj5u.com 2021-08-15 10:07:42 more目錄http_load簡介下載和安裝引數的使用http_load使用性能指標衡量http_load簡介基于linux系統的一種性能測驗工具。并以并行復用的方式運行，用于測驗Web服務器的吞吐量與負載，測驗web頁面的性能優點：1.基于命令列，簡單易上手 2.小巧輕便，解壓縮后不到100k 3.開源，免費下載和安裝進入作業的目錄下#cd /usr/local/wget http://acme.com/software/ht......
uj5u.com 2021-08-15 10:07:26 more