剛剛參加完大資料技能競賽，回到學校立刻就開啟了計算機設計大賽，時間非常倉促，所以這個專案只能一邊設計一邊開發，12天的速成品，就只能這樣啦，
這個專案主要主題是崗位分析，分析用戶的期待崗位，為用戶生成個人報告，
在很多招聘平臺上，崗位大多以串列的形式展示，用戶只能看到區域文字資料，如果需要查看多個城市相同崗位之間的差異，就要定位到另一個城市，對于我這個記憶力不太好的人來說不是很方便，所以就有了這個專案，
下面這個就是首頁外層的說明頁，是不是感覺有點高逼格？（其實并沒有）
這是點擊進入之后的主頁，可以看到各個省份的平均薪資資訊，中間的地圖和右邊的柱狀圖都是可以點擊的，如果想要了解某個城市的話，就點擊進去，
點擊了某個省份之后，就可以查看這個省份以及這個省份的城市的崗位資訊，
以上的都是沒登錄狀態可以看到的，現在展示登錄情況下新增的個人報告，噢忘記了，我還沒有賬號，那就先注冊去了，
然后登錄一下哎
登錄之后導航欄就新增兩個模塊
先看看個人中心，這個模塊可以修改個人資訊，有點空落落的，沒辦法，時間倉促，，，
再看看個人報告吧
然后就沒有然后了，別懷疑，普通用戶就只有這單體驗了，
還是介紹一下超級管理員賬號登錄激活后臺管理模塊，
進入后臺之后
對用戶進行管理
還有用戶分析，因為沒有新用戶注冊，所以圖好丑
之前的圖是這樣的
還可以更改爬蟲的資料，這個反人類技術，我還是很慌的
資料沒有商用，專案只是在本地跑！~~
看到這里，可視化專案就結束啦，資料源是scrapy爬蟲爬取回來的資料啦，爬取回來會用spark清洗，都是用shell腳本寫的，用定時任務crotabel，每天定時爬取，報錯會發郵件，用redis記錄狀態碼，以防資料沒爬取完就啟動spark清洗，不過展示用的都是之前練手的資料源，
emmm，后期如果有穩定的資料源，會考慮用pandas和sklearn等技術進行更新，
希望能通過初賽吧，奔跑吧~12天的沒日沒夜，
轉載請註明出處，本文鏈接：https://www.uj5u.com/qita/283035.html
標籤：AI
下一篇：Openssl流量加密