知網爬蟲的第一步，輸入檢索條件selenium 通過模擬滑鼠點擊，自動實作：選擇檢索詞的類別、輸入檢索詞、選擇精確還是模糊查找、邏輯關系、點擊檢索按鈕等一系列動作而你所需要做的，就是給出搜索條件：search_words = '摘要:地理探測器(精確) OR 摘要:geodetector(精確)'首先將搜索條件處理成四元組：（邏輯關系，搜索型別，搜索詞，精確|模糊）search_words = 'BEG '+search_wordspieces = search_w...
2020-09-13 more===========================python串列練習題===========================一、創建空串列1.創建一個空串列，命名為names，往里面添加陳賢賢、大財神、飛魚、WuYing、阿陽和Black元素。names = ["陳賢賢", "大財神", "飛魚", "WuYing", "阿陽", "Black"]print(names)2.串列文...
2020-09-13 more歡迎大家來到“Python從零到壹”，在這里我將分享約200篇Python系列文章，帶大家一起去學習和玩耍，看看Python這個有趣的世界。所有文章都將結合案例、代碼和作者的經驗講解，真心想把自己近十年的編程經驗分享給大家，希望對您有所幫助，文章中不足之處也請海涵。Python系列整體框架包括基礎語法10篇、網路爬蟲30篇、可視化分析10篇、機器學習20篇、大資料分析20篇、影像識別30篇、人工智能40篇、Python安全20篇、其他技巧10篇。...
2020-09-13 more網路請求1.urllib庫 —內置urlopen函式：創建一個表示遠程url的類檔案物件，然后像本地檔案一樣操作這個類檔案物件來獲取遠程資料。url：請求的url。data：請求的data，如果設定了這個值，那么將變成post請求。回傳值：回傳值是一個http.client.HTTPResponse物件，這個物件是一個類檔案句柄物件。有read(size)、readline、readlines以及getcode等方法。urlretrieve函式：這個函式可以方便的將網頁上的一個檔案保存到...
2020-09-13 more在2G記憶體的樹莓派上掛了幾個腳本一直跑著，一般7-10天就會被系統強制殺掉，畢竟python的記憶體優化嘛比較呵呵。通過下面命令可以直接查看你的記憶體使用狀況free -h其中free表示真空著的記憶體，available表示被認為可用的記憶體所以我做了個定時監控，查看到Avaliable的記憶體小于總記憶體的15%的時候對腳本進行一下重啟import schedule, psutil, sys, os, threadingdef run_thread(jobs): try: t...
2020-09-13 more一、MNIST數字識別資料集獲取及處理通過學習林大貴老師的《TensorFlow+Keras深度學習人工智能實踐應用》，對影像處理的程序有了較淺薄的理解，在此與大家分享，此第一節為手寫資料的獲取與預處理。在本文中不涉及演算法，筆者用的編譯器為pycharm，使用語言為python，基于TensorFlow架構。1.數字識別資料集獲取1.1 匯入相關模塊匯入keras.utils模塊是因為后續用到獨熱編碼: import numpy as np import pandas as pd from...
2020-09-13 more預測GDP應用：Numpy 線性回歸+Matplotlib 作圖需求通過2000～2019年中美兩國的GDP資料，預測后續幾年GDP的發展趨勢：讀取.csv檔案，并將字串調整為浮點型進行二階線性回歸模擬支持資料可視化保命宣告：用線性回歸預測GDP發展并不合理，只是作為python學習參考。如果想要了解更有意義的GDP對比可以參考b站翟老師的：https://b23.tv/6aYFVf成品效果原資料格式.csv 檔案（“testgdp.csv”），gdp資料每千位均被 “,”...
2020-09-13 more為了專案后續資料需要做準備，開始漸進深入去學習爬蟲，最近做了一個實戰樣例demo，寫了一個爬蟲，獲取全國統計用區劃代碼。資料來源，國家統計局：http://www.stats.gov.cn/tjsj/tjbz/tjyqhdmhcxhfdm/2019/整體分析一下，這個網站的布局樣式簡直不忍直視，可以說是一覽無遺，基本上啥都沒有，突出了政府網站一貫的簡潔高效風格。我將按照代碼順序，差穿插著說明開發思路程序。代碼目錄：先介紹下用到的基礎python檔案。Bean包下兩個類，NbsRegi...
2020-09-13 morepython 行程超時自動退出 裝飾器==**你們也可以把t1.setDaemon(True)注釋掉（超時時間設長一些，執行時間短一些）執行一下看一下這樣就會理解啥是守護執行緒**====**你們也可以把t2.join()注釋掉**==為啥寫這個裝飾器之前做用例測驗的時候，單行程測驗，發現有些用例執行時間特別長，卡死，影響下面用例的執行。剛開始在主函式內添加了超時退出，但是感覺用的不方便，雖然也能實作功能，但是主函式變得特別累贅，所以還是選擇寫一個裝飾器。思路利用python的多執行緒一個執行緒控制主行程...
2020-09-13 moreEmbedding理解嵌入層將正整數（下標）轉換為具有固定大小的向量 ------官網詞嵌入是一種語意空間到向量空間的映射，簡單說就是把每個詞語都轉換為固定維數的向量，并且保證語意接近的兩個詞轉化為向量后，這兩個向量的相似度也高。舉例說明embedding程序：“Could have done better”通過索引對該句子進行編碼，每個單詞分配一個索引，上面的句子就會變成這樣：122 8 114 12創建嵌入矩陣，即每一個索引需要分配多少維向量，也就是說每個詞需要轉化為多少維...
2020-09-13 more最近新學習了下區塊鏈這方面的知識，所學不多，給大家分享下。 # 1. 關于web3j web3j是一個高度模塊化，反應性，型別安全的Java和Android庫，用于與智能合約配合并與以太坊網路上的客戶端（節點）集成。 # 2. 準備作業 jdk版本1.8 引入maven <dependency> < ......
uj5u.com 2020-09-10 03:03:06 more前言 部署智能合約有多種方式，命令列的瀏覽器的渠道都有，但往往跟我們程式員的風格不太相符，因為我們習慣了在IDE里寫了代碼然后打包運行看效果。 雖然現在IDE中已經存在了Solidity插件，可以撰寫智能合約，但是部署智能合約卻要另走他路，沒辦法進行一個快捷的部署與測驗。 如果團隊管理的區塊節點多、 ......
uj5u.com 2020-09-10 03:03:12 more前言 谷歌身份驗證器，前些年大家都比較陌生，但隨著國內互聯網安全的加強，它越來越多地出現在大家的視野中。 比較廣泛接觸的人群是國際3A游戲愛好者，游戲盜號現象嚴重+國外賬號安全應用廣泛，這類游戲一般都會要求用戶系結名為“兩步驗證”、“雙重驗證”等，平臺一般都推薦用谷歌身份驗證器。 后來區塊鏈業務風靡 ......
uj5u.com 2020-09-10 03:03:17 more目錄 ##1.1 ASCII編碼 ASCII（American Standard Code for Information Interchange，美國資訊交換標準代碼）是基于拉丁字母的一套電腦編碼系統，主要用于顯示現代英語和其他西歐語言。它是現今最通用的單位元組編碼系統，并等同于國際標準ISO/IE ......
uj5u.com 2020-09-10 03:04:50 moreNTP時鐘服務器的特點（京準電子） NTP時鐘服務器的特點（京準電子） 京準電子官V——ahjzsz 首先對時間同步進行了背景介紹，然后討論了不同的時間同步網路技術，最后指出了建立全球或區域時間同步網存在的問題。 一、概 述 在通信領域，“同步”概念是指頻率的同步，即網路各個節點的時鐘頻率和相位同步 ......
uj5u.com 2020-09-10 03:05:47 more標準化考場時鐘同步系統推進智能化校園建設 標準化考場時鐘同步系統推進智能化校園建設 安徽京準電子科技官微——ahjzsz 一、背景概述隨著教育事業的快速發展，學校建設如雨后春筍，隨之而來的學校教育、管理、安全方面的問題成了學校管理人員面臨的最大的挑戰，這些問題同時也是學生家長所擔心的。為了讓學生有更 ......
uj5u.com 2020-09-10 03:05:51 more北斗對時服務器（北斗對時設備）電力系統應用 北斗對時服務器（北斗對時設備）電力系統應用 京準電子科技官微（ahjzsz） 中國北斗衛星導航系統（英文名稱：BeiDou Navigation Satellite System，簡稱BDS），因為是目前世界范圍內唯一可以大面積提供免費定位服務的系統，所以 ......
uj5u.com 2020-09-10 03:06:20 more我正在嘗試計算客戶的逗留時間；這不是資料中的欄位，但每一行都是單獨的一天，連續天屬于同一“停留” - 因此，如果同一客戶有 5 行連續天，則他們的停留時間將為 5...
uj5u.com 2022-05-09 09:33:13 more試圖獲得上個月的最后一天，我可以像這樣獲得上個月的第一天(DT_WSTR, 4)YEAR(DATEADD("mm", -1, GETDATE())) "/" RIGHT("0" (DT_WSTR,2)MONTH(DATEADD(...
uj5u.com 2022-05-09 09:32:38 more我有一個在 SAS Enterprise Guide 中運行的 Proc SQL 代碼塊。我需要找到兩個日期之間的天數proc sql;select col_A,col_B,col_C, (put (date(),yymmdd10.)...
uj5u.com 2022-05-09 09:31:49 more我需要一個函式來獲取 UTC 日期時間。我只傳遞了日期、時間和時區名稱。我需要獲取 UTC 時間和日期。謝謝你前任：const utcDate = getUTCDateTime("2022-05-...
uj5u.com 2022-05-09 09:31:03 more我有一個隨機的、有時是不常見的事件的資料集，我想把它們算作每周的總和。由于隨機性，它們不是線性的，所以到目前為止我嘗試過的其他示例不適用。資料與此類似...
uj5u.com 2022-05-09 09:29:48 more我在 DataFrame 中有主要由日期組成的列。但也可能有字串或空值。我想從列中提取年份，但由于字串值而出錯。有沒有辦法對此應用通用解決方案？不僅要獲得一年...
uj5u.com 2022-05-09 09:29:04 more我有一個初始的 PySpark 資料框，我想從日期列中獲取MINand ，然后MAX使用我的初始資料框中的 and 創建一個具有時間序列（每日日期）的新 PySpark 資料框。MINMAX...
uj5u.com 2022-05-09 09:28:33 more我有一個時間序列資料框，我使用以下代碼計算每個月的天數：count_dates=df_inner.groupBy('dates').count().orderBy('dates')此代碼為我提供了一個包含 1 列...
uj5u.com 2022-05-09 09:27:59 more我想找到最好的共同時間來改變其他時間最少（差異的總和是最低的）。在輸入時，我有時間陣列。在輸出時，應該有新的、共同的時間。請注意，時間不能排序并且絕對不同...
uj5u.com 2022-05-09 09:27:16 more我有一個包含 2 列的 xlsx 表，以值 YYYY-MM-DD HH:MM:SS.000 開始和結束（為了清楚起見，假設我的精度高達毫秒）。開始和結束列沒有任何格式。如何計算這 2 列之...
uj5u.com 2022-05-09 09:26:13 more