python爬蟲入門(1)初識爬蟲,了解簡單的概念后,先做一點小的專案,打幾行代碼,感受一下,才方便繼續學習。在pycharm上運行需要的函式庫:簡單地來說:lxml–其中的HTML可決議網頁pip(似乎需要最新版本)requests–申請訪問直接上代碼(每一個必要位置均有注釋):(xpath最后會提到)import requestsurl = 'http://movie.douban.com/top250'#偽裝身份--headers--dicheaders = {'use...
2021-02-20 more目錄pyecharts介紹特性優勢展示柱狀圖模板系列水晶柱狀圖解決X軸標簽過長的柱狀圖自定義平均刻度標簽(方便查看超出范圍)翻轉X Y軸柱狀圖可以移動的X軸柱狀圖(適合資料類別過多)可以移動的Y軸柱狀圖(適合資料類別過多)二維簡單柱狀圖(主題可選擇)影片延遲柱狀圖直方圖按照顏色區分每文一語pyecharts介紹pyecharts是python與echarts鏈接,一個用于生成Echarts圖示的第三方庫,pyecharts分為v0.5.X和...
2021-02-20 more開篇閑聊最近也是看完了崔慶才爬蟲52講里面JavaScript逆向部分,里面介紹了從簡單到復雜整個JavaScript逆向的方法,里面也有一些實戰案例(可以練習的),跟著視頻練習之后,雖然也成功了,但是跟著一步一步的分析,總是不知道自己哪里懂了,哪里不懂,就想著自己找個網站實戰練習一下。偶然的機會跟學姐閑聊的時候學姐給我發了一個網站,讓我練一下手。就有了下面的分析,因為是初次自己獨立的進行JavaScript實戰,難免會出現一些問題,期間也少不了大佬的幫助。廢話不多說了,請出我們今天的主角:藝恩-中國電...
2021-02-20 more既然物件是以類為模板生成的,那么類又是以什么為模板生成的?元類具有動態改變類的能力,給編程帶來了更方便的動態性和能力。新型類相比于傳統類,支持更多特性和機制,有更多的彈性。文章目錄元類類工廠初始元類元類屬性元類作用面向方面和元類小結新型類新型類VS傳統類靜態方法和類方法特定方法特定屬性super()方法小結...
2021-02-20 more爬取思路與小結在查找程序中,查看源代碼,bv號可以轉化為av號,ss號可以轉化為ep號即可以相互轉換,如圖,圖中一個視頻就有ep號,av,bv,cv號,代碼中利用了bv號可以轉化為av號,ss號可以轉化為ep號只能對網頁里已有的鏈接進行爬取,無法爬取大會員視頻。打包Pythonpip install pyinstallercd 到bilbili_down.py檔案所在位置在cmd終端直接使用 pyinstaller bilbili_down.py這是我已經打包好的:感興趣的老鐵可以...
2021-02-20 morelist:[2, 3, 4, 1]tuple:(2, 3, 4, 1)compared with list, tuple is immutatable, which cannot be changed.string:“hello”map:dictionary:{}str.split()str.split(‘f’)...
2021-02-20 more獲取百度API token 通用代碼 呼叫百度api有時需要獲取token,基本方法都是一樣的,所以我放在這里方便大家使用import requestsimport json#======================================百度api請求token通用塊兒=======================================# 需要的庫requests、json(import 進來就好了)baidu_server = 'https://aip.baidub...
2021-02-20 more目標:初級目標:通過熱門歌手,抓取網易云音樂上他的熱門歌曲50首的ID及鏈接地址。終極目標:1、通過熱門歌手,抓取歌曲ID。2、通過歌曲ID,抓取評論用戶ID。3、通過評論用戶ID,發送定向推送訊息。為了存盤抓取到的結果,我們用MYSQL存盤結果,這樣把各個步驟分離,通過MYSQL進行資料連接。學習內容:掌握爬蟲程式的撰寫,掌握Python中用PYSQL連接操作MYSQL資料庫。例如:1、 搭建 mysql資料庫2、 掌握 python連接mysql基本語法3、 掌握爬蟲獲取指定信...
2021-02-20 morepython爬取下廚房每周最受歡迎菜譜1、分析程序1、進入網頁下廚房,右鍵->檢查->Network->ALL,重繪網頁點擊第0個請求,再點擊response。2、按下ctrl+f查找任意一個菜名,如能在response中找到,則資料放在html里。則可回傳觀察網頁源代碼,點擊Elements。注:如果在response中找不到資料,則資料應在XHR里,那么就要使用另一種方式抓取資料,本文只介紹在html里抓取資料3、......
2021-02-20 more鏈接:https://codeforces.com/problemset/problem/1400/E 來源:Codeforces 思路:給你一個陣列,現在你可以進行兩種操作,操作1:將一段沒有 0 的區間進行減一的操作,操作2:將 i 位置上的元素歸零。最終問:將這個陣列的全部元素歸零后操作的最少 ......
uj5u.com 2020-09-10 00:57:30 more本人看到此題沒有翻譯,就附帶了一個自己的翻譯版本 思考 這一題,它的第一個要求是找出所有 $7$ 位反向質數及其質因數的個數。 我們應該需要質數篩篩選1~$10^{7}$的所有數,這里就不慢慢介紹了。但是,重讀題,我們突然發現反向質數都是 $7$ 位,而將它反過來后的數字卻是 $6$ 位數,這就說明 ......
uj5u.com 2020-09-10 00:57:36 more1、C中的const 1、區域const變數存放在堆疊區中,會分配記憶體(也就是說可以通過地址間接修改變數的值)。測驗代碼如下: 運行結果: 2、全域const變數存放在只讀資料段(不能通過地址修改,會發生寫入錯誤), 默認為外部聯編,可以給其他源檔案使用(需要用extern關鍵字修飾) 運行結果: ......
uj5u.com 2020-09-10 00:58:04 more1. 首先在資源視圖中,添加資源 2. 點擊新添加的資源,復制自動生成的ID 3. 在解決方案資源管理器中找到Resource.h檔案,編輯,使用整個專案搜索和替換的方式快速替換 宏宣告 4. Ctrl+Shift+F 全域搜索,點擊查找全部,然后逐個替換 5. 為什么使用搜索替換而不使用屬性視窗直 ......
uj5u.com 2020-09-10 00:59:11 more1. 打開資源頭檔案Resource.h,在其中預先定義好宏 ID(不清楚其實ID值應該設定多少,可以先新建一個相同的資源項,再在這個資源的ID值的基礎上遞增即可) 2. 在資源視圖中選中專案資源,按F7編輯資源檔案,按 ID 型別 相對路徑的形式添加 資源。(別忘了先把檔案拷貝到專案中的res檔案 ......
uj5u.com 2020-09-10 01:00:19 more今天要講的是C++中我最喜歡的一個用法——參考,也叫別名。 參考就是給一個變數名取一個變數名,方便我們間接地使用這個變數。我們可以給一個變數創建N個參考,這N + 1個變數共享了同一塊記憶體區域。(參考型別的變數會占用記憶體空間,占用的記憶體空間的大小和指標型別的大小是相同的。雖然參考是一個物件的別名,但 ......
uj5u.com 2020-09-10 01:00:22 more眾所周知,C ++的學習曲線陡峭,但是花時間學習這種語言將為您的職業帶來奇跡,并使您與其他開發人員區分開。您會更輕松地學習新語言,形成真正的解決問題的技能,并在編程的基礎上打下堅實的基礎。 C ++將幫助您養成良好的編程習慣(即清晰一致的編碼風格,在撰寫代碼時注釋代碼,并限制類內部的可見性),并且由 ......
uj5u.com 2020-09-10 01:00:41 moreRust中的智能指標是什么 智能指標(smart pointers)是一類資料結構,是擁有資料所有權和額外功能的指標。是指標的進一步發展 指標(pointer)是一個包含記憶體地址的變數的通用概念。這個地址參考,或 ” 指向”(points at)一些其 他資料 。參考以 & 符號為標志并借用了他們所 ......
uj5u.com 2023-04-20 07:24:10 more值傳遞不會改變本身,參考傳遞(如果傳遞的值需要實體化到堆里)如果發生修改了會改變本身。 1.基本資料型別都是值傳遞 package com.example.basic; public class Test { public static void main(String[] args) { int ......
uj5u.com 2023-04-20 07:24:04 more第一個 Scala 程式 shell里面輸入 $ scala scala> 1 + 1 res0: Int = 2 scala> println("Hello World!") Hello World! 檔案形式 object HelloWorld { /* 這是我的第一個 Scala 程式 * 以 ......
uj5u.com 2023-04-20 07:23:58 more理解 函式指標 指向函式的指標。比如: 理解函式指標的偽代碼 void (*p)(int type, char *data); // 定義一個函式指標p void func(int type, char *data); // 宣告一個函式func p = func; // 將指標p指向函式func ......
uj5u.com 2023-04-20 07:23:52 more本文首發于公眾號:Hunter后端 原文鏈接:Django筆記二十五之資料庫函式之日期函式 日期函式主要介紹兩個大類,Extract() 和 Trunc() Extract() 函式作用是提取日期,比如我們可以提取一個日期欄位的年份,月份,日等資料 Trunc() 的作用則是截取,比如 2022-0 ......
uj5u.com 2023-04-20 07:23:45 more什么是JVM? JVM,全稱Java Virtual Machine(Java虛擬機),是通過在實際的計算機上仿真模擬各種計算機功能來實作的。由一套位元組碼指令集、一組暫存器、一個堆疊、一個垃圾回收堆和一個存盤方法域等組成。JVM屏蔽了與作業系統平臺相關的資訊,使得Java程式只需要生成在Java虛擬機 ......
uj5u.com 2023-04-20 07:23:31 more更新完微信服務號的模板訊息之后,我又趕緊把微信小程式的訂閱訊息給實作了!之前我一直以為微信小程式也是要企業才能申請,沒想到小程式個人就能申請。 訊息推送平臺🔥推送下發【郵件】【短信】【微信服務號】【微信小程式】【企業微信】【釘釘】等訊息型別。 https://gitee.com/zhongfuch ......
uj5u.com 2023-04-20 07:22:59 more緩沖流 緩沖流, 也叫高效流, 按照資料型別分類: 位元組緩沖流:BufferedInputStream,BufferedOutputStream 字符緩沖流:BufferedReader,BufferedWriter 緩沖流的基本原理,是在創建流物件時,會創建一個內置的默認大小的緩沖區陣列,通過緩沖 ......
uj5u.com 2023-04-20 07:22:49 more老實說,人太懶了,現在基本都不喜歡寫筆記了,但是網上有關Range請求頭的文章都太水了 下面是抄的一段StackOverflow的代碼...自己大修改過的,寫的注釋挺全的,應該直接看得懂,就不解釋了 寫的不好...只是希望能給視頻網站開發的新手一點點幫助吧. 業務場景:視頻分段傳輸、視頻多段傳輸(理 ......
uj5u.com 2023-04-20 07:22:42 more教程簡介 Windows 10開發入門教程 - 從簡單的步驟了解Windows 10開發,從基本到高級概念,包括簡介,UWP,第一個應用程式,商店,XAML控制元件,資料系結,XAML性能,自適應設計,自適應UI,自適應代碼,檔案管理,SQLite資料庫,應用程式到應用程式通信,應用程式本地化,應用程式 ......
uj5u.com 2023-04-20 07:22:35 more