??大家好，我是不溫卜火，是一名計算機學院大資料專業大三的學生，昵稱來源于成語—不溫不火，本意是希望自己性情溫和。作為一名互聯網行業的小白，博主寫博客一方面是為了記錄自己的學習程序，另一方面是總結自己所犯的錯誤希望能夠幫助到很多和自己一樣處于起步階段的萌新。但由于水平有限，博客中難免會有一些錯誤出現，有紕漏之處懇請各位大佬不吝賜教！暫時只有csdn這一個平臺，博客主頁：https://buwenbuhuo.blog.csdn.net/本片博文為大家帶來的是快速爬取整站圖片，我是專業的！。完整代碼在....
2020-10-02 more文章目錄1.分析登錄程序2.代碼實作1.分析登錄程序我們以github為例，分析登錄的程序打開 GitHub 的登錄頁面，鏈接為 https://github.com/login ，輸入 GitHub 的用戶名和密碼，打開開發者工具，將 Preserve Log 選項勾選上，這表示顯示持續日志，如下圖所示。點擊登錄按鈕，這時便會看到開發者工具下方顯示了各個請求程序，如下圖所示。點擊第一個請求，進入其詳情頁面，如下圖所示。可以看到請求的 URL 為 https://github.com/se...
2020-10-02 more文章目錄前言6. 公共操作6.1 運算子6.2 公共方法6.3 容器型別轉換7. 推導式7.1 串列推導式7.2 字典推導式7.3 集合推導式7.4 推導式總結前言6. 公共操作 公共操作：資料序列基本上都支持的一些操作 6.1 運算子 運算子描述支持的容器型別+合并字串、串列、元組*復制字串、串列、元組in元素是否存在字串、串列、元組、字典not in元素是否存在字串、串列、元組、字典&nb...
2020-10-02 more一.作為一名入門django的新手，第一次在終端輸入django-admin.py時，出現了 django-admin.py commond not found。百度了很多資料，發現mac系統自帶的是python2,而我自己新裝的是python3,django是裝在python3里的。故我想把**MAC系統默認的Python版本由Python2.x改為Python3.x****二 操作流程終端打開.bash_profile檔案open ~/.bash_profile修改.bash_prof...
2020-10-02 more文章目錄BP推導全程序一些變數的含義BP推導全程序BP的整個程序還是很嚴謹的一些變數的含義這里的的網路采用三層感知機結構以簡單的sigmod函式如為例：f(x)=11+e?xf(x)′=f(x)(1?f(x))f (x)=\frac {1}{1+e^{-x}}\\f(x)'=f(x)(1-f(x))f(x)=1+e?x1?f(x)′=f(x)(1?f(x))下面定義一些變數輸入向量X=(x1,x2,?xn)T隱層輸出向量Y=(y1,y2,?ym)T輸入層到隱層的權重VV=()V=[v...
2020-10-02 morePython qutip用法(舉例介紹)一、N原子系綜自旋概率分布from qutip import *import numpy as npimport matplotlib.pyplot as pltn=2#原子數j = n//2psi0 = spin_coherent(j, np.pi/3, 0)#設定系統的初態為自旋相干態Jp=destroy(2*j+1).dag()#升算符J_=destroy(2*j+1)#降算符Jz=(Jp*J_-J_*Jp)/2#JzH=Jz**2#...
2020-10-02 more代碼示例python的串列決議是個非常強大的工具，我們可以用它來替代許多有關回圈的操作，而使用串列決議生成一個完整的乘法表僅需一行代碼：_ = [print("{}x{}={:<4}".format(y, x, x*y), end="\n" if x==y else "") for x in range(1, 10) for y in range(1, x+1)]其結果為：1x1=11x2=2 2x2=41x3=3 2x3=6...
2020-10-02 more運算子1.加法和數學中的+的用法是一樣的2.減法和數學中的-的用法是一樣的3.乘法Python中的乘號是*，和數學中的乘號有區別4.除法**注意：除號是/，不是\，有好多人都會寫錯5.除法中的取商取商的運算子是//，很好記住，可以和/作為一組記憶6.除法中的余數運算子是%7.冪的運算冪的運算子為**，可以和乘法*作為一組記憶課后練習題1.print(((10//3）**2)%3)2.print((((21/3)*2)+22)**(0.5))3.print...
2020-10-02 morePython實作掃碼工具二維碼作為一種資訊傳遞的工具，在當今社會發揮了重要作用。從手機用戶登錄到手機支付，生活的各個角落都能看到二維碼的存在。那你知道二維碼是怎么決議的嗎？有想過自己實作一個掃碼工具嗎？如果想的話就繼續看下去吧！......
2020-10-02 more**?桔妹導讀：**GPU虛擬機實體創建速度慢是公有云面臨的普遍問題，由于通常情況下創建虛擬機屬于低頻操作而未引起業界的重視，實際生產中還是存在對GPU實體創建時間有苛刻要求的業務場景。本文將介紹滴滴云在解決該問題時的思路、方法、并展示最終的優化成果。 從公有云服務商那里購買過虛擬主機的資深用戶，一 ......
uj5u.com 2020-09-10 06:09:13 more**?桔妹導讀：**隨著云規模不斷擴大以及業務層面對延遲、帶寬的要求越來越高，采用DPDK 加速網路報文處理的方式在橫向縱向擴展都出現了局限性。可編程芯片成為業界熱點。本文主要講述了可編程網卡芯片在滴滴云網路中的應用實踐，遇到的問題、帶來的收益以及開源社區貢獻。 #1. 資料中心面臨的問題 隨著滴滴 ......
uj5u.com 2020-09-10 06:10:21 more**?桔妹導讀：**滴滴資料通道引擎承載著全公司的資料同步，為下游實時和離線場景提供了必不可少的源資料。隨著任務量的不斷增加，資料通道的整體架構也隨之發生改變。本文介紹了滴滴資料通道的發展歷程，遇到的問題以及今后的規劃。 #1. 背景 資料，對于任何一家互聯網公司來說都是非常重要的資產，公司的大資料 ......
uj5u.com 2020-09-10 06:11:05 more**桔妹導讀：**深耕人工智能領域，致力于探索AI讓出行更美好的滴滴AI Labs再次斬獲國際大獎，這次獲獎的專案是什么呢？一起來看看詳細報道吧！ 近日，由國際計算語言學協會ACL（The Association for Computational Linguistics）舉辦的世界最具影響力的機器 ......
uj5u.com 2020-09-10 06:11:29 more1、什么是mpp？ MPP (Massively Parallel Processing)，即大規模并行處理，在資料庫非共享集群中，每個節點都有獨立的磁盤存盤系統和記憶體系統，業務資料根據資料庫模型和應用特點劃分到各個節點上，每臺資料節點通過專用網路或者商業通用網路互相連接，彼此協同計算，作為整體提供 ......
uj5u.com 2020-09-10 06:11:41 more**桔妹導讀：**指標體系是什么？如何使用OSM模型和AARRR模型搭建指標體系？如何統一流程、規范化、工具化管理指標體系？本文會對建設的方法論結合滴滴資料指標體系建設實踐進行解答分析。 #1. 什么是指標體系 ##1.1 指標體系定義 指標體系是將零散單點的具有相互聯系的指標，系統化的組織起來，通 ......
uj5u.com 2020-09-10 06:12:52 more我們經常在資料庫中使用 LIKE 運算子來完成對資料的模糊搜索，LIKE 運算子用于在 WHERE 子句中搜索列中的指定模式。 如果需要查找客戶表中所有姓氏是“張”的資料，可以使用下面的 SQL 陳述句： SELECT * FROM Customer WHERE Name LIKE '張%' 如果需要 ......
uj5u.com 2020-09-10 06:13:25 more**桔妹導讀：**Ceph是國際知名的開源分布式存盤系統，在工業界和學術界都有著重要的影響。Ceph的架構和演算法設計發表在國際系統領域頂級會議OSDI、SOSP、SC等上。Ceph社區得到Red Hat、SUSE、Intel等大公司的大力支持。Ceph是國際云計算領域應用最廣泛的開源分布式存盤系統， ......
uj5u.com 2020-09-10 06:14:51 more之前寫過《es~通過ElasticsearchTemplate進行聚合操作》的文章，這一次主要寫一個嵌套的聚合，例如先對sex集合，再對desc聚合，最后再對age求和，共三層嵌套。 Aggregations的部分特性類似于SQL語言中的group by，avg，sum等函式,Aggregation ......
uj5u.com 2020-09-10 06:14:59 more傻瓜式部署，只需替換IP與用戶 導讀： 現ELK四大組件分別為：Elasticsearch（核心）、logstash（處理）、filebeat（采集）、kibana（可視化） 下載均在https://www.elastic.co/cn/downloads/下tar包，各組件版本最好一致，配合fdm會 ......
uj5u.com 2020-09-10 06:15:05 moreMysql復習的一個小總結，用xmind寫的。（字數沒有都不給我發博客😹） 下面是一些備注 子查詢 MySQL子查詢稱為內部查詢，而包含子查詢的查詢稱為外部查詢。 子查詢可以在使用運算式的任何地方使用，并且必須在括號中關閉。 視圖 基本語法可以使用 CREATE VIEW 陳述句來創建視圖。 語法格 ......
uj5u.com 2022-05-09 07:13:07 more?大資料概述 在大資料這個概念興起之前，資訊系統存盤資料的方法主要是我們熟知的關系型資料庫，關系型資料庫，關系型模型之父 Edgar F. Codd，在 1970 年 Communications of ACM 上發表了《大型共享資料庫資料的關系模型》的經典論文，從此之后關系模型的語意設計達到了 4 ......
uj5u.com 2022-05-09 07:13:01 more一、下載安裝IDEA IDEA2020.2.3版本：https://www.cnblogs.com/liugp/p/13868346.html 最新版本安裝詳情請參考：https://www.jb51.net/article/196349.htm 二、搭建本地hadoop環境（window10） 可 ......
uj5u.com 2022-05-09 07:12:17 moreMySQL8新增降序索引 桃花塢里桃花庵，桃花庵里桃花仙。桃花仙人種桃樹，又摘桃花賣酒錢。 一、MySQL5.7 降序索引 MySQL在語法上很早就已經支持降序索引，但實際上創建的卻仍然是升序索引，如下MySQL 5.7 所示，row2欄位降序，但是從show create table看 row2 ......
uj5u.com 2022-05-09 07:11:36 moreLinux環境下，MySQL的主要目錄及其作用、資料庫和資料表在檔案系統上的存盤結構。 ......
uj5u.com 2022-05-09 07:11:28 moreMysql復習的一個小總結，用xmind寫的。（字數沒有都不給我發博客😹） 下面是一些備注 子查詢 MySQL子查詢稱為內部查詢，而包含子查詢的查詢稱為外部查詢。 子查詢可以在使用運算式的任何地方使用，并且必須在括號中關閉。 視圖 基本語法可以使用 CREATE VIEW 陳述句來創建視圖。 語法格 ......
uj5u.com 2022-05-09 07:10:34 moreMySQL8新增降序索引 桃花塢里桃花庵，桃花庵里桃花仙。桃花仙人種桃樹，又摘桃花賣酒錢。 一、MySQL5.7 降序索引 MySQL在語法上很早就已經支持降序索引，但實際上創建的卻仍然是升序索引，如下MySQL 5.7 所示，row2欄位降序，但是從show create table看 row2 ......
uj5u.com 2022-05-09 07:10:25 moreLinux環境下，MySQL的主要目錄及其作用、資料庫和資料表在檔案系統上的存盤結構。 ......
uj5u.com 2022-05-09 07:10:19 more?大資料概述 在大資料這個概念興起之前，資訊系統存盤資料的方法主要是我們熟知的關系型資料庫，關系型資料庫，關系型模型之父 Edgar F. Codd，在 1970 年 Communications of ACM 上發表了《大型共享資料庫資料的關系模型》的經典論文，從此之后關系模型的語意設計達到了 4 ......
uj5u.com 2022-05-09 07:10:05 more一、下載安裝IDEA IDEA2020.2.3版本：https://www.cnblogs.com/liugp/p/13868346.html 最新版本安裝詳情請參考：https://www.jb51.net/article/196349.htm 二、搭建本地hadoop環境（window10） 可 ......
uj5u.com 2022-05-09 07:09:25 more