主頁 > 軟體設計 > 精益求精!華為工程師凝聚超凡的智慧結晶:網路編程,已獻上膝蓋

精益求精!華為工程師凝聚超凡的智慧結晶:網路編程,已獻上膝蓋

2020-10-18 16:01:28 軟體設計

為什么要學習底層知識?

不學習底層知識可能不會阻礙你成為一個稱職的程式員,但也許會阻礙你成為一個優秀的程式員,

了解底層的知識有助于解決問題,并且做出更好的設計,打個比方,就像庖丁解牛,他看到一個牛后,不止看到的是牛,而是由各個骨骼,經絡,肌肉等模塊組成的有機體——整個系統對你來說就是赤裸裸的,沒有任何神秘的面紗,這樣也許能夠給程式員提供更多的安全感,

但是如果你編程所依賴的平臺需要你去了解更底層的知識才能夠解決問題,那么,他可能沒有做好他應盡的職責,

我們每個程式員或許都有一個夢,那就是成為大牛,我們或許都沉浸在各種框架中,以為框架就是一切,以為應用層才是最重要的,你錯了,在當今計算機行業中,會應用是基本素質,如果你懂其原理才能讓你在行業中走的更遠,而計算機基礎知識又是重中之重,下面,跟隨我的腳步,為你介紹一下計算機底層知識,

第一份筆記、底層知識筆記

大綱

目錄

CPU

大家都是程式員,大家都是和計算機打交道的程式員,大家都是和計算機中軟體硬體打交道的程式員,大家都是和CPU打交道的程式員,所以,不管你是玩兒硬體的還是做軟體的,你的世界都少不了計算機最核心的- CPU

CPU是什么

CPU的全稱是Central Processing Unit ,它是你的電腦中最硬核的組件,這種說法一點不為過,CPU是能夠讓你的計算機叫計算機的核心組件,但是它卻不能代表你的電腦,CPU與計算機的關系就相當于大腦和人的關系,它是一種小型的計算機芯片,它嵌入在臺式機、筆記本電腦或者平板電腦的主板,上,通過在單個計算機芯片上放置數十億個微型晶體管來構建CPU,這些晶體管使它能夠執行運行存盤在系統記憶體中的程式所需的計算,也就是說CPU決定了你電腦的計算能力,

CPU的內部結構

標志暫存器

記憶體的物理結構

在了解一個事物之前,你首先得先需要見過它,你才會有印象,才會有想要了解的興趣,所以我們首先需要先看一下什么是記憶體以及它的物理結構是怎樣的,

記憶體的現實模型

為了便于記憶,我們把記憶體模型映射成為我們現實世界的模型,在現實世界中,記憶體的模型很想我們生活的樓房,在這個樓房中,1層可以存盤一個位元組的資料,樓層號就是地址,下面是記憶體和樓層整合的模型圖

記憶體的使用

鏈表

下面我們來介紹一下鏈表和二叉樹它們都是可以不用考慮索引的順序就可以對元素進行讀寫的方式,通過使用鏈表,可以高效的對資料元素進行添加和洗掉操作,而通過使用二叉樹,則可以更高效的對資料進行檢索

二叉樹

二叉樹也是一種檢索效率非常高的資料結構,二叉樹是指在鏈表的基礎上往陣列追加元素時,考慮到陣列的大小關系,將其分成左右兩個方向的表現形式,假如我們把50這個值保存到了陣列中,那么,如果接下來要進行值寫入的話,就需要和50比較,確定誰大誰小,比50數值大的放右邊,小的放左邊,下圖是二叉樹的比較示例

為什么用二進制表示

便于計算機處理的補數

算數右移和邏輯右移的區別

邏輯運算的竅門

哈夫曼演算法和莫爾斯編碼

下面我們來介紹另外一種壓縮演算法,即哈夫曼演算法,在了解哈夫曼演算法之前,你必須舍棄半角英文數字的1個字符是1個位元組(8位)的資料下面我們就來認識一下哈夫曼演算法的基本思想,

用二叉樹實作哈夫曼演算法

剛才已經提到,莫爾斯編碼是根據日常文本中各字符的出現頻率來決定表示各字符的編碼資料長度的,不過,在該編碼體系中,對AAAAAABBCDDEEEEEF這種文本來說并不是效率最高的,

下面我們來看一下哈夫曼演算法,哈夫曼演算法是指,為各壓縮物件檔案分別構造最佳的編碼體系,并以該編碼體系為基礎來進行壓縮,因此,用什么樣的編碼(哈夫曼編碼)對資料進行分割,就要由各個檔案而定,用哈夫曼演算法壓縮過的檔案中,存盤著哈夫曼編碼資訊和壓縮過的資料,

認識磁盤

首先,磁盤和記憶體都具有存盤功能,它們都是存盤設備,區別在于,記憶體是通過電流來實作存盤; 磁盤則是通過磁記錄技術來實作存盤,記憶體是一種高速,造假昂貴的存盤設備;而磁盤則是速度較慢、造假低廉的存盤設備;電腦斷電后,記憶體中的資料會丟失,而磁盤中的資料可以長久保留,記憶體是屬于內部存盤設備,硬碟是屬于外部存盤設備,一般在我們的計算機中,磁盤和記憶體是相互配合共同作業的,

程式不讀入記憶體就無法運行

在了解磁盤前,還需要了解一下記憶體的運行機制是怎樣的, 我們的程式被保存在存盤設備中,通過使用CPU讀入來實作程式指令的執行,這種機制稱為存盤程式方式,現在看來這種方 式是理所當然的,但在以前程式的運行都是通過改變計算機的布線來讀寫指令的,

計算機最主要的存盤部件是記憶體和磁盤,磁盤中存盤的程式必須加載到記憶體中才能運行,在磁盤中保存的程式是無法直接運行的,這是因為負責決議和運行程式內容的CPU是需要通程序式計數器來指定記憶體地址從而讀出程式指令的,

Windows作業系統克服了CPU以外的硬體差異

可以使用虛擬機獲取其他環境

作業系統功能的歷史

作業系統其實也是一種軟體,任何新事物的出現肯定都有它的歷史背景,那么作業系統也不是憑空出現的,肯定有它的歷史背景,

作業系統和高級編程語言使硬體抽象化

通過使用作業系統提供的系統呼叫,程式員不必直接撰寫控制硬體的程式,而且,通過使用高級編程語言,有時也無需考慮系統呼叫的存在,系統呼叫往往是自動觸發的,作業系統和高級編程語言能夠使硬體抽象化,這很了不起,

匯編語言的語法是操作碼+運算元

在匯編語言中,一行表示一對CPU的一個指令,匯編語言指令的語法結構是操作碼+運算元,也存在只有操作碼沒有運算元的指令

臨時確保區域變數使用的記憶體空間

外圍設備的中斷請求

IRQCInterrupt Request) 代表的就是中斷請求,IRQ用來暫停當前正在運行的程式,并跳轉到其他程式運行的必要機制,該機制被稱為處理中斷,中斷處理在硬體控制中擔當著重要的角色,因為如果沒有中斷處理,就有可能無法順暢進行處理的情況,

利用DMA實作短時間內大量資料傳輸

由于內容涉及較為全面,所以就不一一介紹了..............Σ( ° △ °|||)︴.....完整筆記請看文末

第二份筆記、網路是怎樣連接的

探索之旅路線圖

目錄大綱

由于筆記章節實在過多過長,內容涉及太全就不一一展現出來了Σ( ° △ °|||)︴

第一章、瀏覽器生成訊息

  • 生成HTTP請求訊息
  • 向DNS服務器查詢Web服務器的IP地址
  • 全世界DNS服務器的大接力
  • 委托協議堆疊發送訊息

瀏覽器并不會親自負責資料的傳送,傳送訊息是搬運數字資訊的機制負責的作業,因此瀏覽器會委托它將資料發送出去,具體來說,就是委托作業系統中的網路控制軟體將訊息發送給服務器,第1章中,我們會探索到瀏覽器將資料委托出去為止,

HTTP的基本思路

IP地址的基本知識

決議器的內部原理

尋找相應的DNS服務器并獲取IP地址

第二章、用電信號傳輸 TCP/IP資料

  • 創建套接字
  • 連接服務器
  • 收發資料
  • 從服務器斷開并洗掉套接字
  • IP與以太網的包收發操作
  • UDP協議的收發操作

第1章,我們從決議瀏覽器中輸入的網址開始,探索了生成HTTP請求訊息、委托作業系統發送訊息等步驟,本章,我們將講解作業系統中的協議堆疊是如何處理資料發送請求的,第1章介紹了發送訊息的場景,接下來我們將視角切換到協議堆疊的內部來繼續探索吧,

協議堆疊的內部結構

根據網路包平均往返時間調整ACK號等待時間

使用視窗有效管理ACK號

通過ARP查詢目標路由器的MAC地址

給網路包再加3個控制資料

第三章、從網線到網路設備

  • 信號在網線和集線器中傳輸
  • 交換機的包轉發操作
  • 路由器的包轉發操作
  • 路由器的附加功能

上一章,我們探索了客戶端中的協議堆疊和網卡,介紹了發送網路包,也就是將網路包轉換成電信號通過網線傳輸出去的程序,本章我們將繼續跟著上一章的腳步,看一看通過網線傳輸出去的包是如何經過集線器、交換機和路由器等網路設備,最終進入互聯網的,

"雙絞”是為了抑制噪聲

自動協商:確定最優的傳輸速率

地址轉換的基本原理

第四章、通過接入網進入互聯網內部

  • ADSL接入網的結構和作業方式
  • 光纖接入網(FTTH)
  • 接入網中使用的PPP和隧道
  • 網路運營商的內部
  • 跨越運營商的網路包

上一章,我們探索了從客戶端計算機發送的網路包通過家庭和公司局域網中的集線器和路由器前往目的地的程序,本章,我們來看一看同絡包是如何通過互聯網接入路由器,最終進入互聯網內部的,

連接用戶與互聯網的接入網

分離器的作用

單模與多模

通過光纖分路來降低成本

在以太網上傳輸PPP訊息

POP和NOC

第五章、服務器端的局域網中有什么玄機

  • Web服務器的部署地點
  • 防火墻的結構和原理
  • 通過將請求平均分配給多臺服務器來平衡負載
  • 使用快取服務器分擔負載
  • 內容分發服務

上一章,我們探索了網路包在進入互聯網之后,通過通信線路和運營商網路到達服務器POP端的程序,接下來,網路包將繼續朝服務器前進,并通過服務器前面的防火墻、快取服務器、負載均衡器等,本章我們將對這部分進行探索,

將Web服務器部署在資料中心

使用負載均衡器分配訪問

快取服務器通過更新時間管理內容

利用內容分發服務分擔負載

第六章、請求到達Web服務器回應回傳瀏覽器

上一章,我們探索了Web服務器前面的防火墻、快取服務器、負載均衡器等設備,現在網路包已經通過這些設備,到達了Web服務器中,本章的探索之旅就從這里開始,

服務器端的套接字和埠號

將請求的URI轉換為實際的檔案名

網路包的旅程

網路包的旅程( 續)

從輸入網址到顯示出網頁內容,這個程序只有短短幾秒的時間,然而,正如本書所講,在這短短幾秒的背后,離不開各種設備和軟體的相互配合,我們在探險之旅中所涉獵的這些內容已經十分復雜了,但這還僅僅是網路世界的一小部分而已,還有很多內容我們無法講解,如果深人挖掘其中一些細節也是難以窮盡的,網路的復雜度由此可見一斑,

這份【底層知識寶典】【網路是怎樣連接的】筆記檔案分別為100+、366頁,需要完整版的朋友,可以轉發此文關注小編,私信小編【見下圖】來獲取!!

當然,單單有檔案看是遠遠不夠的,還有視頻和相匹配的課件進行學習提升,努力把計算機網路這一塊兒給搞明白,相信一定會有不凡的人生!!

HTTP/TCP/IP/網路IO學習視頻

還有課件分享

TCP

IO課件

TCP/IP

TCP/IP/IO網路通信視頻和課件獲取,點贊關注小編,【見下圖】獲取!

好了,今天就分享到這里了,希望大家能夠好好學習,把計算機網路這一塊兒給提升上來,也希望本文能夠得到大家的喜歡!!

轉載請註明出處,本文鏈接:https://www.uj5u.com/ruanti/178244.html

標籤:其他

上一篇:LJS的GCD

下一篇:EDA設計(verilog)——七裁判邏輯電路

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 面試突擊第一季,第二季,第三季

    第一季必考 https://www.bilibili.com/video/BV1FE411y79Y?from=search&seid=15921726601957489746 第二季分布式 https://www.bilibili.com/video/BV13f4y127ee/?spm_id_fro ......

    uj5u.com 2020-09-10 05:35:24 more
  • 第三單元作業總結

    1.前言 這應該是本學期最后一次寫作業總結了吧。總體來說,對作業的節奏也差不多掌握了,作業做起來的效率也更高了。雖然和之前的作業一樣,作業中都要用到新的知識,但是相比之前,更加懂得了如何利用工具以及資料。雖然之間卡過殼,但總體而言,這幾次作業還算完成的比較好。 2.作業程序總結 相比前兩個單元,此單 ......

    uj5u.com 2020-09-10 05:35:41 more
  • 北航OO(2020)第四單元博客作業暨課程總結博客

    北航OO(2020)第四單元博客作業暨課程總結博客 本單元作業的架構設計 在本單元中,由于UML圖具有比較清晰的樹形結構,因此我對其中需要進行查詢操作的元素進行了包裝,在樹的父節點中存盤所有孩子的參考。考慮到性能問題,我采用了快取機制,一次查詢后盡可能快取已經遍歷過的資訊,以減少遍歷次數。 本單元我 ......

    uj5u.com 2020-09-10 05:35:48 more
  • BUAA_OO_第四單元

    一、UML決議器設計 ? 先看下題目:第四單元實作一個基于JDK 8帶有效性檢查的UML(Unified Modeling Language)類圖,順序圖,狀態圖分析器 MyUmlInteraction,實際上我們要建立一個有向圖模型,UML中的物件(元素)可能與同級元素連接,也可與低級元素相連形成 ......

    uj5u.com 2020-09-10 05:35:54 more
  • 6.1邏輯運算子

    邏輯運算子 1. && 短路與 運算式1 && 運算式2 01.運算式1為true并且運算式2也為true 整體回傳為true 02.運算式1為false,將不會執行運算式2 整體回傳為false 03.只要有一個運算式為false 整體回傳為false 2. || 短路或 運算式1 || 運算式2 ......

    uj5u.com 2020-09-10 05:35:56 more
  • BUAAOO 第四單元 & 課程總結

    1. 第四單元:StarUml檔案決議 本單元采用了圖模型決議UML。 UML檔案可以抽象為圖、子圖、邊的邏輯結構。 在實作中,圖的節點包括類、介面、屬性,子圖包括狀態圖、順序圖等。 采用了三次遍歷UML元素的方法建圖,第一遍遍歷建點,第二、三次遍歷設定屬性、連邊,實作圖物件的初始化。這里借鑒了一些 ......

    uj5u.com 2020-09-10 05:36:06 more
  • 談談我對C# 多型的理解

    面向物件三要素:封裝、繼承、多型。 封裝和繼承,這兩個比較好理解,但要理解多型的話,可就稍微有點難度了。今天,我們就來講講多型的理解。 我們應該經常會看到面試題目:請談談對多型的理解。 其實呢,多型非常簡單,就一句話:呼叫同一種方法產生了不同的結果。 具體實作方式有三種。 一、多載 多載很簡單。 p ......

    uj5u.com 2020-09-10 05:36:09 more
  • Python 資料驅動工具:DDT

    背景 python 的unittest 沒有自帶資料驅動功能。 所以如果使用unittest,同時又想使用資料驅動,那么就可以使用DDT來完成。 DDT是 “Data-Driven Tests”的縮寫。 資料:http://ddt.readthedocs.io/en/latest/ 使用方法 dd. ......

    uj5u.com 2020-09-10 05:36:13 more
  • Python里面的xlrd模塊詳解

    那我就一下面積個問題對xlrd模塊進行學習一下: 1.什么是xlrd模塊? 2.為什么使用xlrd模塊? 3.怎樣使用xlrd模塊? 1.什么是xlrd模塊? ?python操作excel主要用到xlrd和xlwt這兩個庫,即xlrd是讀excel,xlwt是寫excel的庫。 今天就先來說一下xl ......

    uj5u.com 2020-09-10 05:36:28 more
  • 當我們創建HashMap時,底層到底做了什么?

    jdk1.7中的底層實作程序(底層基于陣列+鏈表) 在我們new HashMap()時,底層創建了默認長度為16的一維陣列Entry[ ] table。當我們呼叫map.put(key1,value1)方法向HashMap里添加資料的時候: 首先,呼叫key1所在類的hashCode()計算key1 ......

    uj5u.com 2020-09-10 05:36:38 more
最新发布
  • 【中介者設計模式詳解】C/Java/JS/Go/Python/TS不同語言實作

    * 中介者模式是一種行為型設計模式,它可以用來減少類之間的直接依賴關系,
    * 將物件之間的通信封裝到一個中介者物件中,從而使得各個物件之間的關系更加松散。
    * 在中介者模式中,物件之間不再直接相互互動,而是通過中介者來中轉訊息。 ......

    uj5u.com 2023-04-20 08:20:47 more
  • 露天煤礦現場調研和交流案例分享

    他們集團的資訊化公司及研究院在一個礦區正在做智能礦山的統一平臺的 試點,專案投資大概1億,包括了礦山的各方面的內容,顯示得我們這次交流有點多余。他們2年前開始做智能礦山的規劃,有很多煤礦行業專家的加持,他們的描述是非常完美,但是去年底應該上線的平臺,現在還沒有看到影子。他們確實有很多場景需求,但是被... ......

    uj5u.com 2023-04-20 08:20:25 more
  • 《社區人員管理》實戰案例設計&個人案例分享

    設計是一個讓人夢想成真程序,開始編碼、測驗、除錯之前進行需求分析和架構設計,才能保證關鍵方面都做正確 ......

    uj5u.com 2023-04-20 08:20:17 more
  • 軟體架構生態化-多角色交付的探索實踐

    作為一個技術架構師,不僅僅要緊跟行業技術趨勢,還要結合研發團隊現狀及痛點,探索新的交付方案。在日常中,你是否遇到如下問題 “ 業務需求排期長研發是瓶頸;非研發角色感受不到研發技改提效的變化;引入ISV 團隊又擔心質量和安全,培訓周期長“等等,基于此我們探索了一種新的技術體系及交付方案來解決如上問題。 ......

    uj5u.com 2023-04-20 08:20:10 more
  • 【中介者設計模式詳解】C/Java/JS/Go/Python/TS不同語言實作

    * 中介者模式是一種行為型設計模式,它可以用來減少類之間的直接依賴關系,
    * 將物件之間的通信封裝到一個中介者物件中,從而使得各個物件之間的關系更加松散。
    * 在中介者模式中,物件之間不再直接相互互動,而是通過中介者來中轉訊息。 ......

    uj5u.com 2023-04-20 08:19:44 more
  • 露天煤礦現場調研和交流案例分享

    他們集團的資訊化公司及研究院在一個礦區正在做智能礦山的統一平臺的 試點,專案投資大概1億,包括了礦山的各方面的內容,顯示得我們這次交流有點多余。他們2年前開始做智能礦山的規劃,有很多煤礦行業專家的加持,他們的描述是非常完美,但是去年底應該上線的平臺,現在還沒有看到影子。他們確實有很多場景需求,但是被... ......

    uj5u.com 2023-04-20 08:19:07 more
  • 《社區人員管理》實戰案例設計&個人案例分享

    設計是一個讓人夢想成真程序,開始編碼、測驗、除錯之前進行需求分析和架構設計,才能保證關鍵方面都做正確 ......

    uj5u.com 2023-04-20 08:18:57 more
  • 軟體架構生態化-多角色交付的探索實踐

    作為一個技術架構師,不僅僅要緊跟行業技術趨勢,還要結合研發團隊現狀及痛點,探索新的交付方案。在日常中,你是否遇到如下問題 “ 業務需求排期長研發是瓶頸;非研發角色感受不到研發技改提效的變化;引入ISV 團隊又擔心質量和安全,培訓周期長“等等,基于此我們探索了一種新的技術體系及交付方案來解決如上問題。 ......

    uj5u.com 2023-04-20 08:18:49 more
  • 05單件模式

    #經典的單件模式 public class Singleton { private static Singleton uniqueInstance; //一個靜態變數持有Singleton類的唯一實體。 // 其他有用的實體變數寫在這里 //構造器宣告為私有,只有Singleton可以實體化這個類! ......

    uj5u.com 2023-04-19 08:42:51 more
  • 【架構與設計】常見微服務分層架構的區別和落地實踐

    軟體工程的方方面面都遵循一個最基本的道理:沒有銀彈,架構分層模型更是如此,每一種都有各自優缺點,所以請根據不同的業務場景,并遵循簡單、可演進這兩個重要的架構原則選擇合適的架構分層模型即可。 ......

    uj5u.com 2023-04-19 08:42:41 more