主頁 > 後端開發 > 面試官:你了解大廠的介面設計原則么?就會curd的我當場自閉

面試官:你了解大廠的介面設計原則么?就會curd的我當場自閉

2020-11-11 21:46:13 後端開發

有情懷,有干貨,微信搜索【三太子敖丙】關注這個不一樣的程式員,

本文 GitHub https://github.com/JavaFamily 已收錄,有一線大廠面試完整考點、資料以及我的系列文章,

背景

隨著業務的發展,系統架構從單體架構變為面向服務架構,水平分層架構;再變為微服務架構,

服務網格,服務與服務間的互動越來越復雜,如何優雅的設計一個介面,需要考慮哪些方面?特別是對公服務(比如BFF)需要對外提供公網域名的介面,安全性怎么保證,我整理了我作業以來一些常見的措施以及具體如何去實作:

資料有效性校驗

合法性校驗包括:常規性校驗以及業務校驗;
常規性校驗:包括必填欄位校驗,長度校驗,型別校驗,格式校驗等;
業務校驗:根據實際業務而定,比如訂單金額不能小于0等;

冪等設計

所謂冪等,簡單地說,就是對介面的多次呼叫所產生的結果和呼叫一次是一致的,資料發生改變才需要做冪等,有些介面是天然保證冪等性的,

比如查詢介面,有些對資料的修改是一個常量,并且無其他記錄和操作,那也可以說是具有冪等性的,其他情況下,所有涉及對資料的修改、狀態的變更就都有必要防止重復性操作的發生,通過間接的實作介面的冪等性來防止重復操作所帶來的影響,

又比如我們電商比較常見的加減GMV同一個訊息無論過來多少次結果都應該只加減一次,不然會導致金額錯誤甚至造成資損,

請求層面: 多次執行的結果是一致的
業務層面: 同一個用戶不重復下單,商品不超賣,MQ不重復消費

冪等的本質是分布式鎖的問題,分布式鎖正常可以通過redis或zookeeper實作;

在分布式環境下,鎖定全域唯一資源,使請求串行化,實際表現為互斥鎖,防止重復,解決冪等

安全性

1. 資料加密

我們知道資料在傳輸程序中是很容易被抓包的,如果直接傳輸比如http協議傳輸,那么資料在傳輸的程序中可能被任何人獲取,

所以必須對資料進行加密,常見的做法是對敏感資料比如身份證號進行md5加密,現在主流的做法是使用https協議,在http和tcp之間添加一層數資料安全層(SSL層),這一層負責資料的加密和解密,https如何配置和使用,大家翻閱我歷史文章自行去研究,

對稱加密: 密鑰在加密程序中和解密程序中是不變的,常見的演算法有DES,AES;優點是加解密計算速度快;缺點是資料傳送前,服務雙方必須約定好密鑰,如果一方密鑰泄露,加密資訊也就不安全了,

非對稱加密: 密鑰成對出現,一個密鑰加密之后,由另外一個密鑰來解密;私鑰放在服務端檔案中,公鑰可以發布給任何人使用;優點是比對稱加密更安全,但是加解密的速度比對稱加密慢多了,廣泛使用的是RSA演算法;

https的實作正好是結合了兩種加密方式,整合了雙方的優點,在安全性和性能方面都比較好,對稱加密和非對稱加密的代碼實作,jdk提供了相關的工具類可以直接使用,本文不過多介紹,

2. 資料簽名

介紹3種資料簽名安全策略:摘要[KEY] , 簽名[證書] , 簽名+加密[證書]

安全策略描述安全級別
摘要[Key]將資料和Key(自定義契約密碼)組合后進行摘要安全級別低,契約密鑰安全性非常低,在契約密鑰安全情況下能基本保障資料的不可篡改性,
簽名[證書]使用證書和非對稱簽名演算法對資料進行簽名安全級別中,能夠保障資料的不可篡改性和不可抵賴性,但是不能保障資料的私密性
簽名-加密[證書]使用證書和非對稱演算法對資料簽名,使用一次一密的密鑰和對稱演算法對資料進行加密安全級別高,能夠保障資料的不可篡改性和不可抵賴性,而且能保障資料的私密性,
  • 機密性(Confidentiality): 未經許可不許看
  • 完整性(Integrity) : 不許篡改
  • 可用性(Availability) : 防止不可用
  • 不可抵賴性(Non-Repudiation): 用戶不能否認其行為

摘要[KEY]程序:將需要提交的資料通過某種方式組合成一個字串,然后通過md5生成一段加密字串,這段字串就是資料包的簽名,比如:

str:引數1={引數1}&引數2={引數2}&……&引數n={引數n}$key={用戶密鑰};
MD5.encrypt(str);

摘要[KEY]原理:Hash演算法不可逆,并且計算結果具有唯一性,在key 的隱私得到保證的情況下,可以保證完整性
摘要[KEY]缺陷:key的隱私性很難保證,明文傳輸


簽名[證書]程序:客戶端對明文做一個md5/SHA計算,對計算后的值通過私鑰加密得到密文,客戶端將明文和密文發送給服務端,服務端對密文通過公鑰解密得到值A,同時服務端對明文做一個md5/SHA計算得到值B,比較值A與值B,相同得驗證通過,能夠保障不可篡性和不可抵賴性,但是不能保障資料的私密性(明文傳輸)


簽名+加密[證書]程序:客戶端生成一個隨機字串,作為password,然后把這個password通過B公鑰加密生成密文C,把A明文通過password加密生成密文B,
同時把A明文做MD5/SHA計算后的值通過A私鑰加密得到簽名D, 把密文B和密文C和簽名D發給服務端,服務端通過私鑰解密文C得到password,然后通過password解密文B就可以得到A明文,同時簽名可以用來驗證發送者是不是A,以及A發送的資料有沒有被第三方修改過,

可以假設存在一個惡意的一方X,冒充了A,發送了密文B(password生成),密文C服務端收到資料后,仍然可以正常解密得到明文,但是卻無法證明這個明文資料是A發送的還是惡意用戶B發送的,簽名D的含義就是A自己簽名,服務端可以驗證,X由于沒有A的私鑰,這個簽名它無法冒充,會被服務端識別出來,

加密-簽名

3. 時間戳機制

資料經過了加密處理,酒店抓取到了資料也看不到真實資料;但是有不法者不關心真實資料,拿到資料后直接進行惡意請求,這個時候簡單的做法可以考慮時間戳機制,在每次請求中加入當前時間,服務端會將報文中的時間與系統當前時間做比對,看是否在一個固定的時間范圍內比如5分鐘,惡意偽造的資料是沒法更改報文中時間的,超過5分鐘就可以當作非法請求了,

偽代碼如下:

long interval=5*60*1000;//超時時間
long clientTime=request.getparameter("clientTime");
long serverTime=System.currentTimeMillis();
if(serverTime-clientTime>interval){
    return new Response("超過處理時長")
}

4. AppId機制

大部分網站需要用戶名和密碼才能登陸,這其實是一種安全機制;對應的服務也可以使用這一機制,不是誰都可以呼叫,呼叫服務前必須先申請開通一個唯一的appid,提供相關的密鑰,在呼叫介面時需要提供appid+密鑰資訊,服務端會進行驗證,

appid使用字母,數字,特殊符號等隨機生成,生成的唯一appid看系統實際要求是否需要全域唯一;不管是否全域唯一最好有以下屬性:

趨勢遞增: 這樣在保存資料庫的時候,索引的性能更好

資訊安全: 隨機生成,不要是連續的,容易被發現規律

關于全域唯一Id生成的方式常見的有snowflake方式等

snowflake

Xnip2020-11-04_19-31-00

以上示意圖描述了一個序列號的二進制組成結構,

第一位不用,恒為0,即表示正整數;接下來的41位表示時間戳,精確到毫秒,為了節約空間,可以將此時間戳定義為距離某個時間點所經歷的毫秒數(Java默認是1970-01-01 00:00:00),

再后來的10位用來標識作業機器,如果出現了跨IDC的情況,可以將這10位一分為二,一部分用于標識IDC,一部分用于標識服務器;最后12位是序列號,自增長,

snowflake的核心思想是64bit的合理分配,但不必要嚴格按照上圖所示的分法,如果在機器較少的情況下,可以適當縮短機器id的長度,留出來給序列號,

5. 黑名單機制

如果此appid進行過很多非法操作,或者說專門有一個中黑系統,經過分析之后直接將此appid列入黑名單,所有請求直接回傳錯誤碼;

我們可以給每個appid設定一個狀態比如包括:初始化狀態,正常狀態,中黑狀態,關閉狀態等等;或者我們直接通過分布式配置中心,直接保存黑名單串列,每次檢查是否在串列中即可;

限流機制

常用的限流演算法包括:令牌桶限流漏桶限流計數器限流

  • 令牌桶限流
    令牌桶演算法的原理是系統以一定速率向桶中放入令牌,填滿了就丟棄令牌;請求來時會先從桶中取出令牌,如果能取到令牌,則可以繼續完成請求,否則等待或者拒絕服務;令牌桶允許一定程度突發流量,只要有令牌就可以處理,支持一次拿多個令牌;
  • 漏桶限流
    漏桶演算法的原理是按照固定常量速率流出請求,流入請求速率任意,當請求數超過桶的容量時,新的請求等待或者拒絕服務;可以看出漏桶演算法可以強制限制資料的傳輸速度;
  • 計數器限流
    計數器是一種比較簡單粗暴的演算法,主要用來限制總并發數,比如資料庫連接池、執行緒池、秒殺的并發數;計數器限流只要一定時間內的總請求數超過設定的閥值則進行限流;

具體基于以上演算法如何實作,Guava提供了RateLimiter工具類基于基于令牌桶演算法:

 RateLimiter rateLimiter = RateLimiter.create(5);

以上代碼表示一秒鐘只允許處理五個并發請求,以上方式只能用在單應用的請求限流,不能進行全域限流;這個時候就需要分布式限流,可以基于redis+lua來實作;

總結

其實介面不管是設計還是開發,如果不是特別急的需求大家都可以多一點思考,這樣你的系統才會更穩定,上線和測驗程序中bug更少,而且從個人提升角度來說,多思考總是一件好事,

很多時候大家都在抱怨:哎呀我公司小,我學校差這種環境得不到成長,傻瓜,很多時候高手也是這樣走過來的,不過一樣的事情每個人的態度不一樣,時間久了結果也就不一樣了,

好啦,現在大家應該都上班了,我熬夜值班還在大促現場(文章周末寫的,現在就寫個總結),我是敖丙,你知道的越多,你不知道的越多,我們下期見,

絮叨

敖丙把自己的面試文章整理成了一本電子書,共 1630頁!

干貨滿滿,字字精髓,目錄如下,還有我復習時總結的面試題以及簡歷模板,現在免費送給大家,

鏈接:https://pan.baidu.com/s/1ZQEKJBgtYle3v-1LimcSwg 密碼:wjk6

我是敖丙,你知道的越多,你不知道的越多,感謝各位人才的:點贊收藏評論,我們下期見!


文章持續更新,可以微信搜一搜「 三太子敖丙 」第一時間閱讀,回復【資料】有我準備的一線大廠面試資料和簡歷模板,本文 GitHub https://github.com/JavaFamily 已經收錄,有大廠面試完整考點,歡迎Star,

敖 丙 CSDN認證博客專家 CSDN簽約作者 演算法工程師 B站網紅UP
微信搜一搜【敖丙】關注這個文縐縐的程式員,關注后回復【資料】有我準備的一線大廠面試資料和簡歷模板,

轉載請註明出處,本文鏈接:https://www.uj5u.com/houduan/211107.html

標籤:java

上一篇:【SaaS - Export專案】23 - Shiro加密實作登錄注銷,MD5加密演算法,加鹽加密,shiro憑證匹配器,實作增加用戶密碼密文存盤資料庫,登錄時通過加鹽加密對密文進行比較

下一篇:Java執行緒中的賣火車票問題

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 【C++】Microsoft C++、C 和匯編程式檔案

    ......

    uj5u.com 2020-09-10 00:57:23 more
  • 例外宣告

    相比于斷言適用于排除邏輯上不可能存在的狀態,例外通常是用于邏輯上可能發生的錯誤。 例外宣告 Item 1:當函式不可能拋出例外或不能接受拋出例外時,使用noexcept 理由 如果不打算拋出例外的話,程式就會認為無法處理這種錯誤,并且應當盡早終止,如此可以有效地阻止例外的傳播與擴散。 示例 //不可 ......

    uj5u.com 2020-09-10 00:57:27 more
  • Codeforces 1400E Clear the Multiset(貪心 + 分治)

    鏈接:https://codeforces.com/problemset/problem/1400/E 來源:Codeforces 思路:給你一個陣列,現在你可以進行兩種操作,操作1:將一段沒有 0 的區間進行減一的操作,操作2:將 i 位置上的元素歸零。最終問:將這個陣列的全部元素歸零后操作的最少 ......

    uj5u.com 2020-09-10 00:57:30 more
  • UVA11610 【Reverse Prime】

    本人看到此題沒有翻譯,就附帶了一個自己的翻譯版本 思考 這一題,它的第一個要求是找出所有 $7$ 位反向質數及其質因數的個數。 我們應該需要質數篩篩選1~$10^{7}$的所有數,這里就不慢慢介紹了。但是,重讀題,我們突然發現反向質數都是 $7$ 位,而將它反過來后的數字卻是 $6$ 位數,這就說明 ......

    uj5u.com 2020-09-10 00:57:36 more
  • 統計區間素數數量

    1 #pragma GCC optimize(2) 2 #include <bits/stdc++.h> 3 using namespace std; 4 bool isprime[1000000010]; 5 vector<int> prime; 6 inline int getlist(int ......

    uj5u.com 2020-09-10 00:57:47 more
  • C/C++編程筆記:C++中的 const 變數詳解,教你正確認識const用法

    1、C中的const 1、區域const變數存放在堆疊區中,會分配記憶體(也就是說可以通過地址間接修改變數的值)。測驗代碼如下: 運行結果: 2、全域const變數存放在只讀資料段(不能通過地址修改,會發生寫入錯誤), 默認為外部聯編,可以給其他源檔案使用(需要用extern關鍵字修飾) 運行結果: ......

    uj5u.com 2020-09-10 00:58:04 more
  • 【C++犯錯記錄】VS2019 MFC添加資源不懂如何修改資源宏ID

    1. 首先在資源視圖中,添加資源 2. 點擊新添加的資源,復制自動生成的ID 3. 在解決方案資源管理器中找到Resource.h檔案,編輯,使用整個專案搜索和替換的方式快速替換 宏宣告 4. Ctrl+Shift+F 全域搜索,點擊查找全部,然后逐個替換 5. 為什么使用搜索替換而不使用屬性視窗直 ......

    uj5u.com 2020-09-10 00:59:11 more
  • 【C++犯錯記錄】VS2019 MFC不懂的批量添加資源

    1. 打開資源頭檔案Resource.h,在其中預先定義好宏 ID(不清楚其實ID值應該設定多少,可以先新建一個相同的資源項,再在這個資源的ID值的基礎上遞增即可) 2. 在資源視圖中選中專案資源,按F7編輯資源檔案,按 ID 型別 相對路徑的形式添加 資源。(別忘了先把檔案拷貝到專案中的res檔案 ......

    uj5u.com 2020-09-10 01:00:19 more
  • C/C++編程筆記:關于C++的參考型別,專供新手入門使用

    今天要講的是C++中我最喜歡的一個用法——參考,也叫別名。 參考就是給一個變數名取一個變數名,方便我們間接地使用這個變數。我們可以給一個變數創建N個參考,這N + 1個變數共享了同一塊記憶體區域。(參考型別的變數會占用記憶體空間,占用的記憶體空間的大小和指標型別的大小是相同的。雖然參考是一個物件的別名,但 ......

    uj5u.com 2020-09-10 01:00:22 more
  • 【C/C++編程筆記】從頭開始學習C ++:初學者完整指南

    眾所周知,C ++的學習曲線陡峭,但是花時間學習這種語言將為您的職業帶來奇跡,并使您與其他開發人員區分開。您會更輕松地學習新語言,形成真正的解決問題的技能,并在編程的基礎上打下堅實的基礎。 C ++將幫助您養成良好的編程習慣(即清晰一致的編碼風格,在撰寫代碼時注釋代碼,并限制類內部的可見性),并且由 ......

    uj5u.com 2020-09-10 01:00:41 more
最新发布
  • Rust中的智能指標:Box<T> Rc<T> Arc<T> Cell<T> RefCell<T> Weak

    Rust中的智能指標是什么 智能指標(smart pointers)是一類資料結構,是擁有資料所有權和額外功能的指標。是指標的進一步發展 指標(pointer)是一個包含記憶體地址的變數的通用概念。這個地址參考,或 ” 指向”(points at)一些其 他資料 。參考以 & 符號為標志并借用了他們所 ......

    uj5u.com 2023-04-20 07:24:10 more
  • Java的值傳遞和參考傳遞

    值傳遞不會改變本身,參考傳遞(如果傳遞的值需要實體化到堆里)如果發生修改了會改變本身。 1.基本資料型別都是值傳遞 package com.example.basic; public class Test { public static void main(String[] args) { int ......

    uj5u.com 2023-04-20 07:24:04 more
  • [2]SpinalHDL教程——Scala簡單入門

    第一個 Scala 程式 shell里面輸入 $ scala scala> 1 + 1 res0: Int = 2 scala> println("Hello World!") Hello World! 檔案形式 object HelloWorld { /* 這是我的第一個 Scala 程式 * 以 ......

    uj5u.com 2023-04-20 07:23:58 more
  • 理解函式指標和回呼函式

    理解 函式指標 指向函式的指標。比如: 理解函式指標的偽代碼 void (*p)(int type, char *data); // 定義一個函式指標p void func(int type, char *data); // 宣告一個函式func p = func; // 將指標p指向函式func ......

    uj5u.com 2023-04-20 07:23:52 more
  • Django筆記二十五之資料庫函式之日期函式

    本文首發于公眾號:Hunter后端 原文鏈接:Django筆記二十五之資料庫函式之日期函式 日期函式主要介紹兩個大類,Extract() 和 Trunc() Extract() 函式作用是提取日期,比如我們可以提取一個日期欄位的年份,月份,日等資料 Trunc() 的作用則是截取,比如 2022-0 ......

    uj5u.com 2023-04-20 07:23:45 more
  • 一天吃透JVM面試八股文

    什么是JVM? JVM,全稱Java Virtual Machine(Java虛擬機),是通過在實際的計算機上仿真模擬各種計算機功能來實作的。由一套位元組碼指令集、一組暫存器、一個堆疊、一個垃圾回收堆和一個存盤方法域等組成。JVM屏蔽了與作業系統平臺相關的資訊,使得Java程式只需要生成在Java虛擬機 ......

    uj5u.com 2023-04-20 07:23:31 more
  • 使用Java接入小程式訂閱訊息!

    更新完微信服務號的模板訊息之后,我又趕緊把微信小程式的訂閱訊息給實作了!之前我一直以為微信小程式也是要企業才能申請,沒想到小程式個人就能申請。 訊息推送平臺🔥推送下發【郵件】【短信】【微信服務號】【微信小程式】【企業微信】【釘釘】等訊息型別。 https://gitee.com/zhongfuch ......

    uj5u.com 2023-04-20 07:22:59 more
  • java -- 緩沖流、轉換流、序列化流

    緩沖流 緩沖流, 也叫高效流, 按照資料型別分類: 位元組緩沖流:BufferedInputStream,BufferedOutputStream 字符緩沖流:BufferedReader,BufferedWriter 緩沖流的基本原理,是在創建流物件時,會創建一個內置的默認大小的緩沖區陣列,通過緩沖 ......

    uj5u.com 2023-04-20 07:22:49 more
  • Java-SpringBoot-Range請求頭設定實作視頻分段傳輸

    老實說,人太懶了,現在基本都不喜歡寫筆記了,但是網上有關Range請求頭的文章都太水了 下面是抄的一段StackOverflow的代碼...自己大修改過的,寫的注釋挺全的,應該直接看得懂,就不解釋了 寫的不好...只是希望能給視頻網站開發的新手一點點幫助吧. 業務場景:視頻分段傳輸、視頻多段傳輸(理 ......

    uj5u.com 2023-04-20 07:22:42 more
  • Windows 10開發教程_編程入門自學教程_菜鳥教程-免費教程分享

    教程簡介 Windows 10開發入門教程 - 從簡單的步驟了解Windows 10開發,從基本到高級概念,包括簡介,UWP,第一個應用程式,商店,XAML控制元件,資料系結,XAML性能,自適應設計,自適應UI,自適應代碼,檔案管理,SQLite資料庫,應用程式到應用程式通信,應用程式本地化,應用程式 ......

    uj5u.com 2023-04-20 07:22:35 more