---【前言】---
我問:“程式有『亞健康狀態』嗎?”
一個正常的人,應該這樣回答:“什么?程式,亞健康,,,?你神經病吧?我只聽說過人,有亞健康狀態,”
實際上,‘程式’是有『亞健康狀態』的,這和人有『濕氣』道理一樣,
『亞健康狀態』是指,程式處于【正常】和【非正常】之間,老司機都知道,
最明顯的表現就是:程式表面輸入/輸出正常,但卡頓,或后臺在瘋狂報錯,
細探原因,實際上是千奇百怪的,這里不做展開,
既然程式有亞健康狀態,那么容器內運行的程式,也應該有亞健康狀態,也很合理,這就是標題說的『容器亞健康狀態』問題,
https://www.cnblogs.com/cmt/p/14083631.html
上述『容器亞健康狀態』問題,在博客園特例中,我總結如下:
最開始,后端資料庫有問題了,導致頁面pod報錯,后端資料庫修復后,頁面表現有時很快,有時卡頓,估計某個pod有問題,沒恢復過來,但由于pod很多,無法立馬找出問題pod,猜測cpu100%,但是容器探活正常,或探活有些慢但能通過,
---【『容器亞健康狀態』問題分析】---
老司機都知道,細探原因,實際上是千奇百怪的,
又因為部分容器正常,所以你必須收集所有容器的log,這些『亞健康狀態容器』,也是能通過容器探活的,有時候我們并不具備詳細探究的條件,這就好像醫生知道從海鮮市場里出來的很多病人肺有問題了,用常規的藥后也治不好,而你急著解決,手頭上還沒有【基因測序】這些個超級手段,
---【k8s的解法】---
假設100個容器里頭,有1個『亞健康狀態容器』,這個容器還是『無癥狀』或『癥狀不明顯,能過探活』這種,這個問題是不容易解決的,
K8s 1.15版本,提供了滾動重啟的命令,但我趕腳相對而言不輕量,
需要說明的是:
定時重啟能緩解和部分解決這種問題,不能解決所有問題,要想解決所有問題,還得靠壓測,和看日志,還有除錯,
---【k4t的解法】---
K4t是我業余時間開發的,容器編排系統,
博客園的問題,提醒了我,我看了k8s的解決方案后,琢磨出了這個問題更好的方案:
即『殺死容器老奶奶』功能,或者叫『最老容器_定時重啟間隔』引數,
這個值默認是7天,最小是1分鐘,值系結在應用上,
這個引數假設生存時間越長的容器副本,越會出問題,而新run的容器副本,假設沒問題,
也就是說超過這個閾值(1分鐘---7天),就會優雅的重啟1個容器副本,即先不給容器喂流量,超過n分鐘后,再讓容器下崗,繼而重啟容器副本,
若遇到上述『容器亞健康』問題,則調小這個值即可,等過一段時間,容器都優雅重啟了后,再調整回來即可,當然了,我的k4t是有辦法查看,每個容器的啟動時間的,
注意:
l 定時重啟并不能解決所有問題,要想解決所有問題,還得靠壓測,和看日志,還有除錯,
l 此引數不能理解成『單個容器最大生存時間』,設你的應用有10個容器副本,第一個容器會在7天后重啟,第10個容器在70天才會重啟,
這個引數,看起來跟滾動重啟類似嗎?
K8s有這功能嗎???
---【附錄a:k4t簡介】---
k4t即:《kaiiit生產級別的容器編排系統》
https://gitee.com/chuanjiao10/k4t
預計2021年6月發布alphi1版
中文名:《海賊帝·優秀的怕被沽溝暗殺·黑毛腿》
中文別名:《ps1倚天劍》

這是一套基于《卡死你3000》打造的,全功能,容器集群的自動化部署、擴容以及運維的平臺,(國產k8s),它采用開放式架構,具有網路簡單穩定,使用簡單,腳本操控靈活的特點,
powershell傳教士 業余時間 作品
群名稱:k4t官方1群 群 號:722528388
---【附錄b:k4t 組件介紹】---
問:完美版的k4t專案,由哪幾部分組件構成?
答:
1 master端, 正在開發中,預計2021年6月前發布alphi1版,
2 node端,已經開發完成,并部分開源免費成為雛形版,
3 動態負載均衡api網關,(外部)
提供反向代理,和負載均衡功能,用于給一組容器應用,形成統一的ip,
目前基于我撰寫的envoy后端增刪腳本,
https://gitee.com/chuanjiao10/envoy_powershell
你也可diy,改成自己喜歡的,
4 動態dns,(外部)
是非必要組件,K4t集群,可以只用負載均衡器api-getway,
用于給一組容器應用,形成統一的服務名字,
目前基于未激活的無圖win2019,當然有圖版win2019也行,你也可diy,改成自己喜歡的,例如:dnsmasq
---【后記】---
“容器當然有亞健康狀態了,容器996也有可能會疲勞呀!這和人有‘濕氣’道理是一樣的”我喃喃道,
K4t的這個引數,讓容器告別996,也有輪流上下班時間了,哈哈,這引數堪稱『大力丸』,有病能治病(比如記憶體泄漏),無病能防病(比如記憶體泄漏),實乃居家旅行、以及運維編排、必備之好手段也!
謝謝觀看,
轉載請註明出處,本文鏈接:https://www.uj5u.com/gongcheng/260177.html
標籤:其他
