主頁 > 軟體設計 > 快取加速--Squid代理服務器應用(ACL 訪問控制、 Squid 日志分析、反向代理)

快取加速--Squid代理服務器應用(ACL 訪問控制、 Squid 日志分析、反向代理)

2020-09-10 07:45:38 軟體設計

文章目錄

  • 一、 ACL 訪問控制
    • 1.1 定義訪問控制串列
    • 1.2 設定訪問權限
    • 1.3 ACL 訪問控制實驗(基于傳統模式)
      • 1. 手工編譯安裝squid
      • 2. 修改組態檔
      • 3. 傳統代理配置
      • 4. 在web服務器上安裝httpd,并啟動服務
      • 5. 在win10虛擬機上測驗,傳統代理是否配置成功
      • 6. 進行ACL串列訪問控制
  • 二、Squid 日志分析
    • 2.1 安裝部署SARG
  • 三、 squid反向代理
    • 3.1 作業機制
    • 3.2 搭建squid反向代理

一、 ACL 訪問控制

Squid 提供了強大的代理控制機制,通過合理設定 ACL(Access Control List,訪問控制串列)并進行限制,可以針對源地址、目標地址、訪問的 URL 路徑、訪問的時間等各種條件進行過濾,

在組態檔 squid.conf 中,ACL 訪問控制通過以下兩個步驟來實作:

  1. 使用 acl 配置項定義需要控制的條件;
  2. 通過 http_access 配置項對已定義的串列做“允許”或“拒絕”訪問的控制,

1.1 定義訪問控制串列

每行 acl 配置可以定義一條訪問控制串列

acl格式
acl 串列名稱 串列型別 串列內容 
  • 串列名稱可以自行指定,用來識別控制條件,
  • 串列型別必須使用 Squid 預定義的值,對應不同類別的控制條件;常用的包括源地址、目標地址、訪問時間、 訪問埠等,
  • 串列內容是要控制的具體物件,不同型別的串列所對應 的內容也不一樣,可以有多個值(以空格分隔,為“或”的關系),
串列型別 含義
src 源 IP 地址、網段、IP 地址范圍,多個地址之間以空格分隔
dst 目標 IP 地址、網段、主機名 ,多個地址之間以空格分隔
port 目標埠
dstdomain 目標域,匹配域內所有站點
time 使用代理服務的時間段,例如MTWHF 、8:30-17:30 12:00-13:00、 AS;字母表示一星期中各天的英文縮寫M—Monday 、 T—Tuesday 、 W—Wednesday 、 H—Thursday、F—Friday、A—Saturday、S—Sunday
maxconn 每個客戶機的并發連接數
url_regex 目標資源的 URL 地址,-i 表示忽略大小寫
urlpath_regex 網址中主機名后面的部分,-i 表示忽略大小寫

在定義訪問控制串列時,應該根據需求來,精確控制,當需要限制的同一類物件較多時,可以使用獨立的檔案來存放,在 acl 配置行的串列內容處指定對應的檔案位置即可,這里指的是檔案的絕對路徑,

1.2 設定訪問權限

定義好各種訪問控制串列以后,需要使用 httpd_access 配置項來進行控制,必須注意的是,http_access 配置行必須放在對應的 acl 配置行之后,每行 http_access 配置確定一條訪問控制規則,

格式
http_access allow  deny 串列名……

在每條 http_access 規則中,可以同時包含多個訪問控制串列名,各個串列之間以空格 分隔,為“與”的關系,表示必須滿足所有訪問控制串列對應的條件才會進行限制,需要使用 取反條件時,可以在訪問控制串列前添加“!”符號,

  • http_access deny MEDIAFILE —> 禁止客戶機下載 MP3、MP4 等檔案
  • http_access deny IPBLOCK —> 禁止客戶機訪問黑名單中的 IP 地址
  • http_access deny DMBLOCK —> 禁止客戶機訪問黑名單中的網站域
  • http_access deny MC20 —> 客戶機的并發連接超過 20 時將被阻止
  • http_access allow WORKTIME —> 允許客戶機在作業時間上網
  • http_access deny all —> 默認禁止所有客戶機使用代理

執行訪問控制時,Squid 將按照各條規則的順序依次進行檢查,如果找到一條相匹配的規則就不再向后搜索,

  • 沒有設定任何規則時:Squid 服務將拒絕客戶端的請求,
  • 有規則但找不到相匹配的項:Squid 將采用與最后一條規則相反的動作,即如果最后一條規則是 allow,就拒絕客戶端的請求,否則允許該請求,

通常情況下,把最常用到的控制規則放在最前面,以減少 Squid 的負載,在訪問控制的總體策略上,建議采用“先拒絕后允許”或“先允許后拒絕”的方式,最后一條規則設為默認策略,設為“http_access allow all”或者“http_access deny all”,

1.3 ACL 訪問控制實驗(基于傳統模式)

1. 手工編譯安裝squid

手工編譯程序在做傳統代理的時候就安裝過了,可以參考https://blog.csdn.net/kimowinter/article/details/108430935這篇博客,

2. 修改組態檔

[root@localhost init.d]# vim /etc/squid.conf
http_access allow all
cache_effective_user squid
cache_effective_group squid

在這里插入圖片描述

[root@localhost init.d]# squid -k parse    ##檢查語法

在這里插入圖片描述

[root@localhost init.d]# squid -z      ##初始化快取
[root@localhost init.d]# service squid start 
正在啟動 squid....
[root@localhost init.d]# netstat -ntap | grep squid
tcp6       0      0 :::3128                 :::*                    LISTEN      49191/(squid-1)     

3. 傳統代理配置

[root@localhost init.d]# vim /etc/squid.conf
cache_mem 64 MB	##自定義快取空間大小,容量最好為4的倍數
reply_body_max_size 10 MB	##允許下載最大檔案大小,以位元組為單位,默認設定0表示不進行限制
maximum_object_size 4096 KB	##允許保存到快取空間的最大物件的大小,以KB為單位,超過限制不會快取,直接轉到web端

在這里插入圖片描述
配置防火墻規則

[root@squid init.d]# iptables -F
[root@squid init.d]# iptables -t nat -F
[root@squid init.d]# setenforce 0
[root@squid init.d]# iptables -I INPUT -p tcp --dport 3128 -j ACCEPT
[root@squid init.d]# service squid reload

4. 在web服務器上安裝httpd,并啟動服務

[root@localhost ~]# yum install httpd -y
[root@localhost ~]# systemctl start httpd
[root@localhost ~]# netstat -antp | grep httpd
tcp6       0      0 :::80                   :::*                    LISTEN      80909/httpd

5. 在win10虛擬機上測驗,傳統代理是否配置成功

  1. 改瀏覽器代理設定(設定方法在之前設定過,就不進行演示)
    在這里插入圖片描述

  2. 在瀏覽器上訪問web服務
    在這里插入圖片描述

  3. 查看web服務的行程日志

在web服務器上查看
[root@localhost ~]# cat /var/log/httpd/access_log

在這里插入圖片描述

6. 進行ACL串列訪問控制

有兩種方法設定
方法一:
直接在條目中寫出來,適用于寫入條目比較少的情況

[root@localhost init.d]# vim /etc/squid.conf
acl study src 14.0.0.100/32
http_access deny study
[root@localhost init.d]# service squid reload

在這里插入圖片描述
在這里插入圖片描述
再進行訪問
在這里插入圖片描述

方法二:
在組態檔中指明一個檔案的絕對路徑,這個檔案中寫入需要進行訪問控制的IP、網段或域名等等,
先將之前寫的acl條目注釋掉,在win10進行訪問
在這里插入圖片描述

[root@localhost init.d]# vim /etc/squid.conf
acl study src "/etc/squid/study.list"
http_access deny study

在這里插入圖片描述
在這里插入圖片描述

[root@localhost init.d]# mkdir /etc/squid
[root@localhost init.d]# cd /etc/squid/
[root@localhost squid]# touch study.list
[root@localhost squid]# vim study.list 
[root@localhost init.d]# service squid reload

在這里插入圖片描述
進行訪問測驗
在這里插入圖片描述

二、Squid 日志分析

SARG 全稱是 SquidAnalysis Report Generator,是一款 Squid 日志分析工具,采用HTML 格式,詳細列出每位用戶訪問 Internet 的站點資訊、時間占用資訊、排名、連接次數、訪問量等,

2.1 安裝部署SARG

安裝包拷貝到當前目錄下
[root@localhost ~]# tar zvxf  sarg-2.3.7.tar.gz -C /opt   ##解壓到/opt目錄下
[root@localhost ~]# yum install gd gd-devel -y
[root@localhost ~]# mkdir /usr/local/sarg
[root@localhost ~]# cd /opt/sarg-2.3.7/
[root@localhost sarg-2.3.7]# ./configure --prefix=/usr/local/sarg \     ##指定sarg目錄
 --sysconfdir=/etc/sarg \	##組態檔
 --enable-extraprotection	##開啟安全防護
[root@localhost sarg-2.3.7]# make && make install    ##編譯安裝
[root@localhost sarg-2.3.7]# cd /etc/sarg/
[root@localhost sarg]# vim sarg.conf 
 組態檔中默認注釋了所有的檔案,需要取消注釋激活功能
7
access_log /usr/local/squid/var/logs/access.log  ##指定訪問日志檔案
25
title "Squid User Access Reports"    ##網頁標題
120
output_dir /var/www/html/squid-reports  ##報告輸出目錄
178
user_ip no   ##使用用戶名顯示
184
topuser_sort_field connect reverse     ##top排序中有連接次數,訪問位元組,降序排列,升序是normal
190行(一定要注釋掉,否則報錯)
#user_sort_field BYTES reverse    ##用戶訪問記錄連接次數、訪問位元組按降序排序
206
exclude_hosts /usr/local/sarg/noreport   ##不計入排序的站點串列檔案
257
overwrite_report no  ##同名日志是否覆寫
289
mail_utility mailq.postfix  ##發送郵件報告命令
434
charset UTF-8      ##使用字符集
518
weekdays 0-6       ##top排行的時間周期
525
hours 0-23         ##top排行的時間周期
633
www_document_root /var/www/html      ##網頁根目錄
[root@localhost sarg]# touch /usr/local/sarg/noreport	  ##添加不計入站點檔案,添加的域名將不被顯示
[root@localhost sarg]# ln -s /usr/local/sarg/bin/sarg /usr/local/bin/     ##建sarg命令的軟連接
[root@localhost sarg]#  sarg	##生成報告
[root@localhost sarg]# sarg 
SARG: 紀錄在檔案: 294, reading: 100.00%
SARG: 成功的生成報告在 /var/www/html/squid-reports/2020Sep07-2020Sep07   ##提示報告生成在這個目錄,我們進入這個目錄查看
[root@localhost sarg]# ls /var/www/html/squid-reports/
2020Sep07-2020Sep07  images  index.html

這個目錄是httpd的站點目錄,所以我們要安裝httpd服務

[root@localhost sarg]# yum install httpd -y
[root@localhost sarg]# systemctl start httpd

在win10虛擬機中查看日志統計
在這里插入圖片描述
如果我們把win10的地址換一個,在重新生成日志,日志系統也會改變

在這里插入圖片描述
執行周期性計劃任務,每天生成報告

[root@localhost sarg]# sarg -l /usr/local/squid/var/logs/access.log -o /var/www/html/squid-reports/ -z -d $(date -d "1 day ago" +%d/%m/%Y)-$(date +%d/%m/%Y)

在win10中重新訪問
在這里插入圖片描述

三、 squid反向代理

如果Squid反向代理服務器中快取了該請求的資源,則將該請求的資源直接回傳給客戶端;否則反向代理服務器將向后臺的WEB服務器請求資源,然后將請求的應答回傳給客戶端,同時也將該應答快取在本地,供下一個請求者使用,

3.1 作業機制

  • 快取網頁物件,減少重復請求
  • 將互聯網請求輪訓或按權重分配到內網Web服務器
  • ·代理用戶請求,避免用戶直接訪問Web服務器,提高安全

3.2 搭建squid反向代理

在14.0.0.110web服務器上寫一個網頁首頁

[root@localhost ~]# cd /var/www/html/
[root@localhost html]# vim index.html
<h1>this is web01</h1>

開啟另一臺web服務器14.0.0.177,安裝httpd,并寫入網頁首頁

[root@localhost ~]# yum install httpd -y
[root@localhost ~]# cd /var/www/html/
[root@localhost html]# vim index.html
<h1>this is web02</h1>
[root@localhost html]# systemctl start httpd
[root@localhost html]# iptables -F 
[root@localhost html]# setenforce 0

在虛擬機win10中進行測驗
在這里插入圖片描述
在這里插入圖片描述

[root@localhost sarg]# vim /etc/squid.conf
http_port 14.0.0.7:80 accel vhost vport
cache_peer 14.0.0.110 parent 80 0 no-query originserver round-robin max_conn=30 weight=1 name=web1
cache_peer 14.0.0.177 parent 80 0 no-query originserver round-robin max_conn=30 weight=1 name=web2
cache_peer_domain web1 web2 www.yun.com

在這里插入圖片描述
因為監聽的是80埠,所以需要將做日志分析的httpd服務停掉,否則80埠被占用,會導致的服務多載失敗,也可以換一個其他的埠,

[root@localhost sarg]# systemctl stop httpd
[root@localhost ~]# service squid restart 
正在關閉 squid...
正在啟動 squid...

最后在win10虛擬機中進行設定,并測驗
在這里插入圖片描述
改hosts檔案,將IP與域名的對應關系修改與squid中一致,hosts檔案路徑:C:\Windows\System32\drivers\etc
在這里插入圖片描述
編輯hosts檔案
在這里插入圖片描述

在這里插入圖片描述
在這里插入圖片描述
實作了反向代理,訪問成功

轉載請註明出處,本文鏈接:https://www.uj5u.com/ruanti/1349.html

標籤:其他

上一篇:Nginx+Tomcat動靜分離&&負載均衡

下一篇:學習FastDFS這一篇就夠了

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 面試突擊第一季,第二季,第三季

    第一季必考 https://www.bilibili.com/video/BV1FE411y79Y?from=search&seid=15921726601957489746 第二季分布式 https://www.bilibili.com/video/BV13f4y127ee/?spm_id_fro ......

    uj5u.com 2020-09-10 05:35:24 more
  • 第三單元作業總結

    1.前言 這應該是本學期最后一次寫作業總結了吧。總體來說,對作業的節奏也差不多掌握了,作業做起來的效率也更高了。雖然和之前的作業一樣,作業中都要用到新的知識,但是相比之前,更加懂得了如何利用工具以及資料。雖然之間卡過殼,但總體而言,這幾次作業還算完成的比較好。 2.作業程序總結 相比前兩個單元,此單 ......

    uj5u.com 2020-09-10 05:35:41 more
  • 北航OO(2020)第四單元博客作業暨課程總結博客

    北航OO(2020)第四單元博客作業暨課程總結博客 本單元作業的架構設計 在本單元中,由于UML圖具有比較清晰的樹形結構,因此我對其中需要進行查詢操作的元素進行了包裝,在樹的父節點中存盤所有孩子的參考。考慮到性能問題,我采用了快取機制,一次查詢后盡可能快取已經遍歷過的資訊,以減少遍歷次數。 本單元我 ......

    uj5u.com 2020-09-10 05:35:48 more
  • BUAA_OO_第四單元

    一、UML決議器設計 ? 先看下題目:第四單元實作一個基于JDK 8帶有效性檢查的UML(Unified Modeling Language)類圖,順序圖,狀態圖分析器 MyUmlInteraction,實際上我們要建立一個有向圖模型,UML中的物件(元素)可能與同級元素連接,也可與低級元素相連形成 ......

    uj5u.com 2020-09-10 05:35:54 more
  • 6.1邏輯運算子

    邏輯運算子 1. && 短路與 運算式1 && 運算式2 01.運算式1為true并且運算式2也為true 整體回傳為true 02.運算式1為false,將不會執行運算式2 整體回傳為false 03.只要有一個運算式為false 整體回傳為false 2. || 短路或 運算式1 || 運算式2 ......

    uj5u.com 2020-09-10 05:35:56 more
  • BUAAOO 第四單元 & 課程總結

    1. 第四單元:StarUml檔案決議 本單元采用了圖模型決議UML。 UML檔案可以抽象為圖、子圖、邊的邏輯結構。 在實作中,圖的節點包括類、介面、屬性,子圖包括狀態圖、順序圖等。 采用了三次遍歷UML元素的方法建圖,第一遍遍歷建點,第二、三次遍歷設定屬性、連邊,實作圖物件的初始化。這里借鑒了一些 ......

    uj5u.com 2020-09-10 05:36:06 more
  • 談談我對C# 多型的理解

    面向物件三要素:封裝、繼承、多型。 封裝和繼承,這兩個比較好理解,但要理解多型的話,可就稍微有點難度了。今天,我們就來講講多型的理解。 我們應該經常會看到面試題目:請談談對多型的理解。 其實呢,多型非常簡單,就一句話:呼叫同一種方法產生了不同的結果。 具體實作方式有三種。 一、多載 多載很簡單。 p ......

    uj5u.com 2020-09-10 05:36:09 more
  • Python 資料驅動工具:DDT

    背景 python 的unittest 沒有自帶資料驅動功能。 所以如果使用unittest,同時又想使用資料驅動,那么就可以使用DDT來完成。 DDT是 “Data-Driven Tests”的縮寫。 資料:http://ddt.readthedocs.io/en/latest/ 使用方法 dd. ......

    uj5u.com 2020-09-10 05:36:13 more
  • Python里面的xlrd模塊詳解

    那我就一下面積個問題對xlrd模塊進行學習一下: 1.什么是xlrd模塊? 2.為什么使用xlrd模塊? 3.怎樣使用xlrd模塊? 1.什么是xlrd模塊? ?python操作excel主要用到xlrd和xlwt這兩個庫,即xlrd是讀excel,xlwt是寫excel的庫。 今天就先來說一下xl ......

    uj5u.com 2020-09-10 05:36:28 more
  • 當我們創建HashMap時,底層到底做了什么?

    jdk1.7中的底層實作程序(底層基于陣列+鏈表) 在我們new HashMap()時,底層創建了默認長度為16的一維陣列Entry[ ] table。當我們呼叫map.put(key1,value1)方法向HashMap里添加資料的時候: 首先,呼叫key1所在類的hashCode()計算key1 ......

    uj5u.com 2020-09-10 05:36:38 more
最新发布
  • 【中介者設計模式詳解】C/Java/JS/Go/Python/TS不同語言實作

    * 中介者模式是一種行為型設計模式,它可以用來減少類之間的直接依賴關系,
    * 將物件之間的通信封裝到一個中介者物件中,從而使得各個物件之間的關系更加松散。
    * 在中介者模式中,物件之間不再直接相互互動,而是通過中介者來中轉訊息。 ......

    uj5u.com 2023-04-20 08:20:47 more
  • 露天煤礦現場調研和交流案例分享

    他們集團的資訊化公司及研究院在一個礦區正在做智能礦山的統一平臺的 試點,專案投資大概1億,包括了礦山的各方面的內容,顯示得我們這次交流有點多余。他們2年前開始做智能礦山的規劃,有很多煤礦行業專家的加持,他們的描述是非常完美,但是去年底應該上線的平臺,現在還沒有看到影子。他們確實有很多場景需求,但是被... ......

    uj5u.com 2023-04-20 08:20:25 more
  • 《社區人員管理》實戰案例設計&個人案例分享

    設計是一個讓人夢想成真程序,開始編碼、測驗、除錯之前進行需求分析和架構設計,才能保證關鍵方面都做正確 ......

    uj5u.com 2023-04-20 08:20:17 more
  • 軟體架構生態化-多角色交付的探索實踐

    作為一個技術架構師,不僅僅要緊跟行業技術趨勢,還要結合研發團隊現狀及痛點,探索新的交付方案。在日常中,你是否遇到如下問題 “ 業務需求排期長研發是瓶頸;非研發角色感受不到研發技改提效的變化;引入ISV 團隊又擔心質量和安全,培訓周期長“等等,基于此我們探索了一種新的技術體系及交付方案來解決如上問題。 ......

    uj5u.com 2023-04-20 08:20:10 more
  • 【中介者設計模式詳解】C/Java/JS/Go/Python/TS不同語言實作

    * 中介者模式是一種行為型設計模式,它可以用來減少類之間的直接依賴關系,
    * 將物件之間的通信封裝到一個中介者物件中,從而使得各個物件之間的關系更加松散。
    * 在中介者模式中,物件之間不再直接相互互動,而是通過中介者來中轉訊息。 ......

    uj5u.com 2023-04-20 08:19:44 more
  • 露天煤礦現場調研和交流案例分享

    他們集團的資訊化公司及研究院在一個礦區正在做智能礦山的統一平臺的 試點,專案投資大概1億,包括了礦山的各方面的內容,顯示得我們這次交流有點多余。他們2年前開始做智能礦山的規劃,有很多煤礦行業專家的加持,他們的描述是非常完美,但是去年底應該上線的平臺,現在還沒有看到影子。他們確實有很多場景需求,但是被... ......

    uj5u.com 2023-04-20 08:19:07 more
  • 《社區人員管理》實戰案例設計&個人案例分享

    設計是一個讓人夢想成真程序,開始編碼、測驗、除錯之前進行需求分析和架構設計,才能保證關鍵方面都做正確 ......

    uj5u.com 2023-04-20 08:18:57 more
  • 軟體架構生態化-多角色交付的探索實踐

    作為一個技術架構師,不僅僅要緊跟行業技術趨勢,還要結合研發團隊現狀及痛點,探索新的交付方案。在日常中,你是否遇到如下問題 “ 業務需求排期長研發是瓶頸;非研發角色感受不到研發技改提效的變化;引入ISV 團隊又擔心質量和安全,培訓周期長“等等,基于此我們探索了一種新的技術體系及交付方案來解決如上問題。 ......

    uj5u.com 2023-04-20 08:18:49 more
  • 05單件模式

    #經典的單件模式 public class Singleton { private static Singleton uniqueInstance; //一個靜態變數持有Singleton類的唯一實體。 // 其他有用的實體變數寫在這里 //構造器宣告為私有,只有Singleton可以實體化這個類! ......

    uj5u.com 2023-04-19 08:42:51 more
  • 【架構與設計】常見微服務分層架構的區別和落地實踐

    軟體工程的方方面面都遵循一個最基本的道理:沒有銀彈,架構分層模型更是如此,每一種都有各自優缺點,所以請根據不同的業務場景,并遵循簡單、可演進這兩個重要的架構原則選擇合適的架構分層模型即可。 ......

    uj5u.com 2023-04-19 08:42:41 more