主頁 > 軟體設計 > SpringBoot整合云服務器下的FastDFS實作檔案上傳

SpringBoot整合云服務器下的FastDFS實作檔案上傳

2020-12-11 12:09:49 軟體設計

1. 云服務器下安裝FastDFS

1.2 環境前置要求

  • 本地虛擬機/云服務器:CentOS7.x 版本
  • FastDFSNginx 相關的軟體壓縮包下載完成并上傳到云服務器中,下載鏈接如下:
    • nginx-1.18.0.tar.gz
    • libfastcommon-1.0.38.tar.gz
    • fastdfs-5.11.tar.gz
    • fastdfs-nginx-module-1.20.tar.gz

下載完成后如圖:

在這里插入圖片描述

將下載的壓縮檔案通過Xftp 6 上傳到云服務器指定路徑下,我指定的路徑是:/usr/local/src/software

在這里插入圖片描述

1.3 安裝單節點的FastDFS

因為我這里只是用FastDFS 去做檔案服務器,個人開發不需要用到集群的FastDFS,而且個人也沒有多臺服務器的環境!如果有需要,可以找一篇關于FastDFS集群環境搭建的文章閱讀!

1.3.1 安裝gcc 和nginx 依賴庫

因為FastDFS 本身就是淘寶的大牛用C語言寫的,所以其依賴于對C進行編譯的環境 gcc,安裝命令如下:

yum -y install gcc

除了gcc之外,還需要安裝nginx 相關的依賴庫,因為后續要安裝 nginx

yum install pcre pcre-devel 
yum install zlib zlib-devel 
yum install openssl openssl--devel  
yum install libevent

注意:如果你本機安裝的nginx壓縮包不是tar.gz而是zip格式的,這時候需要自己下載一下解壓zip格式檔案的命令unzip,下載命令如下:

yum install -y unzip zip

1.3.2 安裝libfastcommon

我們進入上傳軟體壓縮包的路徑:cd /usr/local/src/software

解壓:
tar -zxvf libfastcommon-1.0.38

進入解壓完成后的目錄:
cd libfastcommon-1.0.38/

執行編譯并且安裝:
./make.sh 
./make.sh install

1.3.3 安裝fastdfs

解壓:
tar -zxvf fastdfs-5.11.tar.gz

進入解壓完成后的目錄:
cd fastdfs-5.11/

執行編譯并且安裝:
./make.sh 
./make.sh install

如果安裝成功,會看到/etc/init.d/下看到提供的腳本檔案:

在這里插入圖片描述

  • fdfs_trackerdtracker啟動腳本
  • fdfs_storagedstorage啟動腳本

能夠在 /etc/fdfs/ 目錄下看到默認的組態檔模板:

ll /etc/fdfs/

結果如下:
-rw-r--r-- 1 root root  1461 Dec  9 20:26 client.conf.sample
-rw-r--r-- 1 root root  7927 Dec  9 20:26 storage.conf.sample
-rw-r--r-- 1 root root  7389 Dec  9 20:26 tracker.conf.sample
  • tarcker.conf.sampletracker的組態檔模板
  • storage.conf.samplestorage的組態檔模板
  • client.conf.sample客戶端的組態檔模板

1.3.4 配置并啟動tracker服務

FastDFStrackerstorage 在剛剛的安裝程序中,都已經被安裝了,因此我們安裝這兩種角色的方式是一樣的,不同的是,兩種需要不同的組態檔,

我們要啟動tracker,就修改剛剛看到的tarcker.conf,并且啟動fdfs_trackerd腳本即可:

1)首先將模板檔案復制:

cp /etc/fdfs/tracker.conf.sample /etc/fdfs/tracker.conf

2)修改復制后的組態檔:

vim /etc/fdfs/tracker.conf

# 修改的內容如下:
base_path=/fastdfs_files/tracker                 # 自己指定的存盤日志和資料的根目錄

在這里插入圖片描述

因為自己指定的目錄默認是不存在的,所以修改過組態檔后,我們新建一下該目錄:

mkdir -p /fastdfs_files/tracker 

注意:如果使用的是本地虛擬機請關閉防火墻,云服務器記得開放安全組對應的埠!下面是我的云服務器開放的埠,FastDFS 默認需要23000 和 22122 兩個埠:

在這里插入圖片描述

4)啟動和停止:

  • 啟動tracker服務器: /etc/init.d/fdfs_trackerd start

  • 停止tracker服務器: /etc/init.d/fdfs_trackerd stop

不過安裝程序中,fdfs 已經被設定為系統服務,我們可以采用熟悉的服務啟動方式:

service fdfs_trackerd start 		# 啟動fdfs_trackerd服務,停止用stop

檢查FastDFS Tracker Server是否啟動成功:

ps -ef | grep fdfs_trackerd

在這里插入圖片描述

如果是本地虛擬機,不想每次開機都重新啟動該服務,可以將其設定為開啟自啟動:

chkconfig fdfs_trackerd on

1.3.5 配置并啟動storage服務

步驟類似于1.3.4

1)首先將模板檔案復制:

cp /etc/fdfs/storage.conf.sample /etc/fdfs/storage.conf

2)修改復制后的組態檔:

vim /etc/fdfs/storage.conf

# 修改的內容如下: 
base_path=/fastdfs_files/storage                # 資料和日志檔案存盤根目錄 

store_path0=/fastdfs_files/storage              # 第一個存盤目錄 

tracker_server=本機ip:22122             # tracker服務器IP和埠 

因為自己指定的目錄默認是不存在的,所以修改過組態檔后,我們新建一下該目錄:

mkdir -p /fastdfs_files/storage 

3)啟動和停止:

  • 啟動storage服務器:/etc/init.d/fdfs_storaged start
  • 停止storage服務器:/etc/init.d/fdfs_storaged stop

推薦使用如下方式啟動:

service fdfs_storaged start  			# 啟動fdfs_storaged服務,停止用stop

可以使用 ps -ef | grep fdfs 查看行程:

在這里插入圖片描述

如果是本地虛擬機,不想每次開機都重新啟動該服務,可以將其設定為開啟自啟動:

chkconfig fdfs_trackerd on

再次提醒:本地虛擬機關閉防火墻,云服務器開啟安全組埠

2. 使用nginx訪問FastDFS

2.1 安裝fastdfs-nginx-module

2.1.1 解壓

tar -zxvf fastdfs-nginx-module-1.20.tar.gz

2.1.2 修改config檔案

1)進入解壓后的檔案夾下的src目錄

cd fastdfs-nginx-module-1.20/src/

在這里插入圖片描述

2)編輯config

vim config

使用以下底行命令:

:%s+/usr/local/+/usr/+g

將所有的/usr/local替換為 /usr,這個才是正確的目錄:

在這里插入圖片描述

2.1.3 配置nginx與FastDFS關聯組態檔

復制 fastdfs-nginx-module-1.20 原始碼中的組態檔到/etc/fdfs 目錄, 并修改:

cp /usr/local/src/software/fastdfs-nginx-module-1.20/src/mod_fastdfs.conf /etc/fdfs/

vim /etc/fdfs/mod_fastdfs.conf

修改以下配置:

connect_timeout=10                       # 客戶端訪問檔案連接超時時長(單位:秒)

tracker_server=本機ip:22122      # tracker服務IP和埠

url_have_group_name=true                 # 訪問鏈接前綴加上組名

store_path0=/fastdfs_files/storage       # 檔案存盤路徑

復制 FastDFS 的部分組態檔到/etc/fdfs 目錄:

cd /usr/local/src/software/fastdfs-5.11/conf/

cp http.conf mime.types /etc/fdfs/

2.2 安裝Nginx的插件

因為文章 1.3.1 小節已經安裝了 nginx 依賴庫,所以這里不需要再安裝:

# 如果前面沒安裝,這里就需要安裝虛啊 nginx依賴庫:
yum -y install gcc pcre pcre-devel zlib zlib-devel openssl openssl-devel

2.2.1 解壓安裝包

tar -zxvf nginx-1.18.0.tar.gz 

2.2.2 配置nginx安裝包并指定fastdfs-nginx-model

# 進入解壓后的nginx-1.18.0 目錄:
cd nginx-1.18.0/

# 執行以下命令:
./configure --prefix=/opt/nginx --sbin-path=/usr/bin/nginx --add-module=/usr/local/src/software/fastdfs-nginx-module-1.20/src/

注意:在執行./configure 配置nginx 引數的時候,需要將 fastdfs-nginx-moudle 原始碼作為模塊編譯進去,

2.2.3 編譯并安裝

make && make install

2.2.4 啟動nginx

配置nginx整合fastdfs-module模塊,我們需要修改nginx組態檔,在/opt/nginx/config/nginx.conf 檔案中:

vim  /opt/nginx/conf/nginx.conf

將檔案中,原來的server 80{ ...} 部分代碼替換為如下代碼:

server {
    listen       80;
    server_name  你的域名;
	# 監聽域名中帶有group的,交給FastDFS模塊處理
    location ~/group([0-9])/ {
        ngx_fastdfs_module;
    }
    location / {
        root   html;
        index  index.html index.htm;
    }
    error_page   500 502 503 504  /50x.html;
    location = /50x.html {
        root   html;
    }
}

啟動命令:

nginx			# 啟動nginx

nginx -s stop	 # 停止nginx

nginx -s reload	 # 重新載入組態檔

可通過ps -ef | grep nginx查看nginx是否已啟動成功:

在這里插入圖片描述


3. 使用SpringBoot 整合FastDFS

3.1 相關依賴

<dependency>
    <groupId>com.github.tobato</groupId>
    <artifactId>fastdfs-client</artifactId>
</dependency>

3.2 相關配置引數

# fastDFS 相關配置
fdfs:
  so-timeout: 1501 # 讀取超時時間
  connect-timeout: 601 # 連接超時時間
  thumb-image: # 縮略圖配置
    width: 60
    height: 60
  tracker-list: # tracker地址:你的虛擬機服務器地址+埠(默認是22122)
    - 你的服務器ip:22122

3.3 相關配置類

/**
 * @Auther: csp1999
 * @Date: 2020/12/10/11:29
 * @Description: fastDFS 客戶端配置類
 */
@Configuration
@Import(FdfsClientConfig.class)
// 解決jmx重復注冊bean的問題
@EnableMBeanExport(registration = RegistrationPolicy.IGNORE_EXISTING)
public class FastDfsClientConfig {
}

3.4 測驗類中進行測驗

/**
 * @Auther: csp1999
 * @Date: 2020/12/10/11:33
 * @Description: 測驗FastDFS 檔案上傳
 */
@SpringBootTest
@RunWith(SpringRunner.class)
public class FastDFSTest {

    // fastDFS 存盤客戶端
    @Autowired
    private FastFileStorageClient storageClient;

    // 用于獲取 fastDFS 圖片縮略圖
    @Autowired
    private ThumbImageConfig thumbImageConfig;

    @Test
    public void testUpload() throws FileNotFoundException {
        // 獲取本機要上傳的檔案
        File file = new File("M:\\code\\IDEA\\leyou\\image\\lf.jpg");

        /**
         * 上傳并保存圖片
         *
         * 引數:
         * 1-上傳的檔案流
         * 2-檔案的大小
         * 3-檔案的后綴
         * 4-可以不管他
         */
        StorePath storePath = this.storageClient.uploadFile(
                new FileInputStream(file), file.length(), "jpg", null);

        // 帶分組的路徑
        System.out.println(storePath.getFullPath());

        // 不帶分組的路徑
        System.out.println(storePath.getPath());
    }

    @Test
    public void testUploadAndCreateThumb() throws FileNotFoundException {
        // 獲取本機要上傳的檔案
        File file = new File("M:\\code\\IDEA\\leyou\\image\\bz4.jpg");

        /**
         * 上傳并保存圖片并且生成縮略圖
         *
         * 引數:
         * 1-上傳的檔案流
         * 2-檔案的大小
         * 3-檔案的后綴
         * 4-可以不管他
         */
        StorePath storePath = this.storageClient.uploadImageAndCrtThumbImage(
                new FileInputStream(file), file.length(), "png", null);

        // 帶分組的路徑
        System.out.println(storePath.getFullPath());

        // 不帶分組的路徑
        System.out.println(storePath.getPath());

        // 獲取縮略圖路徑
        String path = thumbImageConfig.getThumbImagePath(storePath.getPath());
        System.out.println(path);
    }
}

先測驗testUpload() 方法,輸出結果:

在這里插入圖片描述

然后我們就可以通過服務器ip地址/group1/M00/00/00/wKg4ZVsWl5eAdLNZAABAhya2V0c424.jpg,去訪問圖片:

在這里插入圖片描述

同理我們測驗testUploadAndCreateThumb() 帶縮略圖的方法,輸出結果如下:

group1/M00/00/00/rBHaFV_Rmq6AC7m3AAQvu4hOzN4945.png			# 帶分組的路徑
M00/00/00/rBHaFV_Rmq6AC7m3AAQvu4hOzN4945.png		        # 不帶分組的路徑	
M00/00/00/rBHaFV_Rmq6AC7m3AAQvu4hOzN4945_60x60.png			# 縮略圖路徑

我們先看下不是縮略圖的效果:ip地址/group1/M00/00/00/rBHaFV_Rmq6AC7m3AAQvu4hOzN4945.png

在這里插入圖片描述

再看下縮略圖的效果:ip地址/group1/M00/00/00/rBHaFV_Rmq6AC7m3AAQvu4hOzN4945_60x60.png

在這里插入圖片描述

圖片大小是我們在組態檔中配置的寬高60px! 我們可以到服務器/fastdfs_files/storage/data/路徑下查看上傳的圖片:

在這里插入圖片描述

SpringBoot整合FastDFS完成!

擴展:除了FastDFS分布式檔案上傳,現在開發中基于OSS的檔案上傳也很常用,可以參考下面這篇文章學習:

springboot操作阿里云OSS實作檔案上傳,下載,洗掉(附原始碼)

轉載請註明出處,本文鏈接:https://www.uj5u.com/ruanti/233119.html

標籤:其他

上一篇:了解OpenStak基礎架構

下一篇:MySQL架構備份之雙機熱備——MySql 主從復制、主主復制

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 面試突擊第一季,第二季,第三季

    第一季必考 https://www.bilibili.com/video/BV1FE411y79Y?from=search&seid=15921726601957489746 第二季分布式 https://www.bilibili.com/video/BV13f4y127ee/?spm_id_fro ......

    uj5u.com 2020-09-10 05:35:24 more
  • 第三單元作業總結

    1.前言 這應該是本學期最后一次寫作業總結了吧。總體來說,對作業的節奏也差不多掌握了,作業做起來的效率也更高了。雖然和之前的作業一樣,作業中都要用到新的知識,但是相比之前,更加懂得了如何利用工具以及資料。雖然之間卡過殼,但總體而言,這幾次作業還算完成的比較好。 2.作業程序總結 相比前兩個單元,此單 ......

    uj5u.com 2020-09-10 05:35:41 more
  • 北航OO(2020)第四單元博客作業暨課程總結博客

    北航OO(2020)第四單元博客作業暨課程總結博客 本單元作業的架構設計 在本單元中,由于UML圖具有比較清晰的樹形結構,因此我對其中需要進行查詢操作的元素進行了包裝,在樹的父節點中存盤所有孩子的參考。考慮到性能問題,我采用了快取機制,一次查詢后盡可能快取已經遍歷過的資訊,以減少遍歷次數。 本單元我 ......

    uj5u.com 2020-09-10 05:35:48 more
  • BUAA_OO_第四單元

    一、UML決議器設計 ? 先看下題目:第四單元實作一個基于JDK 8帶有效性檢查的UML(Unified Modeling Language)類圖,順序圖,狀態圖分析器 MyUmlInteraction,實際上我們要建立一個有向圖模型,UML中的物件(元素)可能與同級元素連接,也可與低級元素相連形成 ......

    uj5u.com 2020-09-10 05:35:54 more
  • 6.1邏輯運算子

    邏輯運算子 1. && 短路與 運算式1 && 運算式2 01.運算式1為true并且運算式2也為true 整體回傳為true 02.運算式1為false,將不會執行運算式2 整體回傳為false 03.只要有一個運算式為false 整體回傳為false 2. || 短路或 運算式1 || 運算式2 ......

    uj5u.com 2020-09-10 05:35:56 more
  • BUAAOO 第四單元 & 課程總結

    1. 第四單元:StarUml檔案決議 本單元采用了圖模型決議UML。 UML檔案可以抽象為圖、子圖、邊的邏輯結構。 在實作中,圖的節點包括類、介面、屬性,子圖包括狀態圖、順序圖等。 采用了三次遍歷UML元素的方法建圖,第一遍遍歷建點,第二、三次遍歷設定屬性、連邊,實作圖物件的初始化。這里借鑒了一些 ......

    uj5u.com 2020-09-10 05:36:06 more
  • 談談我對C# 多型的理解

    面向物件三要素:封裝、繼承、多型。 封裝和繼承,這兩個比較好理解,但要理解多型的話,可就稍微有點難度了。今天,我們就來講講多型的理解。 我們應該經常會看到面試題目:請談談對多型的理解。 其實呢,多型非常簡單,就一句話:呼叫同一種方法產生了不同的結果。 具體實作方式有三種。 一、多載 多載很簡單。 p ......

    uj5u.com 2020-09-10 05:36:09 more
  • Python 資料驅動工具:DDT

    背景 python 的unittest 沒有自帶資料驅動功能。 所以如果使用unittest,同時又想使用資料驅動,那么就可以使用DDT來完成。 DDT是 “Data-Driven Tests”的縮寫。 資料:http://ddt.readthedocs.io/en/latest/ 使用方法 dd. ......

    uj5u.com 2020-09-10 05:36:13 more
  • Python里面的xlrd模塊詳解

    那我就一下面積個問題對xlrd模塊進行學習一下: 1.什么是xlrd模塊? 2.為什么使用xlrd模塊? 3.怎樣使用xlrd模塊? 1.什么是xlrd模塊? ?python操作excel主要用到xlrd和xlwt這兩個庫,即xlrd是讀excel,xlwt是寫excel的庫。 今天就先來說一下xl ......

    uj5u.com 2020-09-10 05:36:28 more
  • 當我們創建HashMap時,底層到底做了什么?

    jdk1.7中的底層實作程序(底層基于陣列+鏈表) 在我們new HashMap()時,底層創建了默認長度為16的一維陣列Entry[ ] table。當我們呼叫map.put(key1,value1)方法向HashMap里添加資料的時候: 首先,呼叫key1所在類的hashCode()計算key1 ......

    uj5u.com 2020-09-10 05:36:38 more
最新发布
  • 【中介者設計模式詳解】C/Java/JS/Go/Python/TS不同語言實作

    * 中介者模式是一種行為型設計模式,它可以用來減少類之間的直接依賴關系,
    * 將物件之間的通信封裝到一個中介者物件中,從而使得各個物件之間的關系更加松散。
    * 在中介者模式中,物件之間不再直接相互互動,而是通過中介者來中轉訊息。 ......

    uj5u.com 2023-04-20 08:20:47 more
  • 露天煤礦現場調研和交流案例分享

    他們集團的資訊化公司及研究院在一個礦區正在做智能礦山的統一平臺的 試點,專案投資大概1億,包括了礦山的各方面的內容,顯示得我們這次交流有點多余。他們2年前開始做智能礦山的規劃,有很多煤礦行業專家的加持,他們的描述是非常完美,但是去年底應該上線的平臺,現在還沒有看到影子。他們確實有很多場景需求,但是被... ......

    uj5u.com 2023-04-20 08:20:25 more
  • 《社區人員管理》實戰案例設計&個人案例分享

    設計是一個讓人夢想成真程序,開始編碼、測驗、除錯之前進行需求分析和架構設計,才能保證關鍵方面都做正確 ......

    uj5u.com 2023-04-20 08:20:17 more
  • 軟體架構生態化-多角色交付的探索實踐

    作為一個技術架構師,不僅僅要緊跟行業技術趨勢,還要結合研發團隊現狀及痛點,探索新的交付方案。在日常中,你是否遇到如下問題 “ 業務需求排期長研發是瓶頸;非研發角色感受不到研發技改提效的變化;引入ISV 團隊又擔心質量和安全,培訓周期長“等等,基于此我們探索了一種新的技術體系及交付方案來解決如上問題。 ......

    uj5u.com 2023-04-20 08:20:10 more
  • 【中介者設計模式詳解】C/Java/JS/Go/Python/TS不同語言實作

    * 中介者模式是一種行為型設計模式,它可以用來減少類之間的直接依賴關系,
    * 將物件之間的通信封裝到一個中介者物件中,從而使得各個物件之間的關系更加松散。
    * 在中介者模式中,物件之間不再直接相互互動,而是通過中介者來中轉訊息。 ......

    uj5u.com 2023-04-20 08:19:44 more
  • 露天煤礦現場調研和交流案例分享

    他們集團的資訊化公司及研究院在一個礦區正在做智能礦山的統一平臺的 試點,專案投資大概1億,包括了礦山的各方面的內容,顯示得我們這次交流有點多余。他們2年前開始做智能礦山的規劃,有很多煤礦行業專家的加持,他們的描述是非常完美,但是去年底應該上線的平臺,現在還沒有看到影子。他們確實有很多場景需求,但是被... ......

    uj5u.com 2023-04-20 08:19:07 more
  • 《社區人員管理》實戰案例設計&個人案例分享

    設計是一個讓人夢想成真程序,開始編碼、測驗、除錯之前進行需求分析和架構設計,才能保證關鍵方面都做正確 ......

    uj5u.com 2023-04-20 08:18:57 more
  • 軟體架構生態化-多角色交付的探索實踐

    作為一個技術架構師,不僅僅要緊跟行業技術趨勢,還要結合研發團隊現狀及痛點,探索新的交付方案。在日常中,你是否遇到如下問題 “ 業務需求排期長研發是瓶頸;非研發角色感受不到研發技改提效的變化;引入ISV 團隊又擔心質量和安全,培訓周期長“等等,基于此我們探索了一種新的技術體系及交付方案來解決如上問題。 ......

    uj5u.com 2023-04-20 08:18:49 more
  • 05單件模式

    #經典的單件模式 public class Singleton { private static Singleton uniqueInstance; //一個靜態變數持有Singleton類的唯一實體。 // 其他有用的實體變數寫在這里 //構造器宣告為私有,只有Singleton可以實體化這個類! ......

    uj5u.com 2023-04-19 08:42:51 more
  • 【架構與設計】常見微服務分層架構的區別和落地實踐

    軟體工程的方方面面都遵循一個最基本的道理:沒有銀彈,架構分層模型更是如此,每一種都有各自優缺點,所以請根據不同的業務場景,并遵循簡單、可演進這兩個重要的架構原則選擇合適的架構分層模型即可。 ......

    uj5u.com 2023-04-19 08:42:41 more