主頁 > 軟體工程 > Springboot集成flyway實作資料庫自動遷徙

Springboot集成flyway實作資料庫自動遷徙

2021-04-01 21:46:54 軟體工程

前言

Flyway是一款管理并跟蹤資料庫遷移(migrate)的資料庫版本管理工具,它可以像SVN管理不同人的代碼那樣,管理不同人的sql腳本,從而做到資料庫同步,

它可以幫助我們在不同環境保持資料庫的同步,減少手工操作,同時也減少了遺漏的機會,

Flyway可以集成在專案中,可以與Spring 框結合,在專案發版時,自動執行資料庫腳本,無需人為執行資料庫同步操作,

  1. 在主專案中添加flyway的maven添加依賴

<!-- flyway--> <dependency> <groupId>org.flywaydb</groupId> <artifactId>flyway-core</artifactId> <version>5.2.1</version> </dependency>

將上面的依賴添加到主專案的pom.xml中


2. 在application.yml 組態檔中配置flyway相關配置

需要注意的是,flyway配置放在spring配置下、根據自己實際情況配置相關引數

# flyway 配置
flyway:
  # 執行基線時用來標記已有Schema的版本.(默認值:1)
baseline-version: 1
  # 開啟Flyway(默認true)
enabled: true
  # SQL遷移的檔案名前綴(默認值為V 可以不設定)
sql-migration-prefix: V
  # 遷移sql腳本檔案名稱的分隔符(默認2個下劃線__)
sqlMigrationSeparator: __
  # SQL遷移的檔案名后綴(默認值:.sql 可以不設定)
sql-migration-suffixes: .sql
  # 遷移時是否進行校驗,默認true
validateOnMigrate: true
  # 在沒有元資料表的情況下,針對非空Schema執行遷移時是否自動呼叫基線,
baseline-on-migrate: true
  # 遷移腳本的位置(默認為classpath:db/migration)
locations: classpath:db/migration
  # 資料庫連接配置
url: ${spring.datasource.dynamic.datasource.master.url}
  user: ${spring.datasource.dynamic.datasource.master.username}
  password: ${spring.datasource.dynamic.datasource.master.password}
  # 需要升級的資料庫實體名
schemas: jeecg-boot
  # 編碼格式
encoding: UTF-8
  # 忽略腳本順序:開發環境應該設定trueflyway將能加載漏掉的老版本SQL檔案 生成環境需要設定false
out-of-order: true
  # 發生驗證的錯誤時是否執行clean操作(如SQL執行失敗),默認false,生產中必須使用falseclean-on-validation-error: true
  # 是否禁用clean操作,默認false,生產中必須使用true
clean-disabled: false

Springboot flyway配置說明

-- spring boot flyway 配置說明
flyway.baseline-description對執行遷移時基準版本的描述.
flyway.baseline-on-migrate當遷移時發現目標schema非空,而且帶有沒有元資料的表時,是否自動執行基準遷移,默認false.
flyway.baseline-version開始執行基準遷移時對現有的schema的版本打標簽,默認值為1.
flyway.check-location檢查遷移腳本的位置是否存在,默認false.
flyway.clean-on-validation-error當發現校驗錯誤時是否自動呼叫clean,默認false.
flyway.enabled是否開啟flywary,默認true.
flyway.encoding設定遷移時的編碼,默認UTF-8.
flyway.ignore-failed-future-migration當讀取元資料表時是否忽略錯誤的遷移,默認false.
flyway.init-sqls當初始化好連接時要執行的SQL.
flyway.locations遷移腳本的位置,默認db/migration.
flyway.out-of-order是否允許無序的遷移,默認false.
flyway.password目標資料庫的密碼.
flyway.placeholder-prefix設定每個placeholder的前綴,默認${.
flyway.placeholder-replacementplaceholders是否要被替換,默認true.
flyway.placeholder-suffix設定每個placeholder的后綴,默認}.
flyway.placeholders.[placeholder name]設定placeholder的value
flyway.schemas設定需要flywary遷移的schema,大小寫敏感,默認為連接默認的schema.
flyway.sql-migration-prefix遷移檔案的前綴,默認為V.
flyway.sql-migration-separator遷移腳本的檔案名分隔符,默認__
flyway.sql-migration-suffix遷移腳本的后綴,默認為.sql
flyway.tableflyway使用的元資料表名,默認為schema_version
flyway.target遷移時使用的目標版本,默認為latest version
flyway.url遷移時使用的JDBC URL,如果沒有指定的話,將使用配置的主資料源
flyway.user遷移資料庫的用戶名
flyway.validate-on-migrate遷移時是否校驗,默認為true.
-- spring boot flyway 配置說明

3.在遷移腳本的檔案夾中創建對應sql腳本

在腳本中寫入相關sql陳述句

SpringBoot應用運行時flyway會根據腳本進行資料庫的初始化,執行的順序會根據腳本版本號由低到高按順序執行(1.0 -> 1.0.1 -> 1.0.2),每執行完一個版本腳本都會向記錄表flyway_history_schema插入一條資料,

 若添加了新的版本腳本,應用啟動時flyway會根據腳本檔案版本到記錄表flyway_history_schema查詢是否有對應的版本腳本被執行了,如果沒有相應的版本腳本記錄才會執行腳本,
 不過需要注意:flyway不支持版本回滾,(需手動,比較悲劇的一點)、所以需要準備兩份sql,如果遷移的sql執行成功后需要回滾,就執行對應的回滾sql,如果遷移失敗,flyway可以通過注解執行回滾,


4.啟動了SpringBoot專案后,就會自動幫你執行SQL檔案

 執行歷史可以在 flyway_schema_history 表中查看、已經執行過的遷移sql就不會再執行,主要是在這個歷史表中控制,如果需要重新執行,那么洗掉對應版本及以后的執行歷史重啟專案就會重新執行對應腳本

重繪對應資料庫,就可以看到通過遷移腳本生成的表結構,

使用總結

    我們是在中途嘗試使用flyway,所以開發環境會有一個已存在的資料庫,我們需要從開發環境中匯出資料庫腳本,并對開發環境資料庫進行baseline標記,匯出的腳本可用于新環境的部署,

    如果我們已經有了生產環境,而且生產環境和開發環境的資料庫已經有了較大的差異,暫時可以想到的方案大概有2個方案:

方案一:

   在生產環境備份資料庫,然后創建一個全新的資料庫,手動將備份庫里的資料匯入到新的資料庫,

方案二:

   基于生產環境的資料庫,創建V1版本的腳本;基于開發庫相對于生產庫的變更,創建V2版本的腳本,在開發環境baseline,然后修改版本記錄,改為2,在生產環境中baseline,然后migrate使其升級到2,

方案一:
   需要更多的人工介入,但是比較穩妥;
方案二:
   難點在于溯源出正確的差異,編制V2腳本,

本次的學習到這里就結束了,因為圖圖也是第一次接觸這種資料遷移軟體,所以總結不是很到位,如果有問題可以加圖圖微信,大家一起學習、一起來解決,

如果對您有幫助 請點個關注,萬分感謝
          

                                (QQ招聘群  710566091微信招聘群 請加圖圖微信)

 

 

 

轉載請註明出處,本文鏈接:https://www.uj5u.com/gongcheng/270919.html

標籤:其他

上一篇:2021軟工-個人閱讀作業#2

下一篇:專訪 CNCF 大使王煒:讓云原生開發回歸原始而又簡單

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • Git本地庫既關聯GitHub又關聯Gitee

    創建代碼倉庫 使用gitee舉例(github和gitee差不多) 1.在gitee右上角點擊+,選擇新建倉庫 ? 2.選擇填寫倉庫資訊,然后進行創建 ? 3.服務端已經準備好了,本地開始作準備 (1)Git 全域設定 git config --global user.name "成鈺" git c ......

    uj5u.com 2020-09-10 05:04:14 more
  • CODING DevOps 代碼質量實戰系列第二課,相約周三

    隨著 ToB(企業服務)的興起和 ToC(消費互聯網)產品進入成熟期,線上故障帶來的損失越來越大,代碼質量越來越重要,而「質量內建」正是 DevOps 核心理念之一。**《DevOps 代碼質量實戰(PHP 版)》**為 CODING DevOps 代碼質量實戰系列的第二課,同時也是本系列的 PHP ......

    uj5u.com 2020-09-10 05:07:43 more
  • 推薦Scrum書籍

    推薦Scrum書籍 直接上干貨,推薦書籍清單如下(推薦有順序的哦) Scrum指南 Scrum精髓 Scrum敏捷軟體開發 Scrum捷徑 硝煙中的Scrum和XP : 我們如何實施Scrum 敏捷軟體開發:Scrum實戰指南 Scrum要素 大規模Scrum:大規模敏捷組織的設計 用戶故事地圖 用 ......

    uj5u.com 2020-09-10 05:07:45 more
  • CODING DevOps 代碼質量實戰系列最后一課,周四發車

    隨著 ToB(企業服務)的興起和 ToC(消費互聯網)產品進入成熟期,線上故障帶來的損失越來越大,代碼質量越來越重要,而「質量內建」正是 DevOps 核心理念之一。 **《DevOps 代碼質量實戰(Java 版)》**為 CODING DevOps 代碼質量實戰系列的最后一課,同時也是本系列的 ......

    uj5u.com 2020-09-10 05:07:52 more
  • 敏捷軟體工程實踐書籍

    Scrum轉型想要做好,第一步先了解并真正落實Scrum,那么我推薦的Scrum書籍是要看懂并實踐的。第二步是團隊的工程實踐要做扎實。 下面推薦工程實踐書單: 重構:改善既有代碼的設計 決議極限編程 : 擁抱變化 代碼整潔代碼 程式員的職業素養 修改代碼的藝術 撰寫可讀代碼的藝術 測驗驅動開發 : ......

    uj5u.com 2020-09-10 05:07:55 more
  • Jenkins+svn+nginx實作windows環境自動部署vue前端專案

    前面文章介紹了Jenkins+svn+tomcat實作自動化部署,現在終于有空抽時間出來寫下Jenkins+svn+nginx實作自動部署vue前端專案。 jenkins的安裝和配置已經在前面文章進行介紹,下面介紹實作vue前端專案需要進行的哪些額外的步驟。 注意:在安裝jenkins和nginx的 ......

    uj5u.com 2020-09-10 05:08:49 more
  • CODING DevOps 微服務專案實戰系列第一課,明天等你

    CODING DevOps 微服務專案實戰系列第一課**《DevOps 微服務專案實戰:DevOps 初體驗》**將由 CODING DevOps 開發工程師 王寬老師 向大家介紹 DevOps 的基本理念,并探討為什么現代開發活動需要 DevOps,同時將以 eShopOnContainers 項 ......

    uj5u.com 2020-09-10 05:09:14 more
  • CODING DevOps 微服務專案實戰系列第二課來啦!

    近年來,工程專案的結構越來越復雜,需要接入合適的持續集成流水線形式,才能滿足更多變的需求,那么如何優雅地使用 CI 能力提升生產效率呢?CODING DevOps 微服務專案實戰系列第二課 《DevOps 微服務專案實戰:CI 進階用法》 將由 CODING DevOps 全堆疊工程師 何晨哲老師 向 ......

    uj5u.com 2020-09-10 05:09:33 more
  • CODING DevOps 微服務專案實戰系列最后一課,周四開講!

    隨著軟體工程越來越復雜化,如何在 Kubernetes 集群進行灰度發布成為了生產部署的”必修課“,而如何實作安全可控、自動化的灰度發布也成為了持續部署重點關注的問題。CODING DevOps 微服務專案實戰系列最后一課:**《DevOps 微服務專案實戰:基于 Nginx-ingress 的自動 ......

    uj5u.com 2020-09-10 05:10:00 more
  • CODING 儀表盤功能正式推出,實作作業資料可視化!

    CODING 儀表盤功能現已正式推出!該功能旨在用一張張統計卡片的形式,統計并展示使用 CODING 中所產生的資料。這意味著無需額外的設定,就可以收集歸納寶貴的作業資料并予之量化分析。這些海量的資料皆會以圖表或串列的方式躍然紙上,方便團隊成員隨時查看各專案的進度、狀態和指標,云端協作迎來真正意義上 ......

    uj5u.com 2020-09-10 05:11:01 more
最新发布
  • windows系統git使用ssh方式和gitee/github進行同步

    使用git來clone專案有兩種方式:HTTPS和SSH:
    HTTPS:不管是誰,拿到url隨便clone,但是在push的時候需要驗證用戶名和密碼;
    SSH:clone的專案你必須是擁有者或者管理員,而且需要在clone前添加SSH Key。SSH 在push的時候,是不需要輸入用戶名的,如果配置... ......

    uj5u.com 2023-04-19 08:41:12 more
  • windows系統git使用ssh方式和gitee/github進行同步

    使用git來clone專案有兩種方式:HTTPS和SSH:
    HTTPS:不管是誰,拿到url隨便clone,但是在push的時候需要驗證用戶名和密碼;
    SSH:clone的專案你必須是擁有者或者管理員,而且需要在clone前添加SSH Key。SSH 在push的時候,是不需要輸入用戶名的,如果配置... ......

    uj5u.com 2023-04-19 08:35:34 more
  • 2023年農牧行業6大CRM系統、5大場景盤點

    在物聯網、大資料、云計算、人工智能、自動化技術等現代資訊技術蓬勃發展與逐步成熟的背景下,數字化正成為農牧行業供給側結構性變革與高質量發展的核心驅動因素。因此,改造和提升傳統農牧業、開拓創新現代智慧農牧業,加快推進農牧業的現代化、資訊化、數字化建設已成為農牧業發展的重要方向。 當下,企業數字化轉型已經 ......

    uj5u.com 2023-04-18 08:05:44 more
  • 2023年農牧行業6大CRM系統、5大場景盤點

    在物聯網、大資料、云計算、人工智能、自動化技術等現代資訊技術蓬勃發展與逐步成熟的背景下,數字化正成為農牧行業供給側結構性變革與高質量發展的核心驅動因素。因此,改造和提升傳統農牧業、開拓創新現代智慧農牧業,加快推進農牧業的現代化、資訊化、數字化建設已成為農牧業發展的重要方向。 當下,企業數字化轉型已經 ......

    uj5u.com 2023-04-18 08:00:18 more
  • 計算機組成原理—存盤器

    計算機組成原理—硬體結構 二、存盤器 1.概述 存盤器是計算機系統中的記憶設備,用來存放程式和資料 1.1存盤器的層次結構 快取-主存層次主要解決CPU和主存速度不匹配的問題,速度接近快取 主存-輔存層次主要解決存盤系統的容量問題,容量接近與價位接近于主存 2.主存盤器 2.1概述 主存與CPU的聯 ......

    uj5u.com 2023-04-17 08:20:31 more
  • 談一談我對協同開發的一些認識

    如今各互聯網公司普通都使用敏捷開發,采用小步快跑的形式來進行專案開發。如果是小專案或者小需求,那一個開發可能就搞定了。但對于電商等復雜的系統,其功能多,結構復雜,一個人肯定是搞不定的,所以都是很多人來共同開發維護。以我曾經待過的商城團隊為例,光是后端開發就有七十多人。 為了更好地開發這類大型系統,往 ......

    uj5u.com 2023-04-17 08:18:55 more
  • 專案管理PRINCE2核心知識點整理

    PRINCE2,即 PRoject IN Controlled Environment(受控環境中的專案)是一種結構化的專案管理方法論,由英國政府內閣商務部(OGC)推出,是英國專案管理標準。
    PRINCE2 作為一種開放的方法論,是一套結構化的專案管理流程,描述了如何以一種邏輯性的、有組織的方法,... ......

    uj5u.com 2023-04-17 08:18:51 more
  • 談一談我對協同開發的一些認識

    如今各互聯網公司普通都使用敏捷開發,采用小步快跑的形式來進行專案開發。如果是小專案或者小需求,那一個開發可能就搞定了。但對于電商等復雜的系統,其功能多,結構復雜,一個人肯定是搞不定的,所以都是很多人來共同開發維護。以我曾經待過的商城團隊為例,光是后端開發就有七十多人。 為了更好地開發這類大型系統,往 ......

    uj5u.com 2023-04-17 08:18:00 more
  • 專案管理PRINCE2核心知識點整理

    PRINCE2,即 PRoject IN Controlled Environment(受控環境中的專案)是一種結構化的專案管理方法論,由英國政府內閣商務部(OGC)推出,是英國專案管理標準。
    PRINCE2 作為一種開放的方法論,是一套結構化的專案管理流程,描述了如何以一種邏輯性的、有組織的方法,... ......

    uj5u.com 2023-04-17 08:17:55 more
  • 計算機組成原理—存盤器

    計算機組成原理—硬體結構 二、存盤器 1.概述 存盤器是計算機系統中的記憶設備,用來存放程式和資料 1.1存盤器的層次結構 快取-主存層次主要解決CPU和主存速度不匹配的問題,速度接近快取 主存-輔存層次主要解決存盤系統的容量問題,容量接近與價位接近于主存 2.主存盤器 2.1概述 主存與CPU的聯 ......

    uj5u.com 2023-04-17 08:12:06 more