主頁 >  其他 > DTCC 2021 | 華為云資料庫戰略啟示錄

DTCC 2021 | 華為云資料庫戰略啟示錄

2022-03-23 09:26:21 其他

以下文章來源于ITPUB ,作者老魚

不知不覺,華為攜GaussDB正式產業化運作已經有兩年多了,這兩年,國內資料庫市場在多維度發生著巨大的變化,國際局勢、疫情、數字化轉型、信創等加速了全社會對國產資料庫的認知和接受程度,而GaussDB自身也變化極大,

  • 2019年5月15日,華為正式推出GaussDB資料庫,當時老魚有幸采訪到了GaussDB多位骨干研發成員,并寫下了《華為“高斯”戰記》,

  • 2020年5月初,華為GaussDB做了戰略升級,覆寫關系型、非關系型資料庫以及生態工具類產品,聚焦客戶業務,打造全場景云資料庫服務,

  • 2020年6月30日,華為正式將GaussDB單機主備能力開源到openGauss社區,鼓勵有能力的合作伙伴打造基于openGauss的自有品牌商業資料庫,

……

這些變化與調整的背后意味著什么?顯然,是華為對資料庫的思考在變化,隨之而來的是發展策略也有所調整,GaussDB為什么會并入華為云?華為為什么要開源openGauss?openGauss與GaussDB是怎樣的關系?GaussDB未來將如何發展?這些就成為外界關注的焦點,

華為云資料庫首席架構師馮柯

在剛剛結束的DTCC2021大會上,老魚帶著很多問題及想法,圍繞資料庫產業趨勢及華為戰略,華為資料庫基礎研究方向,GaussDB商業實踐及生態建設,與華為云資料庫首席架構師馮柯、華為云資料庫副總經理丁晨進行了一場深入交流,

華為對資料庫的思考及戰略

現在談論資料庫不可回避的需要討論的另一個話題,就是云計算,

云計算給今天的中國資料庫產業帶來的不僅是技術上的更新,更重要的是商業模式的重塑,在云化大潮下,作為資訊系統核心軟體的資料庫發展出了云資料庫的技術路線,

Gartner預測,云將主導資料庫市場的未來,到2021年,云資料庫在整個資料庫市場中的占比將首次達到50%;到2022年,75%的資料庫將被部署或遷移至云平臺,

馮柯表示,這幾年我們能夠越來越深刻地感受到整個行業在全面走向云化,即使是一些傳統的政企企業,它的整個數字化也在不斷加速,這當中我們也看到了很多客戶,他們已經完成了從ON Cloud到IN Cloud的轉變,可以說如今業務是真正生于云、長于云,

中國云計算產業已經逐步進入下半場,馮柯指出,進入下半場一個很明顯的特征是大中型金融政企的應用加速云化,而這將主導云資料庫市場高速增長,

點擊查看大圖

華為預測,大中型金融政企客戶在云資料庫方面的支出會占到整個中國云資料庫市場的3/4,其中OLTP型別資料庫市場空間為60%,OLAP為23%,NoSQL為17%,

馮柯強調,華為對于整個中國資料庫市場是堅定長期看好的,所以,會持續戰略投入去做,而基于對整個行業的趨勢的判斷,華為對資料庫進行了戰略聚焦,即把云資料庫作為華為在資料庫方向上的主賽道,雖然馮柯并沒有直接回答,但老魚認為,這或許就是為什么GaussDB會并入華為云的主要原因,

華為資料庫發展戰略,用一句話總結即“發揮軟硬體全堆疊優勢,共建開放生態,打造GaussDB全場景云服務”,

資料庫是一個非常有黏性的行業,因為資料是核心資產,牽一發而動全身,直接影響客戶業務,所以一旦上去,基本就很難下來,資料庫行業發展的這40年來,以Oracle、SQL Server為首的主流資料庫占據了大量的資料庫市場,但也帶來了很多問題,尤其是這兩年來和A國的科技戰,卡脖子問題,所以無論是國產化,還是行業,都需要開放的生態,不能從一個傳統封閉生態再走向另一個封閉生態,

而華為開源openGauss,其核心主要兩點,其一、華為在擁抱MySQL等開放生態的同時,也會以openGauss開源生態為主體,打造開放的資料庫生態,其二、支持客戶多樣化(非云)的訴求,

未來投入資料庫六大技術方向

基于新需求、新場景、新技術,最終,華為選擇了六大資料庫領域基礎研究方向來構筑競爭力,這是此次大會上,華為透露出的另外一個要點,也就是說,未來華為在資料庫上將在這六個方向重點投入,打造根技術的競爭力,

一、高可用
高可用是目前大多數金融政企客戶首要關注的問題,特別是對于多地、多中心容災有要求的客戶,馮柯表示,針對這樣的客戶,華為云資料庫已經提供了多種解決方案,如支持同城雙活、異地容災、兩地三中心的解決方案,支持同城雙活強同步的解決方案,支持異步資料復制、多地多活的高可用解決方案,

在這當中,華為兩地三中心的高可用解決方案已經在國有大行,從A類到D類全類業務進行了驗證,滿足金融監管的要求,基于雙集群RPO=0的方案,華為也即將迎來正式投產,在所有的解決方案當中,華為既提供通過軟體機制本身來實作高可用解決方案,也提供基于華為企業級存盤,通過軟硬協同實作的高可用解決方案,以不同的解決方案來滿足不同行業、不同客戶對于高可用的需求,

面向未來,華為也在探討物理距離在一千公里以上,真正具備全球部署能力的多活架構,

二、軟硬深度協同
得益于華為從芯片、服務器、存盤、網路、作業系統、資料庫全堆疊軟硬體能力,華為云GaussDB可以實作軟硬體垂直整合,提升性能和高可用能力,

首先,資料庫的持久化邏輯,深度整合到了計算與存盤分離的技術底座中,基于這樣一個公共技術底座,華為云資料庫全系列產品都可以獲得在容量、彈性、擴展性方面的巨大提升,同時能提供給客戶一致的體驗,

其次,據馮柯透露,華為這兩年的投入重點是把資料庫里的各種計算邏輯,從計算節點卸載下來,下推到存盤當中去,特別是對一些復雜的查詢處理,同時疊加并行處理能力,使得這些計算邏輯能充分利用下面整個存盤池的能力,同時最關鍵的是能做到對業務透明,

第三,就是高性能,高性能的實作除了IO聚合之外,單條交易的本質就是網路的時延和處理的時延,所以,網路對于分布式資料庫的時延(性能)影響是巨大的,

總而言之,軟硬協同帶給我們的不僅僅是性能擴展方面的優勢,更是可以通過軟硬協同打造真正企業級的可靠性,

三、企業級混合負載
為什么會將混合負載(HTAP)作為華為云資料庫根技術方向之一,這樣選擇的背后有著怎樣的思考?馮柯表示,這是因為性能對今天的金融政企客戶來說,有兩層重要的現實含義:

第一層:性能提升能夠真正降低業務遷移的風險,過去一直在談怎樣降低業務遷移風險,談怎么提高產品的兼容性,怎么保證資料遷移的質量,可是會有怎樣的風險比性能不足而導致業務必須在架構上做重大變更所帶來的風險更大呢?用戶增長已經非常確定的說明了這一點,這是第一層含義,

第二層:對分布式資料庫而言,在分布式資料庫上性能意味著什么?意味著成本,在很多實踐中,華為發現一個規律和問題,就是當把客戶基于主機或者基于小機的業務下移到開放式的分布式系統中,很多時候客戶成本反而上升了,這是非常有意思的話題,

通過對這些問題反思,華為明白了一個道理,這個行業最侄訓是要回到對于資料庫本身能力的關注上,

四、云原生多主
單一架構其實并不能解決今天行業所碰到的所有問題,這兩年,華為也在打造另外一款基于云原生的多主架構,希望通過這種架構能夠解決兩個階段的問題,馮柯說,

第一個問題,是高可用的問題,華為希望能基于多主架構,能解決切換時業務中斷的問題,

第二個問題,是擴展性的問題,華為希望基于多主架構,融合軟硬協同的進展,真正能在計算節點以下,在巨大冰山水面以下的部分持續提升這個產品性能和彈性,最終,華為希望提供給行業客戶另一種選擇,一種不需要通過資料拆分也可以獲得透明擴展能力的選擇,從而更好的匹配另外一些行業客戶,特別是一些傳統的政企客戶的模型,

不久前,華為也發布了基于多主架構的路線圖,據了解,華為計劃到今年年底或者明年年初,會正式將基于這種架構的第一代產品投入商用,

五、資料安全與可信
當今世界,每個組織,每個國家,每個人都在關注安全、合規和隱私的問題,幾年前資料無保護隨意使用的紅利是不可能了,這也促進了技術的進步和落地,

未來,全行業都會面臨越來越嚴格的對于可信安全方面的要求,

全密態是華為資料庫為了提升隱私保護能力研制的一項關鍵技術,全密態跟以前談論的脫敏加密不同,資料存盤和傳輸程序中是匿名性存在的脫敏加密,全密態支持資料在整個計算程序中同樣是以密鑰形式存在的,這就實作了讓整個敏感資料在全生命周期當中都得到保護,華為希望通過全密態的技術能夠給對于安全可信,有更高要求的應用場景更多選擇,

如果把云資料庫看成是一種基礎專利,這種基礎專利供給方和需求方之間不需要事先建立可信關系,就可以達成服務契約,華為希望通過這樣的技術,通過在整個安全可信方面的投入來拓展今天的云資料庫,整個云基礎設施的業務邊界,這是華為想做的事情,

六、AI-Native(智能運維與調優)
云計算所帶來的規模化挑戰,在運維側的復雜度和運營成本是今天所有云服務提供商面臨的共同挑戰,

另一方面,由于分布式資料庫自身架構決定,在開發側,運維側復雜度的增加,這種復雜度會反過來阻礙架構實踐在行業進一步的應用,而解法就一個智能化,

華為在智能化進展體現在2個主要運維場景,其一,引數自調優,通過深度學習/強化學習與全域調優演算法,已經覆寫了500+重點引數,相比DBA人工根據經驗調優,性能提升30%的同時,耗費時間從天縮短到分鐘級,

其二、智能索引推薦,通過啟發式推薦演算法,實作了陳述句級和負載級智能索引推薦,將效率從小時級提升到秒級,并在benchmark測驗中實測性能提升了約40倍,

同時,GaussDB還在分布列推薦、慢SQL發現與診斷、負載趨勢預測與例外檢測等領域,引入AI技術,大幅提升管理效率,

華為這兩年正在持續將AI技術融入資料庫內核中,實作資料庫自動優化與調優等功能,

華為云資料庫競爭力

在馮柯看來,華為云資料庫的競爭力有三個方面:

其一,研發投入,華為在資料庫研發投入上是世界領先的,布局了全球7大研究所來構建資料庫研發能力,包括(愛爾蘭研究所、歐洲德國研究所、以色列研究所、俄羅斯研究所、印度研究所、中國深圳、北京、上海、西安研究所、加拿大多倫多研究所),長期的戰略投入保證華為在資料庫專家人才方面儲備充足,根據了解,目前華為薈聚了全球1000+的資料庫專家人才,

其二、技術戰略布局,華為在整個基礎軟硬體的基礎上,如芯片、存盤、網路、作業系統、資料庫有著完整的軟硬體布局,這意味著華為可以通過軟硬的全堆疊系統,來打造全場景的云服務,

其三、生態,資料庫生態是資料庫重要的一環,也是華為今天最大的優勢,馮柯說, GaussDB從一開始就注重生態和社區的構建,華為做生態是認真的且富有經驗的,馮柯強調,最關鍵的一點是,華為把生態當做業務來做,而且首先需要解決生態中怎樣實作商業利益共享,華為愿意去跟伙伴分享市場機會,目前,已經有12家DBV基于openGauss社區版發布了自己的品牌資料庫,

應對線下市場之爭

云資料庫上半場,是線上市場(公有云)之爭,目前大局已定,云資料庫之戰逐步進行到下半場,即線下市場(私有云、混合云)之爭,

線下市場之爭,華為云又將如何應對?馮柯強調,華為戰略聚焦云資料庫,云資料庫包括公有云服務,也包含專有云、混合云服務,華為舍棄的只是線下純軟體(光碟)銷售和交付,而非云部署方式,華為云資料庫副總經理丁晨也強調,華為并沒有舍棄線下市場,而是通過華為云Stack+GaussDB部署到客戶資料中心,為客戶提供與華為云一致的服務體驗,

線下市場對于有著ToB基因的華為無疑是優勢領域,IDC2020《中國關系型資料庫軟體市場跟蹤報告》顯示,華為云Stack在中國政務云,金融云市場長期保持市場份額第一,GaussDB資料庫在中國關系型資料庫本地部署市場中,國產第一,

面向金融政企市場,華為云Stack+GaussDB,為客戶提供符合政策監管要求本地部署的云服務,目前,華為云GaussDB已經在助力國有大行核心交易與數倉系統分布式改造,并已經在4家國有大行和多家股份制銀行商用,并通過聯創攻克關鍵核心技術,

最后,丁晨強調,國產資料庫完全能滿足企業核心業務需求,只不過相對Oracle而言,國產資料庫還沒有那么完美,這需要時間,現在最欠缺的是信心,而信心是需要時間來培養的,

更多華為云資料庫詳情了解,請前往華為云官網:https://www.huaweicloud.com/product/dbs.html

本文由華為云發布,

轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/447176.html

標籤:其他

上一篇:K8S原來如此簡單(三)Pod+Deployment

下一篇:是否允許通過合并或重新磁區在HDFS中合并小檔案(但合并時會很大)?

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 網閘典型架構簡述

    網閘架構一般分為兩種:三主機的三系統架構網閘和雙主機的2+1架構網閘。 三主機架構分別為內端機、外端機和仲裁機。三機無論從軟體和硬體上均各自獨立。首先從硬體上來看,三機都用各自獨立的主板、記憶體及存盤設備。從軟體上來看,三機有各自獨立的作業系統。這樣能達到完全的三機獨立。對于“2+1”系統,“2”分為 ......

    uj5u.com 2020-09-10 02:00:44 more
  • 如何從xshell上傳檔案到centos linux虛擬機里

    如何從xshell上傳檔案到centos linux虛擬機里及:虛擬機CentOs下執行 yum -y install lrzsz命令,出現錯誤:鏡像無法找到軟體包 前言 一、安裝lrzsz步驟 二、上傳檔案 三、遇到的問題及解決方案 總結 前言 提示:其實很簡單,往虛擬機上安裝一個上傳檔案的工具 ......

    uj5u.com 2020-09-10 02:00:47 more
  • 一、SQLMAP入門

    一、SQLMAP入門 1、判斷是否存在注入 sqlmap.py -u 網址/id=1 id=1不可缺少。當注入點后面的引數大于兩個時。需要加雙引號, sqlmap.py -u "網址/id=1&uid=1" 2、判斷文本中的請求是否存在注入 從文本中加載http請求,SQLMAP可以從一個文本檔案中 ......

    uj5u.com 2020-09-10 02:00:50 more
  • Metasploit 簡單使用教程

    metasploit 簡單使用教程 浩先生, 2020-08-28 16:18:25 分類專欄: kail 網路安全 linux 文章標簽: linux資訊安全 編輯 著作權 metasploit 使用教程 前言 一、Metasploit是什么? 二、準備作業 三、具體步驟 前言 Msfconsole ......

    uj5u.com 2020-09-10 02:00:53 more
  • 游戲逆向之驅動層與用戶層通訊

    驅動層代碼: #pragma once #include <ntifs.h> #define add_code CTL_CODE(FILE_DEVICE_UNKNOWN,0x800,METHOD_BUFFERED,FILE_ANY_ACCESS) /* 更多游戲逆向視頻www.yxfzedu.com ......

    uj5u.com 2020-09-10 02:00:56 more
  • 北斗電力時鐘(北斗授時服務器)讓網路資料更精準

    北斗電力時鐘(北斗授時服務器)讓網路資料更精準 北斗電力時鐘(北斗授時服務器)讓網路資料更精準 京準電子科技官微——ahjzsz 近幾年,資訊技術的得了快速發展,互聯網在逐漸普及,其在人們生活和生產中都得到了廣泛應用,并且取得了不錯的應用效果。計算機網路資訊在電力系統中的應用,一方面使電力系統的運行 ......

    uj5u.com 2020-09-10 02:01:03 more
  • 【CTF】CTFHub 技能樹 彩蛋 writeup

    ?碎碎念 CTFHub:https://www.ctfhub.com/ 筆者入門CTF時時剛開始刷的是bugku的舊平臺,后來才有了CTFHub。 感覺不論是網頁UI設計,還是題目質量,賽事跟蹤,工具軟體都做得很不錯。 而且因為獨到的金幣制度的確讓人有一種想去刷題賺金幣的感覺。 個人還是非常喜歡這個 ......

    uj5u.com 2020-09-10 02:04:05 more
  • 02windows基礎操作

    我學到了一下幾點 Windows系統目錄結構與滲透的作用 常見Windows的服務詳解 Windows埠詳解 常用的Windows注冊表詳解 hacker DOS命令詳解(net user / type /md /rd/ dir /cd /net use copy、批處理 等) 利用dos命令制作 ......

    uj5u.com 2020-09-10 02:04:18 more
  • 03.Linux基礎操作

    我學到了以下幾點 01Linux系統介紹02系統安裝,密碼啊破解03Linux常用命令04LAMP 01LINUX windows: win03 8 12 16 19 配置不繁瑣 Linux:redhat,centos(紅帽社區版),Ubuntu server,suse unix:金融機構,證券,銀 ......

    uj5u.com 2020-09-10 02:04:30 more
  • 05HTML

    01HTML介紹 02頭部標簽講解03基礎標簽講解04表單標簽講解 HTML前段語言 js1.了解代碼2.根據代碼 懂得挖掘漏洞 (POST注入/XSS漏洞上傳)3.黑帽seo 白帽seo 客戶網站被黑帽植入劫持代碼如何處理4.熟悉html表單 <html><head><title>TDK標題,描述 ......

    uj5u.com 2020-09-10 02:04:36 more
最新发布
  • 2023年最新微信小程式抓包教程

    01 開門見山 隔一個月發一篇文章,不過分。 首先回顧一下《微信系結手機號資料庫被脫庫事件》,我也是第一時間得知了這個訊息,然后跟蹤了整件事情的經過。下面是這起事件的相關截圖以及近日流出的一萬條資料樣本: 個人認為這件事也沒什么,還不如關注一下之前45億快遞資料查詢渠道疑似在近日復活的訊息。 訊息是 ......

    uj5u.com 2023-04-20 08:48:24 more
  • web3 產品介紹:metamask 錢包 使用最多的瀏覽器插件錢包

    Metamask錢包是一種基于區塊鏈技術的數字貨幣錢包,它允許用戶在安全、便捷的環境下管理自己的加密資產。Metamask錢包是以太坊生態系統中最流行的錢包之一,它具有易于使用、安全性高和功能強大等優點。 本文將詳細介紹Metamask錢包的功能和使用方法。 一、 Metamask錢包的功能 數字資 ......

    uj5u.com 2023-04-20 08:47:46 more
  • vulnhub_Earth

    前言 靶機地址->>>vulnhub_Earth 攻擊機ip:192.168.20.121 靶機ip:192.168.20.122 參考文章 https://www.cnblogs.com/Jing-X/archive/2022/04/03/16097695.html https://www.cnb ......

    uj5u.com 2023-04-20 07:46:20 more
  • 從4k到42k,軟體測驗工程師的漲薪史,給我看哭了

    清明節一過,盲猜大家已經無心上班,在數著日子準備過五一,但一想到銀行卡里的余額……瞬間心情就不美麗了。最近,2023年高校畢業生就業調查顯示,本科畢業月平均起薪為5825元。調查一出,便有很多同學表示自己又被平均了。看著這一資料,不免讓人想到前不久中國青年報的一項調查:近六成大學生認為畢業10年內會 ......

    uj5u.com 2023-04-20 07:44:00 more
  • 最新版本 Stable Diffusion 開源 AI 繪畫工具之中文自動提詞篇

    🎈 標簽生成器 由于輸入正向提示詞 prompt 和反向提示詞 negative prompt 都是使用英文,所以對學習母語的我們非常不友好 使用網址:https://tinygeeker.github.io/p/ai-prompt-generator 這個網址是為了讓大家在使用 AI 繪畫的時候 ......

    uj5u.com 2023-04-20 07:43:36 more
  • 漫談前端自動化測驗演進之路及測驗工具分析

    隨著前端技術的不斷發展和應用程式的日益復雜,前端自動化測驗也在不斷演進。隨著 Web 應用程式變得越來越復雜,自動化測驗的需求也越來越高。如今,自動化測驗已經成為 Web 應用程式開發程序中不可或缺的一部分,它們可以幫助開發人員更快地發現和修復錯誤,提高應用程式的性能和可靠性。 ......

    uj5u.com 2023-04-20 07:43:16 more
  • CANN開發實踐:4個DVPP記憶體問題的典型案例解讀

    摘要:由于DVPP媒體資料處理功能對存放輸入、輸出資料的記憶體有更高的要求(例如,記憶體首地址128位元組對齊),因此需呼叫專用的記憶體申請介面,那么本期就分享幾個關于DVPP記憶體問題的典型案例,并給出原因分析及解決方法。 本文分享自華為云社區《FAQ_DVPP記憶體問題案例》,作者:昇騰CANN。 DVPP ......

    uj5u.com 2023-04-20 07:43:03 more
  • msf學習

    msf學習 以kali自帶的msf為例 一、msf核心模塊與功能 msf模塊都放在/usr/share/metasploit-framework/modules目錄下 1、auxiliary 輔助模塊,輔助滲透(埠掃描、登錄密碼爆破、漏洞驗證等) 2、encoders 編碼器模塊,主要包含各種編碼 ......

    uj5u.com 2023-04-20 07:42:59 more
  • Halcon軟體安裝與界面簡介

    1. 下載Halcon17版本到到本地 2. 雙擊安裝包后 3. 步驟如下 1.2 Halcon軟體安裝 界面分為四大塊 1. Halcon的五個助手 1) 影像采集助手:與相機連接,設定相機引數,采集影像 2) 標定助手:九點標定或是其它的標定,生成標定檔案及內參外參,可以將像素單位轉換為長度單位 ......

    uj5u.com 2023-04-20 07:42:17 more
  • 在MacOS下使用Unity3D開發游戲

    第一次發博客,先發一下我的游戲開發環境吧。 去年2月份買了一臺MacBookPro2021 M1pro(以下簡稱mbp),這一年來一直在用mbp開發游戲。我大致分享一下我的開發工具以及使用體驗。 1、Unity 官網鏈接: https://unity.cn/releases 我一般使用的Apple ......

    uj5u.com 2023-04-20 07:40:19 more