主頁 > 資料庫 > NoSQL簡介

NoSQL簡介

2023-06-28 10:14:53 資料庫

1、什么是NoSQL

  • NoSQL(NoSQL = Not Only SQL ),意即"不僅僅是SQL",

  • NoSQL主要指非關系型、分布式、不提供ACID的資料庫設計模式,

  • 在現代的計算系統上每天網路上都會產生龐大的資料量,

  • 這些資料有很大一部分是由關系資料庫管理系統(RDBMS)來處理, 1970年 E.F.Codd's提出的關系模型的論文 "A relational model of data for large shared data banks",這使得資料建模和應用程式編程更加簡單,

  • 通過應用實踐證明,關系模型是非常適合于客戶服務器編程,遠遠超出預期的利益,今天它是結構化資料存盤在網路和商務應用的主導技術,

  • NoSQL 是一項全新的資料庫革命性運動,早期就有人提出,發展至2009年趨勢越發高漲,NoSQL的擁護者們提倡運用非關系型的資料存盤,相對于鋪天蓋地的關系型資料庫運用,這一概念無疑是一種全新的思維的注入,

  • NoSQL用于超大規模資料的存盤,(例如谷歌或Facebook每天為他們的用戶收集萬億位元的資料),這些型別的資料存盤不需要固定的模式,無需多余操作就可以橫向擴展,

2、什么是分布式系統

  • 分布式系統(distributed system)由多臺計算機和通信的軟體組件通過計算機網路連接(本地網路或廣域網)組成,

  • 分布式系統是建立在網路之上的軟體系統,正是因為軟體的特性,所以分布式系統具有高度的內聚性和透明性,

  • 因此,網路和分布式系統之間的區別更多的在于高層軟體(特別是作業系統),而不是硬體,

  • 分布式系統可以應用在不同的平臺上如:Pc、作業站、局域網和廣域網上等,

3、分布式計算的優劣

1、優點

  • 可靠性(容錯) :

分布式計算系統中的一個重要的優點是可靠性,一臺服務器的系統崩潰并不影響到其余的服務器,

  • 可擴展性:

在分布式計算系統可以根據需要增加更多的機器,

  • 資源共享:

共享資料是必不可少的應用,如銀行,預訂系統,

  • 靈活性:

由于該系統是非常靈活的,它很容易安裝,實施和除錯新的服務,

  • 更快的速度:

分布式計算系統可以有多臺計算機的計算能力,使得它比其他系統有更快的處理速度,

  • 開放系統:

由于它是開放的系統,本地或者遠程都可以訪問到該服務,

  • 更高的性能:

相較于集中式計算機網路集群可以提供更高的性能(及更好的性價比),

2、缺點

  • 故障排除:

故障排除和診斷問題,

  • 軟體:

更少的軟體支持是分布式計算系統的主要缺點,

  • 網路:

網路基礎設施的問題,包括:傳輸問題,高負載,資訊丟失等,

  • 安全性:

開放系統的特性讓分布式計算系統存在著資料的安全性和共享的風險等問題,

4、為什么要使用NoSQL

  • 今天我們可以通過第三方平臺(如:Google,Facebook等)可以很容易的訪問和抓取資料,用戶的個人資訊,社交網路,地理位置,用戶生成的資料和用戶操作日志已經成倍的增加,我們如果要對這些用戶資料進行挖掘,那SQL資料庫已經不適合這些應用了, NoSQL 資料庫的發展卻能很好的處理這些大的資料,

1、RDBMS vs NoSQL

  • RDBMS

    • 高度組織化結構化資料
    • 結構化查詢語言(SQL) (SQL)
    • 資料和關系都存盤在單獨的表中,
    • 資料操縱語言,資料定義語言
    • 嚴格的一致性
    • 基礎事務
  • NoSQL

    • 代表著不僅僅是SQL
    • 沒有宣告性查詢語言
    • 沒有預定義的模式
    • 鍵值對存盤,列存盤,檔案存盤,圖形資料庫
    • 最終一致性,而非ACID屬性
    • 非結構化和不可預知的資料
    • CAP定理
    • 高性能,高可用性和可伸縮性

2、CAP定理(CAP theorem)

  • 在計算機科學中, CAP定理(CAP theorem), 又被稱作 布魯爾定理(Brewer's theorem), 它指出對于一個分布式計算系統來說,不可能同時滿足以下三點:

    • 一致性(Consistency) (所有節點在同一時間具有相同的資料)

    • 可用性(Availability) (保證每個請求不管成功或者失敗都有回應)

    • 磁區容錯性(Partition tolerance) (系統中任意資訊的丟失或失敗不會影響系統的繼續運作)

  • CAP理論的核心是:一個分布式系統不可能同時很好的滿足一致性,可用性和磁區容錯性這三個需求,最多只能同時較好的滿足兩個,

    • 因此,根據 CAP 原理將 NoSQL 資料庫分成了滿足 CA 原則、滿足 CP 原則和滿足 AP 原則三 大類:

    • CA - 單點集群,滿足一致性,可用性的系統,通常在可擴展性上不太強大,

    • CP - 滿足一致性,磁區容忍性的系統,通常性能不是特別高,

    • AP - 滿足可用性,磁區容忍性的系統,通常可能對一致性要求低一些,

5、NoSQL的優缺點

  • 優點:

    • 高可擴展性

    • 分布式計算

    • 低成本

    • 架構的靈活性,半結構化資料

    • 沒有復雜的關系

  • 缺點:

    • 沒有標準化

    • 有限的查詢功能(到目前為止)

    • 最終一致是不直觀的程式

6、ACID vs BASE

7、NoSQL資料庫分類

轉載請註明出處,本文鏈接:https://www.uj5u.com/shujuku/556177.html

標籤:其他

上一篇:詳解資料庫中的索引和視圖

下一篇:返回列表

標籤雲
其他(161764) Python(38255) JavaScript(25515) Java(18266) C(15238) 區塊鏈(8273) C#(7972) AI(7469) 爪哇(7425) MySQL(7271) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5875) 数组(5741) R(5409) Linux(5347) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4607) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2437) ASP.NET(2404) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) .NET技术(1985) HtmlCss(1976) 功能(1967) Web開發(1951) C++(1942) python-3.x(1918) 弹簧靴(1913) xml(1889) PostgreSQL(1881) .NETCore(1863) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • GPU虛擬機創建時間深度優化

    **?桔妹導讀:**GPU虛擬機實體創建速度慢是公有云面臨的普遍問題,由于通常情況下創建虛擬機屬于低頻操作而未引起業界的重視,實際生產中還是存在對GPU實體創建時間有苛刻要求的業務場景。本文將介紹滴滴云在解決該問題時的思路、方法、并展示最終的優化成果。 從公有云服務商那里購買過虛擬主機的資深用戶,一 ......

    uj5u.com 2020-09-10 06:09:13 more
  • 可編程網卡芯片在滴滴云網路的應用實踐

    **?桔妹導讀:**隨著云規模不斷擴大以及業務層面對延遲、帶寬的要求越來越高,采用DPDK 加速網路報文處理的方式在橫向縱向擴展都出現了局限性。可編程芯片成為業界熱點。本文主要講述了可編程網卡芯片在滴滴云網路中的應用實踐,遇到的問題、帶來的收益以及開源社區貢獻。 #1. 資料中心面臨的問題 隨著滴滴 ......

    uj5u.com 2020-09-10 06:10:21 more
  • 滴滴資料通道服務演進之路

    **?桔妹導讀:**滴滴資料通道引擎承載著全公司的資料同步,為下游實時和離線場景提供了必不可少的源資料。隨著任務量的不斷增加,資料通道的整體架構也隨之發生改變。本文介紹了滴滴資料通道的發展歷程,遇到的問題以及今后的規劃。 #1. 背景 資料,對于任何一家互聯網公司來說都是非常重要的資產,公司的大資料 ......

    uj5u.com 2020-09-10 06:11:05 more
  • 滴滴AI Labs斬獲國際機器翻譯大賽中譯英方向世界第三

    **桔妹導讀:**深耕人工智能領域,致力于探索AI讓出行更美好的滴滴AI Labs再次斬獲國際大獎,這次獲獎的專案是什么呢?一起來看看詳細報道吧! 近日,由國際計算語言學協會ACL(The Association for Computational Linguistics)舉辦的世界最具影響力的機器 ......

    uj5u.com 2020-09-10 06:11:29 more
  • MPP (Massively Parallel Processing)大規模并行處理

    1、什么是mpp? MPP (Massively Parallel Processing),即大規模并行處理,在資料庫非共享集群中,每個節點都有獨立的磁盤存盤系統和記憶體系統,業務資料根據資料庫模型和應用特點劃分到各個節點上,每臺資料節點通過專用網路或者商業通用網路互相連接,彼此協同計算,作為整體提供 ......

    uj5u.com 2020-09-10 06:11:41 more
  • 滴滴資料倉庫指標體系建設實踐

    **桔妹導讀:**指標體系是什么?如何使用OSM模型和AARRR模型搭建指標體系?如何統一流程、規范化、工具化管理指標體系?本文會對建設的方法論結合滴滴資料指標體系建設實踐進行解答分析。 #1. 什么是指標體系 ##1.1 指標體系定義 指標體系是將零散單點的具有相互聯系的指標,系統化的組織起來,通 ......

    uj5u.com 2020-09-10 06:12:52 more
  • 單表千萬行資料庫 LIKE 搜索優化手記

    我們經常在資料庫中使用 LIKE 運算子來完成對資料的模糊搜索,LIKE 運算子用于在 WHERE 子句中搜索列中的指定模式。 如果需要查找客戶表中所有姓氏是“張”的資料,可以使用下面的 SQL 陳述句: SELECT * FROM Customer WHERE Name LIKE '張%' 如果需要 ......

    uj5u.com 2020-09-10 06:13:25 more
  • 滴滴Ceph分布式存盤系統優化之鎖優化

    **桔妹導讀:**Ceph是國際知名的開源分布式存盤系統,在工業界和學術界都有著重要的影響。Ceph的架構和演算法設計發表在國際系統領域頂級會議OSDI、SOSP、SC等上。Ceph社區得到Red Hat、SUSE、Intel等大公司的大力支持。Ceph是國際云計算領域應用最廣泛的開源分布式存盤系統, ......

    uj5u.com 2020-09-10 06:14:51 more
  • es~通過ElasticsearchTemplate進行聚合~嵌套聚合

    之前寫過《es~通過ElasticsearchTemplate進行聚合操作》的文章,這一次主要寫一個嵌套的聚合,例如先對sex集合,再對desc聚合,最后再對age求和,共三層嵌套。 Aggregations的部分特性類似于SQL語言中的group by,avg,sum等函式,Aggregation ......

    uj5u.com 2020-09-10 06:14:59 more
  • 爬蟲日志監控 -- Elastc Stack(ELK)部署

    傻瓜式部署,只需替換IP與用戶 導讀: 現ELK四大組件分別為:Elasticsearch(核心)、logstash(處理)、filebeat(采集)、kibana(可視化) 下載均在https://www.elastic.co/cn/downloads/下tar包,各組件版本最好一致,配合fdm會 ......

    uj5u.com 2020-09-10 06:15:05 more
最新发布
  • NoSQL簡介

    ## 1、什么是NoSQL * NoSQL(NoSQL = Not Only SQL ),意即"不僅僅是SQL"。 * NoSQL主要指非關系型、分布式、不提供ACID的資料庫設計模式。 * 在現代的計算系統上每天網路上都會產生龐大的資料量。 * 這些資料有很大一部分是由關系資料庫管理系統(RDBM ......

    uj5u.com 2023-06-28 10:14:53 more
  • 詳解資料庫中的索引和視圖

    摘要:索引就是資料表中資料和相應的存盤位置的串列,利用索引可以提高在表或視圖中的查找資料的速度。 本文分享自華為云社區《資料庫開發指南(六)索引和視圖的使用技巧、方法與綜合應用》,作者: bluetata 。 一、索引 1.1 什么是索引 索引就是資料表中資料和相應的存盤位置的串列,利用索引可以提高 ......

    uj5u.com 2023-06-28 10:14:14 more
  • 這場世界級的攻堅考驗,華為云GaussDB穩過

    摘要:實踐證明,華為云GaussDB完全經受住了這場世界級的攻堅考驗,也完全具備支撐大型一體機系統遷移上云的能力,并積累了豐富的經驗。 本文分享自華為云社區《這場世界級的攻堅考驗,華為云GaussDB穩過》,作者: GaussDB 資料庫 。 數字化時代,業務“在線”是每個企業的常態。作為企業經營管 ......

    uj5u.com 2023-06-28 10:13:49 more
  • MongoDB(一)

    ## 1、簡介 * MongoDB是基于C++語言撰寫的,是一個基于分布式檔案存盤的開源資料庫系統。 * MongoDB將資料存盤作為一個檔案,資料結構由鍵值對(key==>value)組成,MongoDB檔案類似于JSON物件。欄位值可以包含其他檔案,陣列及檔案陣列。 ![](https://im ......

    uj5u.com 2023-06-28 10:12:08 more
  • 圖文結合帶你搞懂GreatSQL體系架構

    **往期系列回顧** - [圖文結合系列之帶你搞懂MySQL日志系列](http://mp.weixin.qq.com/s?__biz=MzkzMTIzMDgwMg==&mid=2247496981&idx=1&sn=ec496da6e52e19ee505483a15fb54f6b&chksm=c2 ......

    uj5u.com 2023-06-28 10:11:47 more
  • Spark環境搭建及Spark shell

    # StandAlone模式環境搭建 環境準備:三臺Linux,一個安裝Master,其他兩臺機器安裝Worker ![image](https://img2023.cnblogs.com/blog/1742816/202306/1742816-20230627212426287-907092698 ......

    uj5u.com 2023-06-28 10:10:40 more
  • NoSQL簡介

    ## 1、什么是NoSQL * NoSQL(NoSQL = Not Only SQL ),意即"不僅僅是SQL"。 * NoSQL主要指非關系型、分布式、不提供ACID的資料庫設計模式。 * 在現代的計算系統上每天網路上都會產生龐大的資料量。 * 這些資料有很大一部分是由關系資料庫管理系統(RDBM ......

    uj5u.com 2023-06-28 10:10:29 more
  • SeaTunnel畢業!首個國人主導的資料集成專案成為Apache頂級專案

    采訪嘉賓 | 郭煒、高俊 編輯 | Tina 北京時間 2023 年 6 月 1 日,全球最大的開源軟體基金會 Apache Software Foundation(以下簡稱 ASF)正式宣布 Apache SeaTunnel 畢業成為 Apache 頂級專案 (TLP, Top Level Pro ......

    uj5u.com 2023-06-28 10:09:55 more
  • 關系型資料庫速度比較(性能基準測驗)及python實作

    https://www.sqlite.org/speed.html 做了SQLite、MySQL和PostgreSQL的速度比較,使用的資料庫版本比較老,但是測驗方法依舊頗有意義。 ![](https://img2023.cnblogs.com/blog/3174021/202306/3174021 ......

    uj5u.com 2023-06-27 09:19:43 more
  • 教程 | Datavines 自定義資料質量檢查規則(Metric)

    Metric 是 Datavines 中一個核心概念,一個 Metric 表示一個資料質量檢查規則,比如空值檢查和表行數檢查都是一個規則。Metric 采用插件化設計,用戶可以根據自己的需求來實作一個 Metric。下面我們來詳細講解一下如何自定義`Metric`。 ### 第一步 我們先了解下幾個 ......

    uj5u.com 2023-06-27 09:19:33 more