1、Hadoop是一個分布式技術架構的名稱,對嗎?還是一個具體資料庫品牌名稱(如:ORACLE、MYSQL)?
2、目前市場上采用大資料技術架構的資料庫品牌或名稱都有哪些?ElasticSearch算是其中之一么?
沒怎么接觸過資料庫的東西,上述兩個問題一直迷糊著,若方便,請幫助我解答一下,謝謝
uj5u.com熱心網友回復:
從狹義上來說hadoop是一個分布式系統架構,包括hdfs,mapreduce,yarn組件。從廣義上來說hadoop是一個生態系統,包含了大資料技術的大多數內容。
采用大資料技術架構的資料庫的話 Hbase算一個,因為它底層的存盤用的是hdfs組件。elasticsearch是一個分布式的搜索引擎,也可以認為是一個服務器吧,但它沒有采用到什么大資料架構。
uj5u.com熱心網友回復:
hadoop非常感謝。
除了HBase,還有其他的嗎?
uj5u.com熱心網友回復:
修正一下,上面elasticsearch也可以認為是一個資料庫不是服務器。除了HBASE,還有kudu,druid等這些,具體使用要看你需求,如果你所使用的資料不僅要提供實時查詢,還要批量運算,kudu支持的比較好,如果你需要的是非常大的資料量下的查詢就是hbase了,如果過濾條件比較多的話,可以采用HBASE的二級索引,二級索引有很多方式,原始mr,360的,華為的hindex,阿里的方案不知道開源沒有,開源HADOOP平臺常用的hbase+es,或者hbase+solr的方式。而druid比hbase支持的實時性更高,據說達到萬億每秒。綜合來說,沒有最好,看需求。
其次,如果只是用來做資料分析,可以用hive資料倉庫,不是資料庫,你要弄清楚oltp和olap的關系。
uj5u.com熱心網友回復:
非常感謝
uj5u.com熱心網友回復:
整體來說hadoop是一個大資料生態圈,主要支持離線資料分析和存盤,包括hdfs,zookeeper,hive,yarn,hbase等組件,樓上說的MapReduce主要是計算框架或者說計算引擎。hadoop版本很多,有阿帕奇的原生hadoop和商用的CDH版本,一起其他版本,具體可以百度。之前剛入門的時候經常搭建原生的阿帕奇版,最近在公司剛用一周左右時間搭建完商用版的,建議自己搭建一個單機版的便于更清楚理解hadoop,有其他問題歡迎私信或者博客留言uj5u.com熱心網友回復:
感謝!
uj5u.com熱心網友回復:
hadoop-logo Apache HadoopThe Apache? Hadoop? project develops open-source software for reliable, scalable, distributed computing.
The Apache Hadoop software library is a framework that allows for the distributed processing of large data sets across clusters of computers using simple programming models. It is designed to scale up from single servers to thousands of machines, each offering local computation and storage. Rather than rely on hardware to deliver high-availability, the library itself is designed to detect and handle failures at the application layer, so delivering a highly-available service on top of a cluster of computers, each of which may be prone to failures.
uj5u.com熱心網友回復:
1、Hadoop是一個分布式技術架構的名稱,對嗎?還是一個具體資料庫品牌名稱(如:ORACLE、MYSQL)?答復:hadoop是一個大資料生態的基礎架構,可以理解為一整套的生態,里面有zookeeper、hbase、hive等各種框架,每個框架都有其特點和功能,比如:zookeeper負責協調、注冊中心;hbase是一種資料庫,負責大資料的存盤(跟你說的ORACLE、MYSQL關系型資料庫都屬于資料庫);hive是一種工具,等等。
2、目前市場上采用大資料技術架構的資料庫品牌或名稱都有哪些?ElasticSearch算是其中之一么?
很多,各有特點,自己可網上搜搜,ElasticSearch更適合做搜索
uj5u.com熱心網友回復:
強
轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/16555.html
標籤:分布式計算/Hadoop
上一篇:按鈕上如何顯示符號&?謝謝!
下一篇:視頻快取加密檔案的解密與合并
