Frist day
- 工具
- 架構
- 數倉架構
- Linux-簡單使用部署
工具
vmware15
Linux centos7.5
Hadhoop3.2.1
Hive3.1.2
SpringBoot
Echart
zk3.4.5
架構
- 編碼[記憶體]
- 磁盤（textfile xml json）
- RDBMS(mysql oracle)
- 分布式、集群 （nosql）
- Hadhoop
數倉架構
離線:批計算——攢了一批資料、計算一次
- 資料來源
（1）業務資料【RDBMS】
（2）行為資料【行為日志】
（3）爬蟲資料【api】
（4）第三方交易【api】 - 資料采集
（1）mr
（2）spark
（3）flink
3.數倉搭建
（1）Hive
4.業務流程
實時:流計算——來一次計算一次
1.資料來源
（1）業務資料【RDBMS】
（2）行為資料【行為日志】
（3）爬蟲資料【api】
（4）第三方交易【api】
2.緩沖
（1）kafla
3.存盤
（1）redis
（2）hbase
（3）sprakstreaming
（4）flink
（5）blink
4.分析
（1）olap分析引擎
（2）kylin
（3）clickhouse
5.展示
Springboot
Echarts
Linux-簡單使用部署
轉載請註明出處，本文鏈接：https://www.uj5u.com/qita/387828.html
標籤：其他
上一篇：Docker安裝Elasticsearch+SpringBoot整合Elasticsearch新手入門
下一篇：云計算清覽作業