學(xué)習(xí)目標(biāo)：

了解車聯(lián)網(wǎng)大數(shù)據(jù)行業(yè)
了解車聯(lián)網(wǎng)項(xiàng)目系統(tǒng)架構(gòu)
理解車聯(lián)網(wǎng)數(shù)據(jù)量計(jì)算方法
掌握json數(shù)據(jù)解析
掌握復(fù)雜json解析方法

---

能掌握的技能：

1 車聯(lián)網(wǎng)領(lǐng)域大數(shù)據(jù)系統(tǒng)設(shè)計(jì)與開發(fā)
2 車聯(lián)網(wǎng)業(yè)務(wù)類型與指標(biāo)設(shè)計(jì)
3 實(shí)時(shí)數(shù)據(jù)ETL開發(fā)
4 實(shí)時(shí)數(shù)據(jù)分析
5 實(shí)現(xiàn)Flink結(jié)合業(yè)務(wù)主題解決方案
6 離線數(shù)據(jù)倉庫設(shè)計(jì)、使用場景、技術(shù)棧
7 掌握數(shù)據(jù)服務(wù)接口開發(fā)
8 掌握數(shù)據(jù)報(bào)表和數(shù)據(jù)可視化
9 使用Flink以及關(guān)聯(lián)技術(shù)棧解決車聯(lián)網(wǎng)領(lǐng)域復(fù)雜業(yè)務(wù)

---

實(shí)時(shí)數(shù)據(jù)分析：

技術(shù)組件說明

Flink	流批一體計(jì)算引擎
Kafka	高吞吐量的消息中間件
Hbase	海量列式存儲(chǔ)數(shù)據(jù)庫
Phoenix	為基于Hadoop的OLTP和操作分析提供低延時(shí)
Mysql	最流行的關(guān)系型數(shù)據(jù)庫管理系統(tǒng)
Hadoop	大數(shù)據(jù)計(jì)算、存儲(chǔ)、資源管理引擎
Hive	管理分布式存儲(chǔ)中大型數(shù)據(jù)集
Zeppelin	數(shù)據(jù)驅(qū)動(dòng)交互式數(shù)據(jù)分析
Superset	清晰美觀的報(bào)表開發(fā)技術(shù)

---

車聯(lián)網(wǎng)項(xiàng)目整體架構(gòu)：

車聯(lián)網(wǎng)項(xiàng)目整體架構(gòu)

Flink+Kafka 是目前完美的分布式計(jì)算解決方案，Kafka提供了一個(gè)高吞吐量、高可靠性、持久 性高、以及多樣化的消費(fèi)處理模型，可以用來解決百萬級(jí)別的數(shù)據(jù)中生產(chǎn)者和消費(fèi)者之間數(shù)據(jù)傳輸 的問題，Flink提供分布式實(shí)時(shí)計(jì)算能力

海量數(shù)據(jù)存儲(chǔ)

HBase：一個(gè)開源的非關(guān)系型分布式數(shù)據(jù)庫，它參考了谷歌的BigTable建模，實(shí)現(xiàn)的編程語言為Java。
它是Apache軟件基金會(huì)的Hadoop項(xiàng)目的一部分，運(yùn)行于HDFS文件系統(tǒng)之上，為 Hadoop 提供
類似于BigTable 規(guī)模的服務(wù)
Phoenix：一個(gè)開源的HBASE SQL層。它不僅可以使用標(biāo)準(zhǔn)的JDBC API替代HBASE client API創(chuàng)建
表，插入和查詢HBASE，也支持二級(jí)索引、事物以及多種SQL層優(yōu)化。

總結(jié)

以上是生活随笔為你收集整理的车联网项目学习笔记的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。