一、發(fā)展背景

1、大數(shù)據(jù)時代

（1）時代背景

????????大數(shù)據(jù)、物聯(lián)網(wǎng)、云計算促成的第三次信息化浪潮。

（2）技術(shù)支撐

????????①存儲（存儲設(shè)備容量不斷增加）；

????????②計算（CPU處理能力大幅提升）；

????????③網(wǎng)絡(luò)（網(wǎng)絡(luò)帶寬不斷增加）；

（3）大數(shù)據(jù)發(fā)展歷程

二、大數(shù)據(jù)的概念和影響?

1、大數(shù)據(jù)的經(jīng)典特征

（1）4V

????????①數(shù)據(jù)量大；

????????②數(shù)據(jù)類型繁多；

????????③處理速度快；

????????④價值密度低；

2、大數(shù)據(jù)理論基礎(chǔ)

（1）常用存儲單位的換算關(guān)系

（2） 科學(xué)研究的四種范式

????????①第一種范式：實驗科學(xué)；

????????②第二種范式：理論科學(xué)；

????????③第三種范式：計算科學(xué)；

????????④第四種范式：數(shù)據(jù)密集型科學(xué)；

（3）大數(shù)據(jù)對思維方式的影響

? ? ? ? ①全樣而非抽樣；

? ? ? ? ②效率而非精確；

? ? ? ? ③相關(guān)而非因果；

（4）大數(shù)據(jù)的應(yīng)用

? ? ? ? 基本上各個行業(yè)都融入了大數(shù)據(jù)。

三、大數(shù)據(jù)技術(shù)及其原理概述

1、大數(shù)據(jù)關(guān)鍵技術(shù)

（1）大數(shù)據(jù)技術(shù)層面及其應(yīng)用?

（2）數(shù)據(jù)存儲管理和數(shù)據(jù)處理與分析的兩大核心技術(shù)

????????①分布式存儲（解決海量數(shù)據(jù)存儲問題，集群分布式處理）；

????????②分布式處理（解決海量數(shù)據(jù)的處理問題，集群分布式處理）；

2、大數(shù)據(jù)計算模式

（1）技術(shù)代表以及模式簡述

????????大數(shù)據(jù)技術(shù)以谷歌公司技術(shù)為代表：

????????? ? ? ? ??

????????

（2）批處理計算

????????MapReduce是批處理計算模式的典型代表，Spark也是批處理但是它解決了MapReduce的缺點，實時性更好，同時它也可以做迭代計算。

（3）流計算

????????流數(shù)據(jù)需要實時處理，給出實時響應(yīng)，否則分析結(jié)果就會失去商業(yè)價值。

（4）大數(shù)據(jù)計算模式概述圖

3、云計算?

（1）云計算解決的兩大核心問題

? ? ? ? ①分布式存儲；

? ? ? ? ②分布式處理；

（2）云計算的優(yōu)勢

? ? ? ? 企業(yè)不需要自建IT基礎(chǔ)設(shè)施，可以直接租用云端資源。

（3）云計算的三種模式

? ? ? ? ①公有云（面向全部用戶）；

? ? ? ? ②私有云（面向企業(yè)內(nèi)部）；

? ? ? ? ③混合云（部分自己用，部分外界用）；

? ? ? ? 模式圖：

（4）云服務(wù)的三種類型?

? ? ? ? ①SaaS（面向用戶）；

? ? ? ? ②PaaS（面向應(yīng)用開發(fā)者）；

? ? ? ? ③IaaS（面向網(wǎng)絡(luò)架構(gòu)師）；

? ? ? ? 類型圖：

（5）云計算的關(guān)鍵技術(shù)

? ? ? ? ①虛擬化；

? ? ? ? ②分布式存儲；

? ? ? ? ③分布式計算；

? ? ? ? ④多租戶；

4、物聯(lián)網(wǎng)

（1）物聯(lián)網(wǎng)的概念定義

? ? ? ? 物物相連，互聯(lián)網(wǎng)的延伸：

?

總結(jié)

以上是生活随笔為你收集整理的大数据技术原理与应用----大数据概述的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。