時間序列數(shù)據(jù)庫，簡稱時序數(shù)據(jù)庫，Time Series?Database，一個全新的領(lǐng)域，最大的特點(diǎn)就是每個條數(shù)據(jù)都帶有Time列。

時序數(shù)據(jù)庫到底能用到什么業(yè)務(wù)場景，答案是：監(jiān)控系統(tǒng)。

Baidu一下，互聯(lián)網(wǎng)監(jiān)控系統(tǒng)，大家會發(fā)現(xiàn)小米、餓了嗎等互聯(lián)網(wǎng)巨頭都在用時序數(shù)據(jù)庫實(shí)現(xiàn)企業(yè)級的互聯(lián)網(wǎng)監(jiān)控系統(tǒng)。

很多人會說，用Zabbix不就搞定了，其實(shí)不是這樣的，簡單的主機(jī)資源監(jiān)控、網(wǎng)絡(luò)監(jiān)控、小規(guī)模的部署環(huán)境，Zabbix能搞定。

如果在IDC 上千臺服務(wù)器環(huán)境下，分布式應(yīng)用架構(gòu)、各種中間件，這種情況下我們要監(jiān)控上千臺服務(wù)的主機(jī)資源、網(wǎng)絡(luò)、按不同緯度監(jiān)控服務(wù)的性能、TPS，監(jiān)控各類中間件，程序監(jiān)控埋點(diǎn)。Zabbix就無法

滿足需要了。此時，我們要獨(dú)立搭建自己的監(jiān)控體系了。說到這，每一個監(jiān)控圖表的背后，都有什么？

1. 時間軸

2. 數(shù)據(jù)值（不同指標(biāo)緯度）

例如，一段時間內(nèi)CPU使用率

這時，各種Google、Baidu之后，你肯定會搜索到Influxdb、OpenTSDB等時序數(shù)據(jù)庫。

Influxdb我們研究了很長的時間，準(zhǔn)備用2篇文章，推薦給大家，本文中，我們分享一下Influxdb的關(guān)鍵特性、查詢語法和使用場景。

一、Influxdb關(guān)鍵特性

1. 支持類似SQL的查詢語法

2.提供了Http Api直接訪問

3.存儲超過10億級別的時間序列數(shù)據(jù)

4.靈活的數(shù)據(jù)保留策略，可以定義到Database級別（只保留最熱的數(shù)據(jù)）

5.內(nèi)置管理接口和CMD

6.飛一般速度的聚合查詢

7.按不同時間段進(jìn)行聚合查詢

8.內(nèi)置持續(xù)查詢功能，定時計(jì)算指定時間段的數(shù)據(jù)，插入到指定表中，可以理解為定時歸集數(shù)據(jù)

9. 水平擴(kuò)展，支持集群模式

二、Influxdb 版本和.Net支持

1. 根據(jù)我們的使用經(jīng)驗(yàn)，V0.10版本是非常穩(wěn)定的，V0.9.6我們用過，有內(nèi)存泄漏問題

2. GitHub上有非常多的.Net Libraby,方便我們寫入和讀取數(shù)據(jù)

三、數(shù)據(jù)寫入Write Data（Points）

Http API:
curl -i -XPOST 'http://localhost:8086/write?db=mydb' --data-binary 'cpu_load,host=server01,region=us-west value=0.64 1434055562000000000‘
db：mydb, 要寫入的數(shù)據(jù)庫
measurement：cpu_load，表
tag keys：host? region? tag value：server01 us-west
tag標(biāo)簽可以理解為維度，可選參數(shù)，用于標(biāo)識不同的數(shù)據(jù)源，基于tag使查詢更加簡單和高效
?Tags are indexed so queries on tag keys or tag values are more performant than queries on fields.
key field：value? value field：0.64
Timestamp：1434055562000000000 可選參數(shù)、UTC

支持批量寫入
支持同一個Timestamp寫入不同的數(shù)據(jù)
Influxdb 支持存儲結(jié)構(gòu)靈活變化，可以在任意增加measure、tags、fields，但是每個tag、field的數(shù)據(jù)類型必須固定。

四、查詢Query

Http API:
curl -G 'http://localhost:8086/query?pretty=true' --data-urlencode "db=mydb" --data-urlencode "q=SELECT value FROM cpu_load_short WHERE region='us-west‘
返回JSON格式數(shù)據(jù)
支持同時多個Query SQL
查詢最大返回10000個點(diǎn)的數(shù)據(jù)，如果超過閾值，可以設(shè)置chunk_size
Measurement、Tag、Field、數(shù)據(jù)等大小寫敏感，SQL關(guān)鍵字不區(qū)分大小寫

支持算術(shù)計(jì)算:
SELECT (water_level * 2) + 4 from h2o_feet
支持對Tags進(jìn)行過濾查詢，條件必須使用單引號
SELECT water_level FROM h2o_feet WHERE location = 'santa_monica'
Tag value 為空、不為空過濾
SELECT * FROM h2o_feet WHERE location !~ /.*/
SELECT * FROM h2o_feet WHERE location =~ /.*/
時間范圍過濾
SELECT * FROM h2o_feet WHERE time > now() - 7d
Field value過濾
SELECT * FROM h2o_feet WHERE location = 'coyote_creek' AND? water_level > 8

聚合函數(shù)、選擇函數(shù)、轉(zhuǎn)換函數(shù)

五、持續(xù)查詢（Continuous Queries）

持續(xù)查詢是Influxdb自動、周期的運(yùn)行的查詢，結(jié)果自動存儲

設(shè)計(jì)持續(xù)查詢的目的是為了規(guī)則采樣數(shù)據(jù)，比如按天、按月采樣數(shù)據(jù)

CREATE CONTINUOUS QUERY <cq_name> ON <database_name> [RESAMPLE [EVERY <interval>] [FOR <interval>]] BEGIN SELECT <function>(<stuff>)[,<function>(<stuff>)] INTO <different_measurement> FROM <current_measurement> [WHERE <stuff>] GROUP BY time(<interval>)[,<stuff>] END

六、 監(jiān)控應(yīng)用場景

通過上面幾個部分的介紹，Influxdb的基本語法就可以掌握了。有什么作用：

1. 實(shí)時采集監(jiān)控?cái)?shù)據(jù)，按時間寫入Influxdb

2. 按不同緯度聚合查詢監(jiān)控?cái)?shù)據(jù)，用于監(jiān)控展現(xiàn)

3. 持續(xù)查詢，定時歸集指定時間的數(shù)據(jù)，用于更大時間范圍監(jiān)控?cái)?shù)據(jù)的展現(xiàn)

總結(jié)一下，場景結(jié)合實(shí)踐，通過實(shí)際監(jiān)控系統(tǒng)的應(yīng)用，和大家分享了Influxdb的使用和技能。我們自己的監(jiān)控系統(tǒng)就是通過這個套路一點(diǎn)點(diǎn)搭建起來的。

目前，我們的監(jiān)控平臺，2500個監(jiān)控項(xiàng)，500臺服務(wù)器實(shí)時監(jiān)控，每日處理上T數(shù)據(jù)，幾百個監(jiān)控圖表，Influxdb滿足了我們?nèi)粘３笠?guī)模監(jiān)控的需要。

同時，Influxdb在大數(shù)據(jù)展現(xiàn)領(lǐng)域，也有不俗的表現(xiàn)，Druid的集成也很棒的。

原文地址：http://www.cnblogs.com/tianqing/p/7152940.html

---

.NET社區(qū)新聞，深度好文，微信中搜索dotNET跨平臺或掃描二維碼關(guān)注

總結(jié)

以上是生活随笔為你收集整理的互联网级监控系统必备-时序数据库之Influxdb技术的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。