日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當(dāng)前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

clickhouse 分片

發(fā)布時(shí)間:2024/7/23 编程问答 44 豆豆
生活随笔 收集整理的這篇文章主要介紹了 clickhouse 分片 小編覺得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.

我們知道m(xù)ysql數(shù)據(jù)庫如果想做分片,需要使用第三方組件,這是因?yàn)閙ysql在設(shè)計(jì)之初就沒有太多考慮分布式等問題。而clickhouse作為新生代性能之王,分片也是必須的功能。基本上從2015年之后的各種數(shù)據(jù)庫也罷,框架也罷,都開始支持分布式功能了,其實(shí)功能實(shí)現(xiàn)不是很難,只不過如果這些數(shù)據(jù)庫自己支持分布式的話,對(duì)于開發(fā)者就會(huì)少很多事情。

今天我們簡(jiǎn)單講下clickhouse的分片。其實(shí)也就是一個(gè)視圖聚合的功能。clickhouse可以支持讀取每個(gè)分片上的內(nèi)容的集合。寫到哪個(gè)分片,可以自己實(shí)現(xiàn),都是很簡(jiǎn)單的邏輯。

其實(shí)就是用到一個(gè)引擎,叫Distributed。
Distributed引擎的官網(wǎng)介紹

兩臺(tái)機(jī)器上,分別建表:response_event

在一臺(tái)機(jī)器上,新建視圖(引擎為Distributed的表)
名字一般是表名_all,比如response_event_all

CREATE TABLE response_event_all AS response_event ENGINE = Distributed(java_cluster, default, response_event, rand())

java_cluster是所有分片標(biāo)簽的父標(biāo)簽名字,自定義的,在配置文件中配置。

讀:

這樣的話,從response_event_all中讀到的數(shù)據(jù)就是兩個(gè)機(jī)器的數(shù)據(jù)的集合。

寫:

1、可以直接寫視圖表,這個(gè)就和mysql分片一樣了。
2、可以在代碼中實(shí)現(xiàn)雙寫,選中表的一個(gè)字段作為分片的片鍵,然后hash取值確定寫到哪個(gè)機(jī)器上,然后獲取那臺(tái)機(jī)器的connection即可。
有時(shí)間把代碼貼上去。

備份

上面這種配置,就是都是兩個(gè)機(jī)器都是沒有備份的。
想要備份,可以配置,每臺(tái)機(jī)器的表的引擎換一下,換一個(gè)引擎,一般都是在原引擎上加Replicate。
再配和配置文件配置,一般9000端口是給主用的,9001,9002等是給從用的。

總結(jié)

以上是生活随笔為你收集整理的clickhouse 分片的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò),歡迎將生活随笔推薦給好友。