clickhouse 分片
我們知道m(xù)ysql數(shù)據(jù)庫如果想做分片,需要使用第三方組件,這是因?yàn)閙ysql在設(shè)計(jì)之初就沒有太多考慮分布式等問題。而clickhouse作為新生代性能之王,分片也是必須的功能。基本上從2015年之后的各種數(shù)據(jù)庫也罷,框架也罷,都開始支持分布式功能了,其實(shí)功能實(shí)現(xiàn)不是很難,只不過如果這些數(shù)據(jù)庫自己支持分布式的話,對(duì)于開發(fā)者就會(huì)少很多事情。
今天我們簡(jiǎn)單講下clickhouse的分片。其實(shí)也就是一個(gè)視圖聚合的功能。clickhouse可以支持讀取每個(gè)分片上的內(nèi)容的集合。寫到哪個(gè)分片,可以自己實(shí)現(xiàn),都是很簡(jiǎn)單的邏輯。
其實(shí)就是用到一個(gè)引擎,叫Distributed。
Distributed引擎的官網(wǎng)介紹
兩臺(tái)機(jī)器上,分別建表:response_event
在一臺(tái)機(jī)器上,新建視圖(引擎為Distributed的表)
名字一般是表名_all,比如response_event_all
java_cluster是所有分片標(biāo)簽的父標(biāo)簽名字,自定義的,在配置文件中配置。
讀:
這樣的話,從response_event_all中讀到的數(shù)據(jù)就是兩個(gè)機(jī)器的數(shù)據(jù)的集合。
寫:
1、可以直接寫視圖表,這個(gè)就和mysql分片一樣了。
2、可以在代碼中實(shí)現(xiàn)雙寫,選中表的一個(gè)字段作為分片的片鍵,然后hash取值確定寫到哪個(gè)機(jī)器上,然后獲取那臺(tái)機(jī)器的connection即可。
有時(shí)間把代碼貼上去。
備份
上面這種配置,就是都是兩個(gè)機(jī)器都是沒有備份的。
想要備份,可以配置,每臺(tái)機(jī)器的表的引擎換一下,換一個(gè)引擎,一般都是在原引擎上加Replicate。
再配和配置文件配置,一般9000端口是給主用的,9001,9002等是給從用的。
總結(jié)
以上是生活随笔為你收集整理的clickhouse 分片的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: win7设置定时锁定计算机,Win7系统
- 下一篇: WKWebView概述