使用阿里云极速型NAS构建高可用的GitLab
使用阿里云文件存儲(chǔ)NAS構(gòu)建GitLab高可用環(huán)境
GitLab簡(jiǎn)介
GitLab是一個(gè)利用 Ruby on Rails 開發(fā)的開源應(yīng)用程序,實(shí)現(xiàn)一個(gè)自托管的Git項(xiàng)目倉(cāng)庫(kù),可通過Web界面進(jìn)行訪問公開的或者私人項(xiàng)目。Ruby on Rails 是一個(gè)可以使你開發(fā)、部署、維護(hù) web 應(yīng)用程序變得簡(jiǎn)單的框架。GitLab擁有與Github類似的功能,能夠?yàn)g覽源代碼,管理缺陷和注釋。可以管理團(tuán)隊(duì)對(duì)倉(cāng)庫(kù)的訪問,它非常易于瀏覽提交過的版本并提供一個(gè)文件歷史庫(kù)。它還提供一個(gè)代碼片段收集功能可以輕松實(shí)現(xiàn)代碼復(fù)用,便于日后有需要的時(shí)候進(jìn)行查找。
由于Git的分布式特性,即使Gitlab不可用,開發(fā)人員仍然可以在本地提交代碼。但是,某些Gitlab功能,比如CI,問題跟蹤和持續(xù)集成會(huì)不可用,也會(huì)嚴(yán)重影響線上使用。因此高可用架構(gòu)還是不可缺少的。GitLab軟件架構(gòu)如下圖所示:
GitLab高可用設(shè)計(jì)
主備模式:啟動(dòng)2個(gè)實(shí)例,只有一個(gè)工作提供服務(wù),數(shù)據(jù)通過分布式存儲(chǔ)保持一致
主主模式(scales):Rails server啟動(dòng)多個(gè),同時(shí)提供服務(wù),數(shù)據(jù)庫(kù)保持獨(dú)立,數(shù)據(jù)通過NAS文件存儲(chǔ)共享
GitLab高可用方案
水平擴(kuò)展
這種架構(gòu)適用于許多Gitlab客戶訪問的使用場(chǎng)景,解決高API使用率,大量排隊(duì)的Sidekiq作業(yè)的問題。
- 3 PostgreSQL nodes
- 2 Redis nodes
- 3 Consul/Sentinel nodes
- 2 or more GitLab application nodes (Unicorn, Workhorse, Sidekiq, PGBouncer)
- 1 NFS/Gitaly server
混合擴(kuò)展
這種架構(gòu)通過組件在專用節(jié)點(diǎn)上分離,提供高資源使各組件不會(huì)相互干擾,解決服務(wù)爭(zhēng)用/高負(fù)載的問題。
- 3 PostgreSQL nodes
- 1 PgBouncer node
- 2 Redis nodes
- 3 Consul/Sentinel nodes
- 2 or more Sidekiq nodes
- 2 or more GitLab application nodes (Unicorn, Workhorse)
- 1 or more NFS/Gitaly servers
- 1 Monitoring node (Prometheus, Grafana)
全分布式擴(kuò)展
該體系結(jié)構(gòu)可擴(kuò)展到數(shù)十萬用戶和項(xiàng)目,是GitLab.com體系結(jié)構(gòu)的基礎(chǔ)。 雖然分布式架構(gòu)可以很好地?cái)U(kuò)展,但它增加了節(jié)點(diǎn)的復(fù)雜性,配置,管理和監(jiān)控的難度,不易維護(hù)。
- 3 PostgreSQL nodes
- 4 or more Redis nodes (2 separate clusters for persistent and cache data)
- 3 Consul nodes
- 3 Sentinel nodes
Multiple dedicated Sidekiq nodes (Split into real-time, best effort, ASAP, CI Pipeline and Pull Mirror sets) - 2 or more Git nodes (Git over SSH/Git over HTTP)
- 2 or more API nodes (All requests to /api)
- 2 or more Web nodes (All other web requests)
- 2 or more NFS/Gitaly servers
阿里云文件存儲(chǔ)NAS選型
GitLab場(chǎng)景通常為海量小文件場(chǎng)景,需要并發(fā)的進(jìn)行文件的讀寫操作。該種場(chǎng)景適用于極速型NAS。該種NAS后端基于RDMA網(wǎng)絡(luò)進(jìn)行時(shí)延優(yōu)化,對(duì)于元數(shù)據(jù)操作密集型的業(yè)務(wù)有很高的OPS和較低的訪問時(shí)延。
原文鏈接
本文為云棲社區(qū)原創(chuàng)內(nèi)容,未經(jīng)允許不得轉(zhuǎn)載。
總結(jié)
以上是生活随笔為你收集整理的使用阿里云极速型NAS构建高可用的GitLab的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 应用实时监控 ARMS 上线用户行为回溯
- 下一篇: 高德JS依赖分析工程及关键原理