花了一个月时间梳理了一下公司的微服务核心架构，原来也不是太难...
作者：tengshe789
鏈接：https://urlify.cn/zYJzee
在公司學習了接近一個月。
一個月內，從0開始開始接觸分布式微服務架構，給了我不小的收獲。今天，我來從頭到尾梳理一下，有關微服務架構的核心內容（全是干貨）。
下文，你將看到業界主流微服務框架的核心原理，包括服務發現，網關，配置中心，監控等組件，功能和架構原理的簡單介紹。感謝閱讀！????
# Hello，Microservices
什么是微服務
微服務Microservices之父，馬丁.福勒，對微服務大概的概述如下：
就目前而言，對于微服務業界并沒有一個統一的、標準的定義（While there is no precise definition of this architectural style ) 。但通在其常而言，微服務架構是一種架構模式或者說是一種架構風格，它提倡將單一應用程序劃分成一組小的服務，每個服務運行獨立的自己的進程中，服務之間互相協調、互相配合，為用戶提供最終價值。服務之間采用輕量級的通信機制互相溝通（通常是基于 HTTP 的 RESTful API ) 。每個服務都圍繞著具體業務進行構建，并且能夠被獨立地部署到生產環境、類生產環境等。另外，應盡量避免統一的、集中式的服務管理機制，對具體的一個服務而言，應根據業務上下文，選擇合適的語言、工具對其進行構建，可以有一個非常輕量級的集中式管理來協調這些服務?？梢允褂貌煌恼Z言來編寫服務，也可以使用不同的數據存儲。
根據馬丁.福勒的描述，我總結了一下幾點：
小服務
小服務，沒有特定的標準或者規范，但他在總體規范上一定是小的。
進程獨立
每一組服務都是獨立運行的，可能我這個服務運行在tomcat容器，而另一個服務運行在jetty上?？梢酝ㄟ^進程方式，不斷的橫向擴展整個服務。
通信
過去的協議都是很重的，就像ESB，就像SOAP，輕通信，著意味著相比過去更智能更輕量的服務相互調用，就所謂smart endpoints and dumb pipes，這些endpoint都是解耦的，完成一個業務通信調用串起這些micro service就像是linux系統中通過管道串起一系列命令業務。
過去的業務，我們通常會考慮各種各樣的依賴關系，考慮系統耦合帶來的問題。微服務，可以讓開發者更專注于業務的邏輯開發。
部署
不止業務要獨立，部署也要獨立。不過這也意味著，傳統的開發流程會出現一定程度的改變，開發的適合也要有一定的運維指責
管理
傳統的企業級SOA服務往往很大，不易于管理，耦合性高，團隊開發成本比較大。微服務，可以讓團隊各思其政的選擇技術實現，不同的service可以根據各自的需要選擇不同的技術棧來實現其業務邏輯。
# 微服務的利與弊
為什么用微服務呢？因為好玩？
不是的。下面是我從網絡上找到說的比較全的優點：
優點每個服務足夠內聚，足夠小，代碼容易理解這樣能聚焦一個指定的業務功能或業務需求
開發簡單、開發效率提高，一個服務可能就是專一的只干一件事。
微服務能夠被小團隊單獨開發，這個小團隊是 2 到 5 人的開發人員組成。
微服務是松藕合的，是有功能意義的服務，無論是在開發階段或部署階段都是獨立的。
微服務能使用不同的語言開發。
易于和第三方集成，微服務允許容易且靈活的方式集成自動部署，通過持續集成工具，如Jenkins,Hudson,bamboo。
微服務易于被一個開發人員理解，修改和維護，這樣小團隊能夠更關注自己的工作成果。無需- - 通過合作才能體現價值。微服務允許你利用融合最新技術。
微服務只是業務邏輯的代碼，不會和 HTML,CSS或其他界面組件混合。
每個微服務都有自己的存儲能力，可以有自己的數據庫。也可以有統一數據庫。
總的來說，微服務的優勢，就是在于，面對大的系統，可以有效的減少復雜程度，使服務架構的邏輯更清晰明了。
但是這樣也會帶來很多問題，就譬如分布式環境下的數據一致性，測試的復雜性，運維的復雜性。
# 什么組織適合使用微服務？
微服務帶了種種優點，種種弊端，那么什么組織適合使用微服務？
墨菲定律（設計系統）和康威定律（系統劃分）
康威定律，是一個五十多年前就被提出來的微服務概念。在康威的這篇文章中，最有名的一句話就是：
Organizations which design systems are constrained to produce designs which are copies of the communication structures of these organizations. - Melvin Conway(1967)
中文直譯大概的意思就是：設計系統的組織，其產生的設計等同于組織之內、組織之間的溝通結構?？纯聪旅娴膱D片（來源于互聯網，侵刪），再想想Apple的產品、微軟的產品設計，就能形象生動的理解這句話。
感興趣的各位可以研究一下
# 架構演化
架構是不斷演化出來的，微服務也是這樣，當從各大科技公司，規模大到一定程度，完全需要演化成更進一步管理的技術架構體系。
傳統的團隊，都是面向過程化的，產品想完了去找策劃，策劃完了找開發，接著順著一步一步找。我們做技術都是為了產品的，一旦過程出來了什么問題，回溯尋找問題會非常耗時。
使用了微服務架構體系，團隊組織方式需要轉變成跨職能團隊，即每個團隊都有產品專家，策劃專家，開發專家，運維專家，他們使用API方式發布他們的功能，而平臺使用他們的功能發布產品
# 微服務技術架構體系
下面我分享一下大部分公司都使用的微服務技術架構體系。
服務發現
主流的服務發現，分為三種
第一種，開發人員開發了程序以后，會找運維配一個域名，服務的話通過dns就能找到我們對應的服務
缺點是，由于服務沒有負載均衡功能，對負載均衡服務，可能會有相當大的性能問題。
第二種，是目前普遍的做法?？梢詤⒖嘉疑掀┛头治龅膠uul網關，每一個服務都通過服務端內置的功能注冊到注冊中心，服務消費者不斷輪詢注冊中心發現對應的服務，使用內置負載均衡調用服務。
缺點是，對多語言環境不是很好，你需要單獨給消費者的客戶端開發服務發現和負載均衡功能。當然了，這個方法通常都是用在spring cloud上的。
第三種，是將客戶端和負載均衡放在同一個主機，而不是同一個進程內。
這種方法相對第一種第二種方法來說，改善了他們的缺點，但是會極大增加運維成本。
網關
1. 微服務的網關是什么？
我們可以聯系生活實際想一下。每一個大的公司，都會有一偏屬于自己的建筑區，而這建筑區內，都有不少的門衛。如果有外來人員進入公司，會先和門衛打好招呼，才能進去。
將生活實際聯系到微服務上，就不難理解網關的意思了。
2. 網關有什么用
反向路由：很多時候，公司不想讓外部人員看到我們公司的內部，就需要網關來進行反向路由。即將外部請求轉換成內部具體服務條用
安全認證：網絡中會有很多惡意訪問，譬如爬蟲，譬如黑客攻擊，網關維護安全功能。
限流熔斷：參考我學好分布式zookepper的博客，當請求很多服務不堪重負，會讓我們的服務自動關閉，導致不能用服務。限流熔斷可以有效的避免這類問題
日志監控：所有的外面的請求都會經過網關，這樣我們就可以使用網關來記錄日志信息
灰度發布，藍綠部署。是指能夠平滑過渡的一種發布方式。在其上可以進行A/B testing，即讓一部分用戶繼續用產品特性A，一部分用戶開始用產品特性B，如果用戶對B沒有什么反對意見，那么逐步擴大范圍，把所有用戶都遷移到B上面來。
3. 開源網關Zuul架構
zuul網關核心其實是一個servlet，所有請求都會經過zuul servlet傳到zuulFilter Runner，然后分發到三種過濾器。
先說說架構圖左半部分，分別是使用Groovy實現的前置路由過濾器，路由過濾器，后置路由過濾器。
一般請求都會先經過前置路由過濾器處理，一般的自定義java封裝邏輯也會在這里實現。
路由過濾器，實現的是找到對應的微服務進行調用。
調用完了，響應回來，會經過后置路由過濾器，通過后置路由過濾器我們可以封裝日志審計的處理。
可以說zuul網關最大的特色就是它三層過濾器。
架構圖右半部分，是zuul網關設計的自定義過濾器加載機制。網關內部會有生產者消費者模型，自動的將過濾器腳本發布到zuul網關讀取加載運行。
配置中心
以前，開發人員把配置文件放在開發文件里面，這樣會有很多隱患。譬如，配置規范不同，無法追溯配置人員。一旦需要大規模改動配置，改動時間會很長，無法追溯配置人員，從而影響整個產品，后果是我們承擔不起的。
因此就有配置中心這個嘍~
現在的開源中心有百度配置中心 Disconf，spring cloud config，Apollo，今天重點說說現在應用質量不錯的配置中心阿波羅。
攜程開源的Apollo：
開源地址????：github.com/ctripcorp/a…
apollo的配置中心規模比較大，本地應用會有響應的配置中心客戶端，可以定時同步配置中心里的配置。如果配置中心怠機，會使用緩存來進行配置。
通訊方式
關于通訊方式，一般市面也就是兩種遠程調用方式，我整理了一個表格：
| RPC | REST | |
耦合性 | 強耦合 | 松散耦合 |
消息協議 | TCP | HTTP |
通訊協議 | 二進制 | 文本XML，Json |
性能 | 高 | 低于RPC |
接口契約IDL | thrift,protobuf,IdL | Swagger |
客戶端 | 強類型客戶端，一般自動生成 | 一般HTTP可訪問，生成強類型客戶端，多語言支持好 |
案例 | Dubbo，Dubbox,motan,tars,grpc,thrift | spring boot,tax-rs,dropwizard |
開發者友好 | 客戶端比較方面，二進制消息不能讀 | 可讀消息 |
對外開放 | 一般需要轉成REST/文本協議 | 可直接對外開發 |
監控預警
監控預警對于微服務很重要，一個可靠的監控預警體系對微服務運行至關重要。一般監控分為如下層次：
從基礎設施到用戶端，層層有監控，全方位，多角度，每一個層面都很重要?？傮w來說，微服務可分5個監控點：日志監控，Metrics監控，健康檢查，調用鏈檢查，告警系統
監控架構
下面的圖是大部分公司的一種監控架構圖。每一個服務都有一個agent，agent收集到關鍵信息，會傳到一些MQ中，為了解耦。同時將日志傳入ELK，將Metrics傳入InfluxDB時間序列庫。而像nagios，可以定期向agent發起信息檢查微服務。
調用鏈監控APM
很多公司都有調用鏈監控，就譬如阿里有鷹眼監控，點評的Cat，大部分調用鏈監控（沒錯，我指的Zipkin）架構是這樣的????
當請求進入Web容器的時候，會經過創建Tracer，連接spans（模擬潛在的分布式工作的延遲，該模塊還包含在系統網絡間傳遞跟蹤上下文信息的工具包，如通過http headers）。Spans有一個上下文，其中包含tracer標識符，將其放在表示分布式操作的樹的正確位置。當我們把圖中的各種span放到后端的時候，我們的服務調用鏈會動態的生成調用鏈。
下面是一些市場上用的比較多的調用鏈監控：
1、Pinpointgithub地址：GitHub - naver/pinpoint: Pinpoint is an open source APM (Application Performance Management) tool for large-scale distributed systems written in Java.對java領域的性能分析有興趣的朋友都應該看看這個開源項目，這個是一個韓國團隊開源出來的，通過JavaAgent的機制來做字節碼代碼植入，實現加入traceid和抓取性能數據的目的。NewRelic、Oneapm之類的工具在java平臺上的性能分析也是類似的機制。
2、SkyWalkinggithub地址：wu-sheng/sky-walking這是國內一位叫吳晟的兄弟開源的，也是一個對JAVA分布式應用程序集群的業務運行情況進行追蹤、告警和分析的系統，在github上也有400多顆星了。功能相對pinpoint還是稍弱一些，插件還沒那么豐富，不過也很難得了。
3、Zipkin官網：OpenZipkin · A distributed tracing systemgithub地址：GitHub - openzipkin/zipkin: Zipkin is a distributed tracing system這個是twitter開源出來的，也是參考Dapper的體系來做的。
Zipkin的java應用端是通過一個叫Brave的組件來實現對應用內部的性能分析數據采集。Brave的github地址：github.com/openzipkin/…這個組件通過實現一系列的java攔截器，來做到對http/servlet請求、數據庫訪問的調用過程跟蹤。然后通過在spring之類的配置文件里加入這些攔截器，完成對java應用的性能數據采集。
4、CATgithub地址：GitHub - dianping/cat: Central Application Tracking這個是大眾點評開源出來的，實現的功能也還是蠻豐富的，國內也有一些公司在用了。不過他實現跟蹤的手段，是要在代碼里硬編碼寫一些“埋點”，也就是侵入式的。這樣做有利有弊，好處是可以在自己需要的地方加埋點，比較有針對性；壞處是必須改動現有系統，很多開發團隊不愿意。
5、Xhprof/Xhgui這兩個工具的組合，是針對PHP應用提供APM能力的工具，也是非侵入式的。Xhprof github地址：GitHub - preinheimer/xhprof: XHGUI is a GUI for the XHProf PHP extension, using a database backend, and pretty graphs to make it easy to use and interpret.Xhgui github地址：GitHub - perftools/xhgui: A graphical interface for XHProf data built on MongoDB我對PHP不熟，不過網上介紹這兩個工具的資料還是蠻多的。
熔斷、隔離、限流、降級
面對巨大的突發流量下，大型公司一般會采用一系列的熔斷（系統自動將服務關閉防止讓出現的問題最大化）、隔離（將服務和服務隔離，防止一個服務掛了其他服務不能訪問）、限流（單位時間內之允許一定數量用戶訪問）、降級（當整個微服務架構整體的負載超出了預設的上限閾值或即將到來的流量預計將會超過預設的閾值時，為了保證重要或基本的服務能正常運行，我們可以將一些 不重要或 不緊急 的服務或任務進行服務的 延遲使用 或 暫停使用）措施。
下面介紹一下hystrix的運行流程（沒找到架構圖不好意思）：
每一個微服務調用時，都會使用hystrix的command方式（上圖的左上角那個），然后使用command同步的，或者是響應式的，或者是異步的，判斷電路是否熔斷（順著圖從左往右看），
如果斷路則走降級fallback；
如果這個線閉合著，但是線程資源沒了，隊列滿了，則走限流措施（看圖的第5步）；
如果走完了，執行成功了，則走run()方法，獲取response，但是這個過程如果出錯了，則繼續走降級fallback.
同時，看圖最上面有一個后綴是health的，這是一個計算整個鏈路是否健康的組件，每一步操作都被它記錄著。
容器與服務編排引擎
從物理機到虛擬機，從虛擬機到容器；從物理集群到open stack，open stack到kubernetes；科技不斷的變化，我們的認知也沒刷新。
我們從容器開始說起，它首先是一個相對獨立的運行環境，在這一點有點類似于虛擬機，但是不像虛擬機那樣徹底。??虛擬機會將虛擬硬件、內核（即操作系統）以及用戶空間打包在新虛擬機當中，虛擬機能夠利用“虛擬機管理程序”運行在物理設備之上。虛擬機依賴于hypervisor，其通常被安裝在“裸金屬”系統硬件之上，這導致hypervisor在某些方面被認為是一種操作系統。
一旦 hypervisor安裝完成， 就可以從系統可用計算資源當中分配虛擬機實例了，每臺虛擬機都能夠獲得唯一的操作系統和負載(應用程序)。簡言之，虛擬機先需要虛擬一個物理環境，然后構建一個完整的操作系統，再搭建一層Runtime，然后供應用程序運行。
對于容器環境來說，不需要安裝主機操作系統，直接將容器層(比如LXC或libcontainer)安裝在主機操作系統(通常是Linux變種)之上。在安裝完容器層之后，就可以從系統可用計算資源當中分配容器實例了，并且企業應用可以被部署在容器當中。但是，每個容器化應用都會共享相同的操作系統(單個主機操作系統)。容器可以看成一個裝好了一組特定應用的虛擬機，它直接利用了宿主機的內核，抽象層比虛擬機更少，更加輕量化，啟動速度極快。
相比于虛擬機，容器擁有更高的資源使用效率，因為它并不需要為每個應用分配單獨的操作系統——實例規模更小、創建和遷移速度也更快。這意味相比于虛擬機，單個操作系統能夠承載更多的容器。云提供商十分熱衷于容器技術，因為在相同的硬件設備當中，可以部署數量更多的容器實例。
此外，容器易于遷移，但是只能被遷移到具有兼容操作系統內核的其他服務器當中，這樣就會給遷移選擇帶來限制。因為容器不像虛擬機那樣同樣對內核或者虛擬硬件進行打包，所以每套容器都擁有自己的隔離化用戶空間，從而使得多套容器能夠運行在同一主機系統之上。
我們可以看到全部操作系統層級的架構都可實現跨容器共享，惟一需要獨立構建的就是二進制文件與庫。正因為如此，容器才擁有極為出色的輕量化特性。
我們最常用的容器是daocker，網址如下????https://www.docker.com/
容器編排：
過去虛擬機可以通過云平臺open stack管理虛擬化，容器時代如何管理容器呢？這就要看看容器編排引擎了。
Apache mesos
mesos是基于master，slave架構，框架決定如何利用資源，master負責管理機器，slave會定期的將機器情況報告給master，master再將信息給框架。master是高可用的，因為zk，也有leader的存在。下面是架構圖????
kubernetes
kubernetes是最近十分火熱的開源容器編排引擎，具體可以參考kubernetes中文文檔
Kubernetes設計理念和功能其實就是一個類似Linux的分層架構，先說說每一個Kubernetes節點內部，kubelet管理全局全局pod，而每一個pod承載著一個或多個容器，kube-proxy負責網絡代理和負載均衡 。
Kubernetes節點外部，則是對應的控制管理服務器，負責統一管理各個節點調度分配與運行。
服務網格化
。。。
# 資料與文獻
馬丁.福勒對微服務的描述
微服務架構的理論基礎 - 康威定律
調用鏈選型之Zipkin，Pinpoint，SkyWalking，CAT
有道無術，術可成；有術無道，止于術
歡迎大家關注Java之道公眾號
好文章，我在看??
總結
以上是生活随笔為你收集整理的花了一个月时间梳理了一下公司的微服务核心架构，原来也不是太难...的全部內容，希望文章能夠幫你解決所遇到的問題。
- 上一篇： hdu 4937 Lucky Numbe
- 下一篇： hdu 2896 病毒侵袭（AC自动机）