Spring Cloud Finchley.SR1 的學習與應用 10 - 分佈式鏈路跟蹤 Sleuth 與 Zipkin

分佈式鏈路跟蹤 Sleuth 與 Zipkin

隨着業務發展,系統拆分致使系統調用鏈路愈發複雜一個前端請求可能最終須要調用不少次後端服務才能完成,當整個請求變慢或不可用時,咱們是沒法得知該請求是由某個或某些後端服務引發的,這時就須要解決如何快讀定位服務故障點,以對症下藥。因而就有了分佈式系統調用跟蹤的誕生。
Spring Cloud Sleuth 也爲咱們提供了一套完整的解決方案。在本章中,咱們將詳細介紹如何使用 Spring Cloud Sleuth + Zipkin 來爲咱們的微服務架構增長分佈式服務跟蹤的能力。前端

Spring Cloud Sleuth

通常的,一個分佈式服務跟蹤系統主要由三部分構成:java

  • 數據收集
  • 數據存儲
  • 數據展現

根據系統大小不一樣,每一部分的結構又有必定變化。譬如,對於大規模分佈式系統,數據存儲可分爲實時數據和全量數據兩部分,實時數據用於故障排查(Trouble Shooting),全量數據用於系統優化;數據收集除了支持平臺無關和開發語言無關係統的數據收集,還包括異步數據收集(須要跟蹤隊列中的消息,保證調用的連貫性),以及確保更小的侵入性;數據展現又涉及到數據挖掘和分析。雖然每一部分均可能變得很複雜,但基本原理都相似。 Hystrix Dashboard
服務追蹤的追蹤單元是從客戶發起請求(request)抵達被追蹤系統的邊界開始,到被追蹤系統向客戶返回響應(response)爲止的過程,稱爲一個 trace。每一個 trace 中會調用若干個服務,爲了記錄調用了哪些服務,以及每次調用的消耗時間等信息,在每次調用服務時,埋入一個調用記錄,稱爲一個 span。這樣,若干個有序的 span 就組成了一個 trace。在系統向外界提供服務的過程當中,會不斷地有請求和響應發生,也就會不斷生成 trace,把這些帶有 span 的 trace 記錄下來,就能夠描繪出一幅系統的服務拓撲圖。附帶上 span 中的響應時間,以及請求成功與否等信息,就能夠在發生問題的時候,找到異常的服務;根據歷史數據,還能夠從系統總體層面分析出哪裏性能差,定位性能優化的目標。git

Spring Cloud Sleuth 爲服務之間調用提供鏈路追蹤。經過 Sleuth 能夠很清楚的瞭解到一個服務請求通過了哪些服務,每一個服務處理花費了多長。從而讓咱們能夠很方便的理清各微服務間的調用關係。此外 Sleuth 能夠幫助咱們:github

  • 耗時分析: 經過 Sleuth 能夠很方便的瞭解到每一個採樣請求的耗時,從而分析出哪些服務調用比較耗時;
  • 可視化錯誤: 對於程序未捕捉的異常,能夠經過集成 Zipkin 服務界面上看到;
  • 鏈路優化: 對於調用比較頻繁的服務,能夠針對這些服務實施一些優化措施。 Spring Cloud Sleuth 能夠結合 Zipkin,將信息發送到 Zipkin,利用 Zipkin 的存儲來存儲信息,利用 Zipkin UI 來展現數據。

這是 Spring Cloud Sleuth 的概念圖:
Hystrix Dashboardweb

Zipkin

Zipkin 是 Twitter 的一個開源項目,它基於 Google Dapper 實現,它致力於收集服務的定時數據,以解決微服務架構中的延遲問題,包括數據的收集、存儲、查找和展示。 咱們可使用它來收集各個服務器上請求鏈路的跟蹤數據,並經過它提供的 REST API 接口來輔助咱們查詢跟蹤數據以實現對分佈式系統的監控程序,從而及時地發現系統中出現的延遲升高問題並找出系統性能瓶頸的根源。除了面向開發的 API 接口以外,它也提供了方便的 UI 組件來幫助咱們直觀的搜索跟蹤信息和分析請求鏈路明細,好比:能夠查詢某段時間內各用戶請求的處理時間等。 Zipkin 提供了可插拔數據存儲方式:In-Memory、MySql、Cassandra 以及 Elasticsearch。接下來的測試爲方便直接採用 In-Memory 方式進行存儲,生產推薦 Elasticsearch。
Hystrix Dashboard
上圖展現了 Zipkin 的基礎架構,它主要由 4 個核心組件構成:算法

  • Collector:收集器組件,它主要用於處理從外部系統發送過來的跟蹤信息,將這些信息轉換爲 Zipkin 內部處理的 Span 格式,以支持後續的存儲、分析、展現等功能。
  • Storage:存儲組件,它主要對處理收集器接收到的跟蹤信息,默認會將這些信息存儲在內存中,咱們也能夠修改此存儲策略,經過使用其餘存儲組件將跟蹤信息存儲到數據庫中。
  • RESTful API:API 組件,它主要用來提供外部訪問接口。好比給客戶端展現跟蹤信息,或是外接系統訪問以實現監控等。
  • Web UI:UI 組件,基於 API 組件實現的上層應用。經過 UI 組件用戶能夠方便而有直觀地查詢和分析跟蹤信息。

開始整合

Zipkin 分爲兩端,一個是 Zipkin 服務端,一個是 Zipkin 客戶端,客戶端也就是微服務的應用。 客戶端會配置服務端的 URL 地址,一旦發生服務間的調用的時候,會被配置在微服務裏面的 Sleuth 的監聽器監聽,並生成相應的 Trace 和 Span 信息發送給服務端。 發送的方式主要有兩種,一種是 HTTP 報文的方式,還有一種是消息總線的方式如 RabbitMQ。spring

不論哪一種方式,咱們都須要:docker

  • 一個服務註冊中心,這裏咱們就用以前的consul項目來當註冊中心。
  • 一個 Zipkin 服務端。
  • 兩個微服務應用,server-businessa-woqu和server-businessb-woqu,其中server-businessb-woqu中有一個 REST 接口/area?length=1&width=2&heigh=3,調用該接口後將觸發對server-businessa-woqu應用的調用。

HTTP

在 Spring Cloud Sleuth 中對 Zipkin 的整合進行了自動化配置的封裝,因此咱們能夠很輕鬆的引入和使用它。shell

Zipkin 服務端

關於 Zipkin 的服務端,在使用 Spring Boot 2.x 版本後,官方就不推薦自行定製編譯了,反而是直接提供了編譯好的 jar 包來給咱們使用,請看詳情。而且之前的@EnableZipkinServer也已經被打上了@Deprecated數據庫

因此官方提供了一鍵腳本

curl -sSL https://zipkin.io/quickstart.sh | bash -s
java -jar zipkin.jar

若是用 Docker 的話,直接

docker run -d -p 9411:9411 openzipkin/zipkin

任一方式啓動後,訪問 http://localhost:9411/zipkin/ 就能看到以下界面
Hystrix Dashboard

更多關於zipkin server的信息請看zipkin-server

微服務應用端

  • POM
    在server-businessa-woqu和server-businessb-woqu的pom.xml文件中增長如下依賴:
<dependency>
            <groupId>org.springframework.cloud</groupId>
            <artifactId>spring-cloud-starter-sleuth</artifactId>
        </dependency>
        <dependency>
            <groupId>org.springframework.cloud</groupId>
            <artifactId>spring-cloud-starter-zipkin</artifactId>
        </dependency>
  • 配置文件
    在server-businessa-woqu和server-businessb-woqu的配置文件 中增長如下內容:
spring:
  zipkin:
    base-url: http://zipkin.server:9411/ # 指定了 Zipkin 服務器的地址
  sleuth:
    sampler:
      probability: 1.0 # 將採樣比例設置爲 1.0,也就是所有都須要。默認是 0.1
    web:
      client:
        enabled: true

Spring Cloud Sleuth 有一個 Sampler 策略,能夠經過這個實現類來控制採樣算法。採樣器不會阻礙 span 相關 id 的產生,可是會對導出以及附加事件標籤的相關操做形成影響。 Sleuth 默認採樣算法的實現是 Reservoir sampling,具體的實現類是 PercentageBasedSampler,默認的採樣比例爲: 0.1(即 10%)。不過咱們能夠經過spring.sleuth.sampler.percentage來設置,所設置的值介於 0.0 到 1.0 之間,1.0 則表示所有采集。

  • 測試驗證

請求GET http://192.168.2.102:9002/area?length=1&width=2&heigh=3

訪問 http://localhost:9411/zipkin 點擊 Find Traces 會看到有相應的記錄 Hystrix Dashboard
Hystrix Dashboard
Hystrix Dashboard

消息總線 RabbitMQ

經過zipkin server的配置信息zipkin-server,咱們能夠經過環境變量讓 Zipkin 從 RabbitMQ 中讀取信息,就像這樣:

RABBIT_ADDRESSES=rabbitmq.server java -jar zipkin.jar

關於 Zipkin 的 Client 端,也就是微服務應用,咱們就在以前 server-businessa-woqu和server-businessb-woqu 的基礎上修改,只要在他們的依賴裏都引入spring-cloud-stream-binder-rabbit就行了,別的不用改,固然rabbit的配置信息要有。

<dependency>
    <groupId>org.springframework.cloud</groupId>
    <artifactId>spring-cloud-stream-binder-rabbit</artifactId>
</dependency>

相關建議

在生產環境中,因爲請求量比較大,採樣比例須要按照實際請看設置,同時建議在生產環境中使用MQ來收集信息,利用MQ的削峯能力來避免服務器壓力過大,同時建議使用Elasticsearch來存儲數據Elasticsearch Storage參考

若是你的系統中使用了Kubernetes,那強烈建議結合Istio來進行基於容器的全面服務監控。

相關文章
相關標籤/搜索