真正建設高可用的系統還需要一整套工具體系的支撐，無錫搜索引擎推廣這套體系包括壓測體系、管控體系、監控體系、恢復體系和度量體系。 除了從觀念上重視系統研發生命周期的各個階段以外。壓測體系是測試時發現問題的重要手段。壓測除了能協助發現功能異常外，還能發現一些平時不容易發現的問題，如當系統壓力大時系統的表示情況、線上系統的容量配比是否合理、系統的容災保護是否到位等。壓測一般分為單系統壓測和全鏈路壓測，所說的壓測是線上真實生產環境的壓力測試。

 　　單系統壓測比較容易實現，有多種實現手段。種是引流的方式，就是將線上集群中的流量集中到少部分的機器上，當這些機器流量變大時就會達到瓶頸，就能得出單機的極限性能，根據單機的性能就能推算出整個集群的性能。由于是線上的真實用戶的訪問請求，這種引流的方式不會產生額外的測試數據，所以對讀、寫系統都合適。

 　　另外一種是放大流量的方式。例如通過 Tcpcopi工具可以把一個請求copi出多個重復的請求;還有一個方式是針對頁面類型這種系統，可以在頁面中注入一些請求這個頁面時，會自動向服務端額外發送一個請求，這樣可以讓用戶幫我制造流量達到壓測的目的當然這種方式會發生壓測數據，所以只適合讀系統而不適合寫系統。

 　　無錫搜索引擎推廣全鏈路壓測全鏈路壓測是目前比較好的可以制造出線上大流量的手段。優點在于能串聯線上全部系統，并讓每個系統同時達到流量峰值(尤其是公共系統)所以適用的場景更多，但實施利息相對較高。全鏈路壓測的技術難度并不大，技術手段主要有流量的制造、流量的標志、測試數據的處置，全鏈路壓測的架構。

 　　流量的制造除了要能夠控制流量大小外，還要注意流量發起所在物理網絡位置最好能保證流量是從不同的地理位置發起的流量發起端可以部署在各地的CDN節點中，并把不同的網絡運營商也考慮進來，這樣能更好地模擬真實的用戶請求。流量的標志流量制造進去以后，需要做標記，因為它屬于測試流量，數據是測試數據，不能和線上的真實數據混同。

　　標志流量有多種方式:一種是設計不同的數據，無錫搜索引擎推廣例如商品數據的商品ID都以999開頭、把訂單ID設置在某個特殊的區段內;第二種是給每個請求貼上一個tace標簽，每個系統調用的地方都能識別出這個標簽，一方面可以做一些特殊處理，如取消 token驗證，另外一方面也可以把它路由到特殊的數據表中。tac傳送是一個難題，最好的方式是通過中間件來完成:從最外面的HTP協議將tace添加在Header中，應用的RPC調用中也可以加到協議頭中，再到數據層中也一樣，最重要的要保證race標簽不能被丟掉否則將出現臟數據。

 　　測試數據的處置對測試數據的處置是最關鍵的環節，因為是線上真實生產環境的壓測，所以對產生的數據的處置不能影響線上的真實數據。對此，提出影子表的概念，和線上的真實表完全一樣，甚至和真實表一樣用在同一個數據庫實例中，通過傳送下來的tace標志把這個請求需要寫的數據路由到影子表中，這樣測試流量的讀寫都在影子表中完成，不會影響線上的真實數據。將測試數據通過影子表來隔離是非常關鍵的如果放在一起會引起很多麻煩，也不好清理，即使能夠清理也會影響正式表的主鍵生成規則，影響下游BI對數據的分析和一些監控指標的展示等。