千尋CORS特別“穩”，用過(guò)的人都知道。撐起千尋服務(wù)穩定性的，是一項名為“高并發(fā)”的技術(shù)能力。

　　什么是“高并發(fā)”？“高并發(fā)”是指大量用戶(hù)（終端）的快速接入。對于網(wǎng)絡(luò )平臺而言，如果不具備良好的高并發(fā)處理能力，輕則引發(fā)服務(wù)中斷，重則引起服務(wù)器宕機。

　　2021年 ，千尋位置高精度位置服務(wù)平臺的高并發(fā)能力已經(jīng)達到了每秒百萬(wàn)級，也就是說(shuō)每秒鐘能夠為超過(guò)百萬(wàn)級的用戶(hù)來(lái)同時(shí)提供高精度定位的服務(wù)。

　　這不僅是行業(yè)里面的冠軍，對標整個(gè)互聯(lián)網(wǎng)也是一個(gè)高水平能力。這是如何做到的呢？下面小編將從系統能力、運維能力兩個(gè)層面，分析其中的技術(shù)要點(diǎn)。

　　系統能力｜水平擴展基于分布式服務(wù)架構設計的千尋位置高精度位置服務(wù)平臺，具有“海量用戶(hù)”的服務(wù)擴展能力，增加服務(wù)器就可以服務(wù)更多用戶(hù)。在具體的實(shí)現路徑上，主要分為4步：第一步：自研SpaceX 高性能分布式框架千尋位置的服務(wù)具有覆蓋廣、規模大、實(shí)時(shí)性要求高等特點(diǎn)，需要千尋位置高精度位置服務(wù)平臺以高度的靈活性，實(shí)現效率最大化。針對這樣的情況，2015開(kāi)始，千尋位置自主研發(fā)了內部代號為SpaceX的高性能分布式應用框架。

　　SpaceX框架：可以將一個(gè)龐大的計算任務(wù)劃分為若干個(gè)小任務(wù)，并分配給每臺計算機。計算機集群通過(guò)并行處理提高了效率，在統一管理控制下，完成大規模信息處理任務(wù)。國家北斗地基增強系統“全國一張網(wǎng)”的解算，就是通過(guò)SpaceX框架，分成幾千個(gè)小網(wǎng)任務(wù)，分布在上百臺機器同時(shí)進(jìn)行解算。

　　第二步：快速復制數據的擴展塢程序Switch千尋位置針對快速復制國家北斗地基增強系統“全國一張網(wǎng)”能力，研發(fā)了一個(gè)擴展塢程序，它被命名為Switch。Switch將算法產(chǎn)生的網(wǎng)格數據復制多份，再將復制的數據分發(fā)給下游用戶(hù)。

　　第三步：提高效率，集中處理為提升處理性能，千尋位置高精度位置服務(wù)平臺中熱點(diǎn)識別應用會(huì )將用戶(hù)分布較多的區域識別出來(lái)，將相同地區用戶(hù)集中到一塊處理，大大提升性能，降低服務(wù)器壓力，達到降本增效效果。

　　第四步：用戶(hù)均勻分布，降低平均排隊時(shí)間用戶(hù)連接服務(wù)時(shí)，千尋位置高精度位置服務(wù)平臺會(huì )有專(zhuān)門(mén)的負載均衡SLB應用來(lái)指導用戶(hù)應該去哪個(gè)服務(wù)器處理。這樣每個(gè)服務(wù)器的壓力均衡，用戶(hù)平均等待時(shí)間就降低了。

　　系統能力｜服務(wù)高可用千尋位置高精度位置服務(wù)平臺除了要去支撐用戶(hù)，還要保證服務(wù)的高可用。千尋位置做了多套服務(wù)冗余備份，在數據中心之下分為6個(gè)可用區和3個(gè)隔離集群。

6個(gè)可用區，主要就是防止單機房故障，可用區的概念有點(diǎn)像當地的機房；·3個(gè)隔離區群，是按照千尋位置的業(yè)務(wù)群體進(jìn)行劃分的。由于不同行業(yè)（智能電子設備、汽車(chē)、測繪RTK）對于高精度位置服務(wù)的要求和標準不同，隔離區群能夠做到互補干擾。

　　系統能力｜自我保護千尋位置高精度位置服務(wù)平臺在流量突增的時(shí)候擁有自我保護機制，主要是精準流控和熔斷機制。

　　一、精準流控有6種影響因素，主要包括算法A/B群灰度、鏈路規則、用戶(hù)應用、產(chǎn)品、區域、百分比，按照這6種因素不同的排列組合，可以形成適合不同用戶(hù)的策略。比如有一種策略，只適合廣東地區電力，那有這種路線(xiàn)規劃的話(huà)就可以把這個(gè)服務(wù)精準的去推到這個(gè)客戶(hù)上面。

　　二、熔斷機制的建設。千尋位置的服務(wù)其實(shí)是有容量的，比如說(shuō)現在容量是1億，那突然來(lái)了2億流量，千尋位置的高精度位置服務(wù)平臺能去做到一個(gè)自我保護，優(yōu)先保證服務(wù)好前1億用戶(hù)。隨著(zhù)服務(wù)器擴展，逐漸去支持到后來(lái)涌入的2億流量。

　　運維能力｜快速診斷基于系統可視化和智能化定位能力，千尋位置高精度位置服務(wù)平臺可以進(jìn)行問(wèn)題的快速定位。

　　系統可視化能力由業(yè)務(wù)監控大屏、應用處理能力監控大屏、云資源服務(wù)狀態(tài)監控大屏組成。從這三個(gè)維度，系統就完完全全變成一個(gè)透明化。

　　業(yè)務(wù)監控大屏實(shí)時(shí)呈現用戶(hù)在線(xiàn)數量、整體分布、定位狀態(tài)、特定用戶(hù)群體以及在線(xiàn)的工具（測距、定位、回放）；· 應用處理能力監控大屏核心呈現用戶(hù)實(shí)時(shí)連接數、每秒新增連接數、每秒下線(xiàn)連接數；·云資源服務(wù)狀態(tài)監控則能查看CPU使用情況、內存使用情況、TCP網(wǎng)絡(luò )連接狀態(tài)等。

       智能化定位能力由系統控制臺、網(wǎng)格異常分析、基站異常分析構成，能夠主動(dòng)判斷用戶(hù)服務(wù)是否正常、問(wèn)題是否由基站引起以及是否由周邊環(huán)境影響。

　　運維能力｜快速恢復千尋位置高精度位置平臺具有從問(wèn)題中快速恢復的能力，在實(shí)施層面分為快速響應 、記錄通知、啟動(dòng)預案 、 工具化處理4個(gè)步驟。

　　首先，千尋位置設置了7*24小時(shí)值守的應用監控室，第一時(shí)間響應問(wèn)題；其次，千尋位置應急響應平臺記錄事件，并通過(guò)電話(huà)、軟件系統通知相關(guān)運維、開(kāi)發(fā)等處理人員；再次，日常處理預案留有記錄，運維人員結合系統流程 + 工具，自動(dòng)化操作減少失誤，達到快速恢復的能力；最后，將日常標準流程歸納提煉之后，都升級為工具化執行，不需要人工干預，在提高效率的同時(shí)，也避免了因人為導致的不可控因素。

　　運維能力｜故障演練混沌工程是在分布式系統上進(jìn)行實(shí)驗的學(xué)科。模擬功能性測試、性能測試、極端場(chǎng)景測試，通過(guò)長(cháng)時(shí)間測試，發(fā)現系統以常規測試手段難以模擬和測試的BUG。

　　混沌工程主要解決極端的情況，比如說(shuō)網(wǎng)絡(luò )中斷、服務(wù)器宕機等，它通過(guò)長(cháng)時(shí)間測試，頻繁的去驗證，訓練出系統級的反應能力并加以鞏固，在真正遇到問(wèn)題的時(shí)候給予反應。