阿里雲江岑:雲原生在邊緣形態下的昇華
5月20-22日,第十三屆中國系統架構師大會(SACC2021)在雲端進行網路直播,主題為“數字轉型、架構重塑”。阿里雲邊緣雲原生技術專家江岑,分享了阿里雲在邊緣雲原生的探索實踐,並從應對技術挑戰與系統架構設計等方面闡述產品核心競爭力,以創新技術驅動業務發展。
雲原生髮展與現狀
隨著雲計算技術的成熟,大多數企業選擇雲計算來快速部署運營業務。5G規模商用,更是促進全球數百億的終端裝置聯網。客戶對於低時延、大頻寬的近端準實時計算需求將大大增加。邊緣雲計算市場規模的增長,一方面來自於中心業務的下沉邊緣,另一方是各類邊緣創新業務場景的出現和發展,例如雲遊戲,智慧城市等。
江岑認為,企業業務系統上雲,無論是上中心雲還是邊緣雲,大都會經歷三個階段:
自建IDC的遷移,基於穩定性以及災備等因素考慮,不會對業務架構有大調整,大部分只使用最基礎的雲服務,如ECS, SLB, VPC等;
整體業務上雲,從全面複用雲的能力和提效降本的角度出發,隨雲而生的架構演進也逐步開始灰度應用。
當一切就緒,業務開始大規模擁抱雲原生。
而現階段,很多上雲業務已經在大規模推進雲原生化。
雲原生概念最早來自CNCF雲原生計算基金會,Google孵化的Kubernetes平臺。CNCF成立於2015年底,已孵化了大量符合雲原生標準的優質專案,核心模組包含資料庫、訊息中介軟體、應用編排排程、CICD持續整合、RPC、 服務網格、容器服務、雲原生網路等等。
現在,雲原生技術已經不侷限於容器/Kubernetes領域,逐漸成為廣大雲廠商中立的軟硬體基礎設施的標準架構。邊緣計算是在最近3-5年內隨著5G、物聯網技術應用而逐步興起的技術,其技術成熟度還遠低於中心雲計算,目前CNCF上涉及邊緣計算的專案還不多。伴隨著邊緣場景以及配套能力的提升,中心大量業務下沉到邊緣,邊緣創新場景不斷湧現,必然會在邊緣側催生符合邊緣特色的雲原生技術。
邊緣雲原生演進面臨的挑戰
在談到雲原生技術如何向邊緣演進時,江岑提到了3個技術挑戰:
從資源側看,邊緣不同於中心大規模集中式的佈局,主要以分散式和高地域覆蓋率為目標建設。除了中心標準的雲伺服器,在邊緣側還存在大量的異構資源,包括物聯網裝置、MEC、合作共建節點等等。雲原生技術對部署環境是有明確要求的,因此需要對邊緣側海量的異構資源做靈活的適配。另外,邊緣節點的特點是小而多,提升資源複用率是關鍵,這就要求能夠根據資源池化的能力和資源效能做靈活的彈性排程。
從技術能力來看,雲邊基礎設施存在差異,雲原生能力直接下沉應用到邊緣時,除了需要提供等同於中心的效能指標、安全隔離、容災自治、架構感知等能力,還需要不斷完善雲邊以及邊邊高速通道建設等,進而提升建設難度係數。
當資源適配、技術能力已具備時,保持使用者體驗一致會面臨很大的挑戰。從使用者視角來看,中心業務下沉過程勢必是個漫長的過程,對於單一業務中心和邊緣可能處於長期並存的狀態,雲邊的能力建設很可能存在不一致,大部分的不一致對於使用者應該是無感的,所以如何包裝產品,在成本、功能、效能、穩定性等各方面達到雲邊一致的體驗,是極具挑戰的。
阿里雲邊緣雲原生體系建設
依託遍佈全球2800+邊緣雲節點,阿里雲面向使用者提供安全、穩定、可靠的邊緣計算和內容分發加速服務,構建離使用者最近的邊緣雲基礎設施。單個節點是一個小型的IDC,規模在幾臺到幾十臺伺服器不等。早期邊緣雲節點建點策略是和CDN分開獨立建點,導致資源無法共享,缺少業務。目前建設策略是推動CDN ON ENS資源融合生產,整合邊緣算力資源,融合後也給資源的分時複用帶來更大的可能性。
CDN作為最成熟的邊緣雲應用場景,經歷了長期的技術架構演進,其基礎設施軟硬體架構可以複用到邊緣雲技術中。源站通常為企業自建的伺服器,規模及效能相對於中心雲是比較有限的。在業務上線早期可以正常運轉,但隨著業務的增長,面對海量的客戶端請求,假如沒有CDN,企業只能增加資源投入,否則可能會造成服務端的響應超時甚至服務癱瘓。而CDN透過多級快取以及全域性的DNS排程能力,使使用者能就近訪問所需的資源(特別是圖片、影片等靜態資源),避免對源站頻寬和伺服器造成過度的壓力。由於滿足不同地域的使用者就近接入,可以認為CDN天然具備低時延、全域性大頻寬的邊緣雲計算典型特點。支撐CDN的監控、資料智慧、配置管理等系統,具備標準的邊緣海量資料分發、處理,以及和中心互動的能力,也將逐步演進為邊緣雲原生的配套標準系統。
根據阿里雲邊緣雲原生的能力模型定義可知:在資源側,主要是將異構資源(包含傳統物理機,雲聯節點,IoT/MEC裝置,ARM陣列伺服器等)進行並池雲化,在這之上提供邊緣雲節點作業系統,將計算、儲存、網路資源進行虛擬化,並結合容器/K8S標準雲原生的能力進行模組化能力構建以及對應邊緣標準生態延伸輸出社群,比如面向業務需要有全網全叢集應用生命週期管理、編排釋出的能力,對應到阿里雲有定義邊緣CRD operator EdgeWorkload提供能力,定義OAM編排擴充套件能力。面向平臺管理員,像多叢集管理,租戶隔離,元資料管理等也是在邊緣海量使用者海量資料場景下也需要相應的能力定製。另外邊緣存在大量分散式異構資源,如何最大化利用資源,需要依賴於全域性的容器排程器結合業務相關的全域性流量排程分發策略。彈性伸縮HPA/VPA的場景也是面向邊緣分散式的解決方案。
阿里雲擁有遍佈全球各地的資源,需要對異構資源納管模組定義分割槽域的規劃策略,進行規劃接入,圍繞中心管控+邊緣自治+多重快取的方式進行展開。
考慮邊緣雲的架構複雜度、海量節點數量、異構資源差異性等因素,阿里雲透過不斷完善系統可觀測性和強化Devops運維建設能力,來提升系統穩定性。
同時,阿里雲邊緣雲原生具有異構融合廣覆蓋、雲邊體驗一致性、標準雲原生相容、算力全域流動性等技術優勢。
典型邊緣雲業務應用
早期CDN節點架構主要是按照資源進行規劃部署,2臺LVS+小於4臺管控機器,剩下都是快取機器,屬於規劃先行的部署模式,資源閒置較多,並且也造成建設成本的浪費。在全面推進CDN ON ENS邊緣融合計算可以極大提升資源利用效率。
智慧終端上雲,是未來IoT裝置大規模接入很重要的場景,涉及到典型的邊緣全域性容器排程和流量排程的協同。中心管控會事先根據預估的使用者規模申請資源,接入叢集,並將容器部署在邊緣節點上,在使用者請求建連時,根據預定義的流量排程策略,從中心管控獲取邊緣閒置容器,將使用者裝置和服務端容器進行繫結。當用戶斷連時,銷燬重建新的容器供後續其它業務使用,避免資料洩漏。中心管控會實時的根據併發請求情況等核心指標進行動態的容器擴縮容。
中心下沉業務,中心具備規模化Region的數量是比較有限的,當客戶對延遲非常敏感,首選是在就近邊緣節點進行服務的部署和處理客戶請求。為保證雲邊一致體驗,業務中控系統需要同時獲取中心和邊緣的服務資料,再根據使用者請求進行流量分發。這樣既可以降低對於中心頻寬成本和資源的壓力,又可以提升使用者體驗。
最後, 江岑表示,阿里雲邊緣雲原生技術將不斷完善排程、資源、協同等方面能力,面向行業客戶以及合作伙伴提供最佳雲原生應用體驗,共同打造邊緣雲創新應用。
原文連結:https://developer。aliyun。com/article/784462?utm_content=g_1000275954
相關文章
- 2021-09-2413年來首次業績下滑 萬科A未來仍要“穩”字當頭
- 2021-09-23認識你自己的弱點, 控制好情緒很關鍵, 認真對事對小孩。
- 2021-08-07榮耀、麥芒之後, 華為又一業務要被出售, 營收曾獲全球第三!
- 2021-06-12《明日之後》:失去了當初的興趣,懷念過去
- 2021-05-24心理學家披露真相:這些陷阱,比原生家庭更傷人