從平凡到非凡 阿里雲李克的技術高階之路

2022-10-09 08:21:11 字數 4607 閱讀 4792

簡介:人物簡介:李克 阿里雲邊緣雲計算領域技術負責人 2023年碩士畢業加入阿里至今,一直從事cdn及邊緣雲領域的技術研發工作,在cdn、邊緣計算等方向上有豐富的行業經驗,全程參與了阿里雲cdn商業化轉型,邊緣雲中臺體系的建設,研究方向包括資料智慧型、分布式架構和效能優化、雲計算等領域。目前主要負責邊緣雲的技術研發以及架構演進。

2023年,李克臨危受命,負責阿里巴巴上市的內部直播專案。

當時整個cdn平台還沒有直播系統,需要在不超過1個月的時間內,把直播平台搭建起來。李克基於開源的nginx rtmp搭建了具備容災能力的直播系統。由此,阿里巴巴也開啟了cdn的商業化直播產品之路。

次年,阿里雲開始轉戰cdn的對外商業化之路。

cdn轉型的過程中,李克也迎來了人生中的最大挑戰——雲cdn

「當時我們提出了要支撐百萬網域名稱的口號,但平台還停留在幾千網域名稱的服務能力上,配置也變得更複雜,資料量的劇增……原來系統的很多問題都在此時顯現出來了,很多時候配置無法生效,資料庫也不可用,我清楚地記得,那時候經常半夜三更起來開始恢復資料庫。」在商業化之前,阿里每年的雙十一大促都能順利得到支撐,但隨著商業化的來襲,其業務規模瞬間就上了一大量級,sla標準也隨之提高,以前服務內部的技術瞬間被「打臉」。

提起那段「不太平」的時光,李克依舊提心吊膽。

一方面,李克和其團隊需要全面擁抱雲計算,把自己搭建的資料庫、中介軟體等服務,使用阿里雲的標準產品做大量遷移。另一方面,他們還要對原有系統做相關治理,把高併發、分布式、異地容災等乙個個概念變為現實,除了提公升單個元件能力外,他們還需要在系統的可觀測、可運維行上做大量工作。

「當每天收集分析的資料量超過10pb,就會使得我們的白屏化和自動化也得到大幅度提公升。作為技術人員,一定要做好技術的判斷和選擇,聚焦在核心問題上,用最少的投入來獲得最大的收益。」李克堅定地說道。

最終,在李克和其團隊的齊心協力下,2023年,阿里雲做到了真正服務百萬網域名稱,每天支援超過50億次的訊息全球下發,配置秒級生效,從以前的5分鐘提公升到了秒級時代,提公升效果突飛猛進。客戶在做配置發布和內容重新整理時,無需等待。同時,cdn使用門檻也大大降低,成為了雲計算時代的普惠技術。

李克既是萬千普通人中的乙份子,又是從小白長成的一位非凡技術大咖。

李克從小就對計算機「情有獨鍾」。第一次在高中接觸計算機時,當時由於技術有限,無法上網,他只能用office上機練習打字,背五筆和各種快捷鍵……但這些就足以讓他沉迷其中。後來,每次上機課,他都一直玩到關門才走。也就是此時,研究計算機的想法在他內心深處油然而生。讀大學期間,他擁有了自己人生中的第一台電腦,這也由此開啟了通往計算機和網際網路的大門。

「我對於計算機、網際網路還是比較痴迷的,記得有段時間學習做**,搗鼓各種bbs和cms原始碼,在網上申請各種免費頂級網域名稱和託管空間等,在大學裡也擔任很長時間校內bbs版主,開始接觸指令碼和linux作業系統,當時很多內外網資源就是自己寫爬蟲獲得的。」李克說,帶著興趣去做事情是最有效的學習捷徑。

「我的職業發展是從點到面,再到點再到面,乙個不停迴圈往復的過程。」李克說道。

2023年7月,李克碩士畢業後,順利進入阿里巴巴,加入cdn行業。

「在雲計算的歷史車輪裡,cdn需要實現轉型,從傳統的服務模式變為雲cdn的模式,將cdn使用門檻降低,使用體驗提公升,從而變為乙個普惠的技術。所有的技術和行業都不是恆古不變的,要用發展的眼光看待當下的現狀,與其等著被動降維打擊,不如主動創造和擁抱變化。」李克說。

剛開始做cdn時,李克負責監控和配置模組。在談到寫程式時,李克說,做程式設計師寫**有種成就感,特別是當自己的系統和**被很多人使用時,當看到線上每台機器都有你寫的**時,能給線上運維和客戶帶來極大便利時,尤其在日常使用中,看到自己的想法變為現實……這種歸屬感和解決問題的成就感是非常受用的,同時這也是對程式設計師最大的鼓勵。

時間一晃來到了2023年,隨著業務的發展和時代的變化,為了解決更深層次的問題,李克開始轉型做邊緣雲,這也意味著他從業務平台到基礎平台的轉變,代表著需要更紮實和底層的技術,來支撐上層的高樓大廈。

「在cdn摸爬滾打多年後,最大的痛點就是整個資源的利用效率和業務發布效率等問題都急需解決,而cdn領域卻無法**這些問題,這就需要調到更高的層次來解決。」就這樣,李克開啟了新的邊緣雲的方向探索。

我希望邊緣雲能做成基礎設施,把我們多年在cdn和邊緣節點上的能力變為通用能力,業務可以像搭積木一樣靈活使用,也能像水電一樣快速安全,用之不盡」,談到這次轉型,李克悠悠地說道。

在見證了cdn的十幾年技術演進過程中,李克爭取在垂直化領域裡做到了最好,同時自己也從小白長成了技術大咖。

起初,cdn 是從內部開始服務**,後來,逐漸變為阿里雲的產品對外商業化。經過十幾年的業務發展,推動了技術的變革,cdn行業發生了翻天覆地的變化。

從最開始基於開源haproxy、squid,逐步演進到更自主可控的tengine、swift,節點內的四七層負載均衡架構,優雅的解決了流量不對稱問題,單機上的web軟體和儲存軟體混部高效利用了單機資源,這也已經成為了cdn行業的標準架構。

除了產品形態豐富之外,資源使用方式也逐步進化,節點和機器資源混用到物理隔離,再從物理隔離演進到邏輯隔離,目前cdn已經全面擁抱了雲原生的體系,以容器和服務發現的方式快速部署業務,高效低成本的使用資源,這些發展都是業務規模和效率帶來的必然要求,促使了邊緣技術體系的變革。

通過體系化的建設,在2023年世界盃比賽上,雲cdn做到了無需太多的人值班,基於多年的資料能力,配置發布,監控工具等,當系統遇到突發問題時,可以快速地進行科學決策,一邊盯屏一遍看世界盃就完成了值班護航。

「世界盃是一場大練兵,可以很好地體現了我們對突發的大流量活動的功底。」李克說。

後來,李克在回憶起採集系統和應用資料時說:「受傳統採集方法限制,無法靈活支援新的埋點和軟體,他第一次萌生通過框架解決擴充套件性問題,隨即他動手寫了tsar。」利用動態庫的方式,靈活載入採集模組,每個場景只需按照標準寫好採集和展示規則,就能快速的使用tsar的通用能力,在業務多變、快速發展時,tsar發揮了巨大的作用。

目前,tsar系統還是阿里巴巴集團的基礎監控軟體之一,每個伺服器上都有部署使用。

除了成就感和歸屬感之外,還有一種非我模式的歷史責任感。「我覺得這件事情有可能成為現實,而自己剛好在風口浪尖,那就豁出去,幹就完了。包括我在做的邊緣雲計算,是下一代的邊緣基礎設施,是未來cdn發展的必然趨勢,因此也是值得我all in在這裡面的,就像現在回想做cdn商業化一樣,重新創業,重新啟程的感覺非常新鮮和興奮。」

為了解決更深層次的問題,李克開啟了個人轉型——做邊緣雲。就像當年需要雲cdn一樣,如今邊緣雲也是時代的需要。

而從cdn和邊緣雲的關係來看,cdn是具體的乙個場景的應用,而邊緣雲則是乙個底座。

阿里雲希望cdn能跑在邊緣雲上,阿里雲邊緣雲也在不斷公升級和改造,在邊緣雲上,提供豐富的元件能力,在此基礎上對cdn業務做出編排,以更好的服務cdn業務。同時,邊緣雲的服務讓cdn可以完成高效的資源復用,讓資源更有彈性。

此外,邊緣雲的應用場景還可以從內部和外部兩個角度去看。其中,內部業務主要是cdn業務,目前已經全面基於邊緣雲體系來構建。而外部業務則更多的是新的業務場景探索,比如在終端上雲、5g等場景下,就需要更快的資料上傳以及指令下達,需要就近處理,邊緣雲優勢就得以凸顯。

例如,在雲遊戲、互動直播場景上,使用者在端上操作,邊緣結點要快速做出快速,以流式的方式傳輸給使用者。同時在一些垂直化的行業中,如智慧型交通、智慧型醫療、工業製造等場景是具有區域性特徵的:所有的節點都處於乙個區縣或者地域中,資料是乙個本地化的產生與消費。所以,同樣需要邊緣雲的儲存技術來支撐業務場景。

未來5年,邊緣雲會朝著廣覆蓋、低延遲、互聯互通的方向發展,廣覆蓋指的是節點更靠近客戶,節點數量會到達百萬規模,低延遲是提供<10ms的網路延遲,互聯互通是能夠將所有的邊緣雲節點形成一張網,乙個資源池,統一的對外提供資源以及業務部署交付能力。

只有知道世界上做的最好是什麼樣的,才有機會趕超,如果有人已經做到了行業第一,就要明確競爭壁壘是什麼,以及如何自我顛覆,持續創新。」李克說,只有明確了定位,才能知道自己該往什麼方向深挖技術,做大業務。

平時,要多關注相關領域的優質作品,提公升自己的視野和認知水平,建立內外部的技術圈子,學會經常總結,多分享,提公升個人專業影響力。多訂閱一些技術大牛的動態,看看大家關注的行業技術和前沿趨勢,知道行業裡面最好的人都在幹什麼,想什麼。比如我們團隊現在做邊緣雲方向,就需要大量學習雲原生、虛擬化相關的技術。

此外,形成自己做事的「套路」,注意方法的沉澱和資料上的證明,系統優化運用相關的創新技術,如何復用技術,以及沉澱和被復用都是個人能力的體現,而不是簡單的解決問題,要學會體現解決問題背後的技術選型和關鍵挑戰,通過這些方法的提煉,從而形成了做事情的套路。

最後,要學會合作和利他的精神。隨著業務變得複雜,分工也越來越細,如何整合資源,利用現有能力,學會「利他思維」,就變得尤為重要。當乙個人把全公司都看成他的資源時,或者能讓他的價值被廣泛應用,那他的成果將不可限量,重要的是學會思考技術怎麼復用,而不是重複造輪子。

有時,選擇乙份職業,就像在大海上航行時,你需要選擇適合一艘適合自己的船,才能到達勝利彼岸。阿里雲邊緣雲所在的海域,或許風雲變幻、風起雲湧,但值得有人乘風破浪。

「歡迎優秀的同學加入我們,一起在雲計算的大海中乘風破浪!」李克最後說道。

阿里巴巴高階技術專家李浩 千牛開放從雲到端

議題名稱 千牛開放從雲到端 議題簡介 歷年雙11都是一次不斷創造歷史的過程,這中間有無數買家的血拼和賣家的努力,千牛作為賣家工作的第一入口,每天有數百萬賣家真正的work at alibaba。從當年的阿里巴巴賣家版,到現在的一站式os工作台,本演講涵蓋了千牛基於端支援二方三方業務開發所做的優化和官...

雲計算 Linux從入門到精通 阿里雲大學的部落格

linux是一套免費使用和自由傳播的類unix的的作業系統,是乙個基於posix和unix的多使用者,多工,支援多執行緒和多cpu的作業系統。它能執行主要的unix工具軟體,應用程式和網路協議。它支援32位和64位硬體.linux繼承了unix的以網路為核心的設計思想,是乙個效能穩定的多使用者網路作...

如何準備面試到阿里雲實現您的技術夢想?

您是否曾經為天天掙扎業務開發而得不到技術上的提公升而感到無助?您是否曾經面試過很多次阿里不同的崗位而發現並沒有了下文,原因是什麼?您是否經常接到阿里技術小哥的 並且很熱情的邀請您去面試?那麼該不該去呢?您是否想來阿里雲從事技術前沿的研發而不知道如何準備面試呢?到底該準備些什麼?我是如何準備,從曾經的...