擁抱開放共享生态,從移動互聯網到企業服務、科學研究。
2021年是十四五規劃的開局之年,“數字經濟”作為推動社會經濟發展的重要動力,自2017年起已連續四次被寫入政府工作報告中,成為了重點強調的發展方向之一。
2020年,我國數字經濟規模占GDP比重已近四成,對GDP貢獻率近七成。小到手機上的人臉識别功能,大到傳統企業的數字化轉型、科研領域實現突破創新,均需要多種數字化技術的支持。
而構建多領域、多層次、全方位的數字化經濟體系,僅憑單個人、單個企業的努力是遠遠不夠的。需要的是無數新技術人的踏實實踐、開源創新與分享合作,讓技術在企業間交流起來,從而進一步推動技術賦能應用,惠及更多行業。
“尋找技術同路人,幫助技術走向前台”正是阿裡雲和英特爾在一起做的一件大事。技術的進步無時無刻不在發生,打造一個開放的生态,和技術專家一起進行分享,支撐各類技術百花齊放,幫助技術在交流中獲得新的活力,為雲生态的發展貢獻力量,也是阿裡雲和英特爾合作的初心。
在阿裡雲MVP平台的支持下,越來越多的一線技術人正在成為技術的布道者、先驅者,分享他們的技術實踐經驗。
10億流量的微博熱搜背後
面向廣泛C端用戶,移動互聯網的技術創新主要由用戶需求驅動。
從數據流轉流程看,在數據的産生與收集環節,随着用戶基數的擴大,産生的數據量不斷增大,圖片、文字、語音、視頻等多種數據類型并存,且在很多場景下具有高并發性;在數據的傳輸環節,用戶對快速響應的需求要求網絡傳輸具備低時延性;同時,分析與處理環節,為了滿足用戶的極緻體驗,需要提升計算效率和模型推理速度,實現應用的高可用性。
微博熱搜就是典型的高并發、高可用場景。“微博是整個社會的輿論場,對微博來說最大的挑戰就是不知道熱點什麼時候出現。特别是今年之後,流量級别更高的熱點事件不斷出現,并且這些熱點事件從出現到到達高峰的時間越來越短了。我們需要讓微博在有這種熱點事件的時候,也能夠保持服務的穩定,給用戶帶來更好的使用體驗。”微博基礎架構負責人李慶豐如此總結微博面臨的技術挑戰。
挑戰即機遇,雲原生架構采用容器化封裝,可以通過集中式的編排調度系統來動态進行資源的管理和調度,從而能夠輕松應對流量峰值時的擴容壓力,滿足移動互聯網領域對高并發、高可用場景的需求,因此,移動互聯網是最早進行雲原生探索的行業之一。
微博的雲原生應用最早可以追溯到2014年。彼時K8s還并非主流,微博就已經應用了Docker容器技術進行業務部署,在熱點事件被觸發時可以從公有雲上獲得計算、存儲和網絡資源,在熱點事件過去後則可以将資源還回去,在提升研發效率的同時實現了降本增效。
“通過應用雲原生技術,微博熱點事件的擴容從原來的9~10分鐘縮短到了現在的4分鐘。也就是說,第4分鐘時,我們的服務器就已經能夠接受線上10億的流量。” 李慶豐介紹微博的雲原生經驗時提到。
面對數據處理環節的大規模特征工程計算,微博也頗有心得。随着2015年以來的迅速發展,微博逐漸形成了近百億特征維度,近萬億樣本量的模型訓練需求,為了解決計算上的性能瓶頸,微博在硬件上選擇了第三代英特爾®至強®可擴展處理器。作為一款集成了人工智能加速和硬件增強型安全功能的數據中心級CPU,其對主流的20多種機器學習和深度學習框架進行了優化,同時可以面向應用場景提供端到端的數據科學工具,從而加快了人工智能應用的部署、提升了工作負載性能;在應用層,微博基于阿裡雲飛天大數據和AI平台的能力,形成了數據倉庫和數據湖共存的格局,加速了模型的叠代效率,滿足用戶千人千面的個性化需求。
“這種效率的提升在以前是不可想象的。”李慶豐說。“希望我們的這些經驗能夠幫助業界的技術同學借鑒我們的技術經驗,并應用到他們的技術場景中,把整個技術體系發展得更好。”
如何支持600萬家小微企業的數字化轉型随着宏觀競争環境的複雜化和我國經濟增速進入換擋期,企業對精細化運營與降本增效的需求日益凸顯。而數字化轉型作為推動業務創新的重要工具,正在成為越來越多企業的共識。
對于小微企業來說,其前端需求彈性大,因而更要求中後端解決方案的敏捷性。同時,雲時代的服務開通即用,大大降低了軟件包時代高企的維護和安裝成本,為企業采用更多的先進技術與服務提供了客觀基礎。因此,在疫情的影響與政策的拉動下,數字化轉型、企業上雲成為了小微企業的迫切需求。
成立于2010年,用友旗下的暢捷通作為一家緻力為小微企業提供數字化财稅和數字化商業的雲SaaS廠商,緊抓企業數字化轉型的趨勢,已經為超過600萬家的小微企業提供上雲服務。
面對小微企業數量多、單個用戶業務量有限、IT能力不足的情況,雲原生架構一方面能夠快速搭建出面向大規模用戶的彈性應用,降低開發成本;另一方面容器化可以為用戶提供穩定性強、可靠性高的服務,從而有效提升資源利用效率。
“暢捷通在2020年進行了雲原生架構的技術轉型。”暢捷通雲平台總架構師鄭芸作為雲數據庫方面的專家,在分享暢捷通服務廣泛小微企業的經驗時提到,“在數據庫方面,我們采用了基于英特爾®傲騰™技術的雲原生PolarDB。目前我們的産品性能已經提升了20%-30%。” PolarDB能夠100%兼容多種數據庫類型,采用讀寫分離;同時,英特爾®傲騰™技術兼備内存與NAND存儲的優點,能夠按位寫入、按位尋址,同時在更接近處理器的位置移動并保存大量數據,從而可以改善傳統硬盤尋道時間長、讀寫速度慢的缺點,實現了低延遲、高數據吞吐量,能夠幫助PolarDB實現秒級的彈性擴展能力,讀寫能力更強、穩定性更好,使暢捷通能夠進一步獲得性能提升。
在大數據計算方面,暢捷通則應用了雲原生的MaxCompute服務以優化變形計算的性能。“以前我們産品中的調度資源有時會出現阻塞的現象,采用阿裡雲的MaxCompute可以快速、并行計算,提升了算力,現在我們基本上都能在2點鐘之前把任務跑完,用戶反饋更好了。”
在20多年的企業服務經驗中,鄭芸親曆了企業應用從閉源的軟件包時代慢慢走向雲端、走向開源。“開源、自主是行業的大趨勢。我也會多寫一些數據庫優化技術方面的文章,希望我的分享能夠幫助更多的技術人。”
“腳踏實地”的虛拟天文台科研水平引領着國家經濟發展。在現代科研創新“理論分析,計算模拟,觀察實驗”的模式下,擁有先進的模拟、觀測、計算和分析工具對于提升結果的精确度至關重要,其戰略價值在數據安全性上要求更高。
以天文學為例,作為一個以觀測為基礎的學科,随着引力波、中微子的探測窗口打開,天文學進入了多波段、多信使的數據融合時代,為天文大數據的發展帶來了更多挑戰性。模拟天文台就是在這樣的背景下,幫助更多天文學家“仰望星空”的工具。
國際虛拟天文台聯盟輪值主席、虛拟天文台研究團隊的首席科學家崔辰州,在過去的20多年一直在做中國虛拟天文台、天文信息學、海量天文數據的研究工作。“在先進信息技術的基礎之上,我們希望能把全世界的數據融合成一個數字宇宙,讓天文數據變得觸手可及。”
然而宇宙中不同粒子的觀測工具不同、存儲方式各異,不同的國家采用的數據格式也不盡相同,如何将體量大、類型多樣的數據融合起來,成為了構建虛拟天文台的核心難點。想要解決這個問題,則需要應用雲計算、大數據、高性能計算等多種技術。沒有先進技術的應用,虛拟天文台就隻能是一個遙遠的“藍圖”。
經過多年的發展,國家天文科學數據中心已經形成了以專有雲 公共雲的混合架構為基礎,對數據進行融合、應用挖掘并在線共享的體系,集成了超過500TB的科學數據、1.5PB的存儲能力,700 TFLOPS的計算能力和100多種軟件。
“同時,現在國家已經把數據越來越看重,天文學雖然說是一個非常開放的科學,但是我們國家投入了大量的經費、人力,打造的科學數據,也是需要知識産權保護或隐私保護的。” 崔辰州分享了虛拟天文台在數據安全方面的探索。通過采用阿裡雲基于英特爾®SGX技術打造了的DataTrust隐私增強計算平台,虛拟天文台能夠在CPU的支持下在較大的内存等特定硬件環境中構建出一個可信環境,使數據在硬件層就能有效阻斷攻擊,避免數據和代碼被竊取或修改,從而為保密性較高的數據的計算、挖掘工作負載提供了可信環境,保障了虛拟天文台在雲計算環境下的隐私和數據流轉全過程的安全性。
“其實DataTrust隐私增強計算平台可以應用于很多的領域,很多的場景,為特别是那些對數據安全有很高要求的用戶,提供很好的服務。我覺得好的東西,我把它分享出來,讓更多的人一起往前走。” 崔辰州說。
同一片技術天空不論是在移動互聯網、企業服務還是科研領域,都有無數的技術先行者在埋頭耕耘。但個人的視角總是局限的,他們選擇加入阿裡雲MVP,将自身的技術經驗分享出來,為多樣的技術帶來更大的發展空間,同時吸引更多的同路人加入,在數字經濟的道路上開疆拓土。
“做技術分享這個事我堅持了有十年左右了,我的主要體會是,首先分享是梳理自身知識體系的一個非常好的機會,同時通過和業界的技術人做交流,他們也會給我很多反饋,不斷推動我把整個技術方案打磨得更好。在這個過程當中我既是分享者,也是受益者。” 李慶豐表示,“這也是我願意參加阿裡雲MVP的一個非常重要的原因。”
從最早在公司内部編寫文章做講解,到近些年将眼光投到外部,鄭芸也在積極擁抱新技術,并将這些技術心得分享出來,促進國内技術走向自研的道路。
無獨有偶,崔辰州也認同阿裡雲MVP這一布道師角色。除了苦心研究技術外,還樂于分享,推動技術進步。或許,正是因為有意願分享技術的心态,才推動了整個行業的發展和進步。
作為戰略合作夥伴,阿裡雲和英特爾始終緻力于讓“看不見”的技術被更多的人了解并關注。在過去的十餘年中,阿裡雲與英特爾已經圍繞着電子商務、智能制造、物聯網等應用場景展開了全方位的合作。通過在雲計算基礎設施、大數據、智能計算、AI以及邊緣應用等幾個方面的技術分享,阿裡雲與英特爾正在支持更多的技術布道者、前驅者分享經驗,通過共享生态推動技術進步,向應用場景深度賦能,從而引領大數據時代的技術發展變革。
也正是由于他們的默默支持,才使開放的技術生态不斷迸發出新活力。合抱之木,生于毫末;九層之台,起于累土,在同一片技術天空下,生态的發展需要更多的技術人形成合力,共同創建開放共享的技術氛圍,推動技術進步,為數字經濟的發展貢獻力量。
,更多精彩资讯请关注tft每日頭條,我们将持续为您更新最新资讯!