840
零點之戰——阿裏雲2017雙11技術探訪
摘要：在距離雙11已經不到10天的這個時刻，一場看不見硝煙的戰爭似乎已經打響。隨著一年一度購物狂歡的即將到來，網上出現了很多阿裏技術應對雙11的段子。“阿裏工程師拜關公求服務器不宕機”，“技術人員圍著被子敲代碼”等傳聞也被消費者們所津津樂道。那麼，針對雙11期間極為嚴苛的技術壓力，阿裏巴巴究竟是用怎樣的方式進行解決的呢？在接下來的文段中，就讓我們一起來對阿裏巴巴在2017雙11背後的技術進行一次細致的了解和探訪。
阿裏巴巴針對雙11的實戰演習
容器服務：雲上資源助力亟速擴容
容器服務是阿裏雲在2015年推出的容器應用管理服務，對一千多家企業客戶同時進行支持。其主要支持Docker應用的全生命周期的管理。在公有雲上麵整合了阿裏雲的虛擬化、存儲以及網絡等方麵的能力，簡化了用戶在容器應用運維上的複雜性。不僅同時支持Swarm和Kubernetes。還提供了公有雲和專有雲兩個版本，允許用戶通過專有雲的方式在自己的數據中裏麵構建一個完整的容器運維能力。
雙11期間，針對過於洶湧的流量衝擊導致資源量不足的情況，容器服務可以做到最大化方便企業將原來部署在自己機房中的應用部署到雲上，無需準備物理機器，也無需安裝操作係統和依賴，隻要拉下鏡像直接運行即可，就這麼簡單。
阿裏雲雙11訪談之容器服務 https://yq.aliyun.com/articles/229366
視頻雲：人工智能同視頻產品迸發火花
視頻雲是阿裏雲提供的一站式大視頻解決方案。能夠一站式的提供“海量存儲、高效分發、極速網絡”等優質而強大的服務，讓用戶輕鬆獲得極高量級的傳播能力。其廣泛應用於遊戲直播、娛樂直播、泛生活直播、教育類、遠程醫療、企業遠程視頻會議等典型場景。
針對視頻生產環節，阿裏雲點播服務能夠提供從視頻的導入到短視頻的拍攝、錄製、圖片處理、在線編輯、視頻審核等全鏈路服務。窄帶高清2.0的轉碼則可以令端到端的轉碼時效達到最高，同時也就確保了信息傳播的最高時效。
在視頻直播場景下，針對內容解析、人臉識別、語音識別，視頻大數據分析的探索能對客戶的優化運營提供場景、端口、數據分析方麵的全麵支撐。
在視頻點播場景中，利用阿裏雲擁有強大的AI技術和海量資源支撐，視頻雲很好的實現了以視頻為入口的智能化處理。穩定成熟的內容分析，兼顧美學和關鍵性的封麵選圖，精準的視頻指紋分析和深度學習帶來的高效審核都極大的提高了工作效率，從而令對大規模視頻的無人化處理變成現實。
阿裏雲雙11訪談之視頻雲 https://yq.aliyun.com/articles/229356
視頻雲雙11特惠專場https://promotion.aliyun.com/ntms/act/product20171111.html?
中間件：為企業架構創造價值
中間件最初是用於支撐阿裏雲自身的一係列係統，為了服務客戶而對外開放。包括恢複框架、消息隊列、實時監控、性能測試等一係列互聯網中間件產品。在EADS平台的基礎上提供了快速構建微服架構、應用開發、服務治理、高可用管控、限流降級等一係列功能。通過可視化平台，幫助用戶分批次、可中斷、有發布單的呈現方式，使用戶能夠快速進行大批量應用的部署。
對於消息隊列（MQ）的中間件，削峰填穀的功能也將在雙11時期全力投入使用。這一組件的引入能夠幫助在阿裏雲在流量高峰時平緩峰值、減輕壓力，再將任務置於流量低峰的時段進行消費。為了確保其足夠穩定，阿裏雲對每條消息都進行了三次備份，並完善了對持續消息、順序消息、事物消息、定時消息等一係列消息類型的支撐。
針對分布式裏最關鍵的像數據庫領域，阿裏雲DRDS分布式數據庫產品一定是繞不開的。在整個中間件團隊，對外推出了分布式關聯數據庫DRDS。該產品專注於解決分布式領域讀寫分離、分庫分表、無線水平擴容等一係列分布式數據庫問題和流量高峰期分布式上存在的問題。對業務透明友好，並能對特定業務提供個性化支持。
最後，PTS壓力測試也同樣是一項優秀的性能測試領域產品。其將整個壓測服務spss化。客戶在公共雲上不需要部署任何組件，隻需提供整個應用的入口就能快速使用壓測服務。並具備指令測試豐富，流程進展快速，模型自動化分配等特有的優勢。
阿裏雲雙11訪談之中間件 https://yq.aliyun.com/articles/229354
中間件雙十一特惠專場：https://promotion.aliyun.com/ntms/act/product20171111.html?
雲存儲：麵向對象，麵向文件
在阿裏雲的存儲業務中，對象存儲OSS和文件儲存NAS可以說是自家內部的當家花旦。其中，對象存儲以麵向互聯網，數據海量，高安全性、經濟性、數據可靠等特點為人稱道，文件存儲則因其強大的性能和對大容量、多協議的支持而受到用戶的廣泛好評。
OSS的應用場景主要有三：針對圖片和視頻的多媒體存儲、大大簡化的數據備份歸檔過程、結合計算平台從而挖掘數據價值。對多媒體從業者來說，OSS的上下行具備的彈性伸縮能力可以讓他們對業務高峰的大量並發請求進行有效的處理， 其自帶的簽名機製不僅確保了數據的安全性，同時也減輕了用戶服務器的負擔。
NAS則有所區別，作為針對分布式的文件存儲業務，其可以利用計算和文件存儲的彈性解決特殊行業大數據量計算的痛點，並給予用戶短時間訓練AI模型的能力，做到高性能存儲和文件可共享訪問的並行不悖。
阿裏雲雙11訪談之雲存儲 https://yq.aliyun.com/articles/228482
雲存儲雙11特惠專場https://promotion.aliyun.com/ntms/act/product20171111.html?
ECS：彈性即是計算的特性
2017年，阿裏雲不僅完成了ECS企業級產品的發布，而且完成了一次軟件和硬件的數據迭代，推出了新一代硬件架構和軟件架構產品，通過對現有功能和產品形態優勢的持續優化和挖掘，將彈性發揮到了極致。
簡單來說，彈性是整個彈性計算產品中一個最大的亮點。它體現在兩個方麵，一是資源唾手可得、二是按量付費。用戶無論什麼時候想要計算資源都能拿到，時間上是很彈性的。同時，由於完全根據使用量來計費的，所以付費方式也是很彈性的。對用戶來說，無論在業務承載能力上還是在成本構成上，這都是一項極大的提升和優化。
阿裏雲雙11訪談之ECS彈性計算 https://yq.aliyun.com/articles/228321
ECS雙11特惠專場 https://promotion.aliyun.com/ntms/act/product20171111.html?
數據智能：我就是智能城市的大腦
剛剛結束的雲棲大會中， ET城市大腦可謂是阿裏雲展示的眾多黑科技中耀眼的一項。杭州大腦的上線使高架道路出行時間節省了四點六分鍾，解決了高峰時段的城市擁堵問題，還讓蕭山120救護車到達急救現場的時間減少了一半。
在城市大腦的背後，必然離不開數據采集整合以及算法應用的技術支持。ET城市大腦將散落的數據匯合在一起，例如公交線路數據、高德地圖數據、車輛的GPS數據等，同時跟企業、公安、政府、運營商等多方收集的數據匯集，借助記憶學習和人工智能算法，通過視頻識別交通事故和交通擁堵狀態，再融合警察接警數據，對城市進行全麵多發的感知。構築出一座基於數據驅動的3D城市，並將其微縮模型投放在屏幕上。這不僅非常炫酷，也為城市治理者提供了一個更加友好、人性化的態勢監控界麵。
ET城市大腦分為三大塊：數據整合層、記憶學習和智能算法層、應用層。並形成了城市大腦這一產品化的輸出框架。在行業內部，ET有智能語音，人臉圖像，OCR（光學字符識別）等智能產品。包括語音方麵的實時文本轉換，智能法庭/語音智能客服；身份驗證場景的實名認證、人臉檢測、圖像場景打標、圖片鑒黃；印刷文字領域的身份證，駕駛證，行駛證，工商管理證等的文字識別等廣泛的應用。並能夠利用dataV數據可視化神器提供數據展現，以滿足城市、各級大小企業和機構日常業務展示以及業務監控的需要。
阿裏雲雙11訪談之數據智能 https://yq.aliyun.com/articles/228322
MaxCompute：快速架構大數據倉控
MaxCompute是一項大數據的計算服務，它能夠為企業提供快速、完全托管的TB/PB級數據倉庫解決方案。MaxCompute向用戶提供了完善的數據導入方案以及多種經典的分布式計算模型，能夠更快速的解決用戶海量數據計算問題，有效降低企業成本，並保障數據安全。
MaxCompute的應用場景可以大致分為三種：基於MaxCompute搭建企業的大數據倉庫、
機器學習、和基於加工後的數據實現個性化推薦。其具備強數據安全，從數據訪問到最終的數據加工和處理，都能夠實時地通過實名認證體現出用戶的真實身份。
迄今為止，MaxCompute在傳統行業、互聯網行業以及初創公司中都有很多成功應用的案例，比如墨跡天氣、集團內的菜鳥網絡、螞蟻金服等，外部的新浪微博、ofo小黃車、美柚、天弘基金、眾安保險以及金立手機等都在使用MaxCompute作為自己的大數據服務。
阿裏雲雙11訪談之MaxCompute https://yq.aliyun.com/articles/228477
Elasticsearch：定製化大數據解決方案
阿裏雲· Elasticsearch是基於開源Elasticsearch及商業版X-Pack插件，致力於數據分析、數據搜索等場景的一項服務。其在開源Elasticsearch基礎上提供企業級權限管控、安全監控告警、自動報表生成等功能。
作為基於開源項目的大數據服務，Elasticsearch產品不僅本身與開源社區完全兼容。還提供了Kibana以及X-Pack這樣商業化插件的預置，以及ik等分詞插件提高用戶體驗。相對於企業進行自建，阿裏雲Elasticsearch能夠節約大量的運維和部署成本。並能獲得來自Elasticsearch 24小時不間斷的穩定技術支持。
總結而言，阿裏雲Elasticsearch產品有三個亮點：功能更加豐富、成本更加低廉、能夠提供更多服務支持，從而完美解決用戶在日誌分析場景下各種各樣的訴求，並最終被應用於安全，搜索等多個領域。
阿裏雲雙11訪談之Elasticsearch https://yq.aliyun.com/articles/228478
雙11大促來啦，這些技術你想不想擁有呢？
沒想到吧， “雙11購物節”不僅是消費者買買買的狂歡，也是阿裏巴巴內部的一場技術盛宴，背後有著多樣而穩定的各類技術進行保障。這些技術你想不想擁有呢？快去阿裏雲雙11大促會場去儲備技術能量吧，豐富的技術資源和優惠的價格相得益彰之下，你還等什麼呢！
阿裏雲雙11大促會場直達 https://promotion.aliyun.com/ntms/act/pre20171111.html
最後更新：2017-11-03 14:33:46