698
每年14PB數據存儲需求，海量交通安全數據如何安放？
據中國汽車工業協會統計分析，2016年8月，在商用車主要品種中，與上月相比，客車和貨車產銷均呈增長，貨車產銷22.26萬輛和23.25萬輛，環比增長9.15%和10.21%，同比增長20.51%和15.37%。
而遠程被管理車輛每天大約需要上傳20MB左右的數據。按照100萬輛計算，每月大約600TB，每年7.2PB左右。而100萬輛車對數據中心的存儲需求大約在14PB。
麵對不斷增長的數據，對商用車納入遠程監控管理和提供遠程信息服務的要求日益提高。相關交通運輸行業作為傳統行業的“老大哥”，在大數據時代的背景下，麵臨海量交通安全數據的處理，轉型勢在必行。對基礎架構技術進行革新，配合上層軟件解決方案的軟硬件結合的模式將重塑高效、安全的交通運輸業未來。
中交興路智能車貨匹配案例
北京中交興路信息科技有限公司（以下簡稱“中交興路”）是一家專注於商用車車聯網領域的運營和服務商，提供安全、運行穩定可靠的完整車聯網信息服務解決方案。
傳統方案將數據的采集和存儲作為前端任務，而將數據的分析作為後端任務。各種傳感器技術的應用造成數據種類複雜多樣，非結構化數據所占比重快速上升，海量增長的數據也對網絡傳輸和後端處理能力造成很大的壓力。
遠程被管理車輛每天大約需要上傳20MB左右的數據。按照100萬輛計算，每月大約600TB，每年7.2PB左右。根據政府監管和中交興路其它增值服務需求（一年兩份冗餘），100萬輛車對數據中心的存儲需求大約在14PB。
麵對如此海量的數據，中交興路首先需要將數據的訪問和存儲等服務從硬件資源池中分離出來，使數據訪問脫離硬件以麵對新型存儲設備和存儲容量擴充等需求，此外中交興路還需要考慮存儲係統的性能和帶寬以應對百萬級車輛同時上傳數據的需求。
“芯”方案
如此一來，增強數據存儲能力，提高大數據處理和分析性能成為關鍵。作為國內領先商用車車聯網服務商和全國性道路貨運車輛公共監管與服務平台的供應商，中交興路與英特爾合作，配合英特爾架構計算平台的領先優勢，部署用以應對海量數據的采集、存儲和分析等業務對數據中心的性能需求。
目前，中交興路大數據平台可以滿足現有百萬級車輛的10PB級數據存儲能力和存儲性能需求，並可靈活擴展以應對更多車輛數據的存儲挑戰。與此同時，相應的車聯網解決方案對大量車載終端海量實時數據及時采集、處理、存儲和分析，同時支持大規模終端用戶實時查看、分析、監控和處理實時業務，並可伴隨業務規模的增長而動態擴充平台性能以滿足業務需求。
中交興路大數據中心利用分布式處理的軟件框架ApacheHadoop/HBase和基於英特爾至強處理器E5係列的服務器實現百萬級別車輛數據的存儲、查詢、分析和統計。底層架構使用英特爾至強處理器E7係列的出色性能和大內存支持等特性實現數據的實時分析和處理，並輕鬆實現計算性能的擴展，用以支持更高的計算密度和增強的虛擬化等特性，使得中交興路大數據平台成為理想的雲計算技術運行平台。
針對中交興路車聯網平台百萬級車輛管理的業務需求，中交興路和英特爾還一起研發實施了英特爾架構的硬件平台和第三方商業、開源軟件相結合，基於雲計算和大數據處理技術的車聯網平台壓力測試。壓力測試方案模擬可以10萬、30萬、50 萬車輛的位置和告警（如超速、疲勞駕駛），持續運行1小時。目前，中交興路大數據中心既服務於中交各業務和產品線，也服務於整個貨運生態；針對合作企業需求，通過數據開放平台，提供數據分析、趨勢預測、用戶行為畫像、區域分析、谘詢報告等服務。
“芯”可能
中交興路車聯網大數據平台通過實現PB 級海量數據的集中存儲和管理，滿足車聯網業務需求。該平台幫助確保車輛安全保障和實時護駕，通過實時獲取車輛各項狀態及信息數據實現實時管控，高效安全進行車貨匹配，創新了行業商業模式，為行業發展轉型奠定了基礎。
基於英特爾架構的解決方案，憑借其高性能、可擴展性、靈活性、安全性等優勢而構建起了包括存儲、網絡、計算在內的下一代數據中心架構，完美地支持了未來車聯網發展和行業業務需求，而這一切隻是英特爾助力交通運輸行業轉型、企業業務升級的一個“小”體現的縮影。
原文發布時間為：2017-03-28
本文來自雲棲社區合作夥伴“大數據文摘”，了解相關信息可以關注“BigDataDigest”微信公眾號
最後更新：2017-05-22 14:33:28