173
人物
京東數據可視化係統的建設之路
背景概述
京東商城流量分析有以下幾個關鍵時間節點：
2007年基於Google Analytics， 2011年開始京東獨立監測， 2015年1月流量可視化產品應運而生， 2016年豐富產品使用場景打造出數據可視化係統。
這一探索經曆了由依賴外部數據產品到數據產品獨立自研，再到數據產品創新化豐富化智能化發展的過程。目前基於dataflow實時計算引擎的數據可視化係統主要產品包括：流量可視化、實時營銷分析、京東易表、京東視界等，本文將對現有數據可視化係統相關產品進行梳理與簡要介紹，描繪出基礎平台數據可視化產品的全景圖。
產品全景圖
數據可視化係統基於dataflow實時數據引擎，根據不同的用戶需求，研發出針對京東商城頁麵流量分析、營銷效果分析的流量可視化及營銷分析產品；並在此基礎上強化報表的輸出與展現，研發出京東易表這一產品；同時在以上產品的積澱下，拓展產品應用場景，推出將作戰指揮室、生產可視化、實時競速平台等集成的京東視界，就此數據可視化係統建立，打造成為基礎平台實時數據計算技術與可視化技術結合的產品體係。下麵將對目前數據可視化係統內主要產品進行介紹：
流量可視化
產品概述
流量可視化是一款基於網站流量數據分析、訪客行為與轉化分析的產品，流量可視化插件是此係統的重要組件，安裝此瀏覽器插件後，可直觀、便捷、實時地查看各項分析數據，以創新化的實時數據展現形式，支持運營決策、網站優化等。目前流量可視化服務於內部用戶及外部商家用戶，覆蓋京東PC端和無線端頁麵，保證數據完整性；同時流量可視化產品基於完善的權限管理係統，結合多種授權方式，保證數據的安全性；此外，流量可視化產品開放多種數據下載與訂閱方式，保證數據時效性。
流量可視化頁麵級展現
流量可視化模塊級展現
注：以上頁麵數據均為測試數據
係統視圖
以上為流量可視化目前係統視圖，全方位建立實時流量展示與分析的產品框架。
功能概述
1.數據
頁麵數據查看：頁麵每日趨勢、今日實時數據在對應頁麵直觀展現。今日實時和曆史的PV 、UV、訂單轉化率等數據毫秒級刷新，數據實時掌控，各個資源位的點擊量，一目了然。
多指標綜合分析：記錄指標包括PV、UV、訪次、引入訂單量、引入下單用戶數、引入商品數量、引入訂單金額、訂單轉化率等在內，可進行點擊分析、趨勢分析、上遊分析等，數據詳細記錄全麵，針對頁麵進行全方位綜合診斷。
2.展示
郵件訂閱：訂閱自動推送，自助配置，保證數據時效性；滿足個性化數據獲取需求，多樣化數據推送方式，輕鬆獲取日常數據。此外，郵件訂閱與京東易表產品打通，豐富現有數據報表的展現形式，提升用戶進行數據分析的效率。
用戶行為分析：點擊熱力圖、注意力分布圖、到達深度圖、渠道熱力圖，多角度綜合分析，全方位了解用戶。
3.平台
內外部平台打通：除了服務於內部運營、數據分析、采銷等人員，流量可視化同時服務商家，豐富現有產品應用場景，根據商家需求打造個性化針對性數據產品。
多平台覆蓋：覆蓋PC、無線端（手機網頁、APP、微信手Q）數據全平台展示，保證數據完整性。
4.權限管理
完善的權限管理：自動授權與手動授權結合，多種授權方式，保證數據安全性。同時打造多種授權用戶角色，促進權限授予的自動化自主化。
權限一脈相承：流量可視化與其他數據可視化產品授權機製聯通，避免權限的冗餘及重複操作，提升整體效率，保障用戶體驗。
產品價值
目前流量可視化產品服務於京東內部運營、采銷、市場、策劃、用戶研究、數據分析等不同角色的員工，涉及近100個部門及近4000名內部員工，通過實時數據，幫助他們進行日常頁麵流量的分析管理，對於頁麵及活動等進行及時調整。同時，流量可視化商家版插件服務於京東商城所有外部商家，對於自己創建的活動進行流量數據監控與管理，為商家提供更便捷的店鋪管理手段。
流量可視化產品通過創新化的實時數據展示方式，豐富了現有流量管理的用戶使用場景，同時提升了整體流量分析與管理的效率。
營銷分析
產品概述
營銷分析是基於市場營銷的一款產品，通過分析投放廣告的實時來源數據，可以及時的檢測到廣告是否準時投放，查看此次投放為京東全站以及各個事業部帶來的整體流量和訂單等指標。並且可以根據實時監控到的流量和銷量，動態調整資源，提高整體促銷的把控力，也可以根據實時的流量數據，掌握投放廣告的節奏，調整投放素材，來提高廣告的投放效果。
頁麵展示
1.PC實時數據展現
全站粒度（天）--象限圖&數據表
url粒度（小時）--數據表
2.M站實時數據展現
全站粒度（天）--象限圖&數據表
注：以上頁麵數據均為測試數據
以上為營銷分析目前頁麵展示，全方位建立實時流量展示與分析的產品框架。
功能概述
1.數據
PC與M站實時數據同步：營銷分析針對PC及M站同步開放，可展示截止目前為止（天）和每個時間段（小時）的各個投放渠道帶來的流量和訂單數據，按照一二三四級投放渠道、廣告位id和項目id維度進行統計，並提供了當前的PV、UV、有效UV、訪次，全品類及某一品類的引入訂單量、引入訂單金額、引入下單用戶數、引入商品數量、訂單轉化率、訪次價值等指標的分析。
全站粒度、url粒度細分：數據分析粒度細分明確，保證數據的針對性及精確性。
2.平台
目前營銷分析實現了PC端與無線端的同步開放，保證數據的完整性。同時，將根據內外部用戶的需求，不斷細化與完善所展示的指標，保證產品的適用性。
3.權限管理
營銷分析目前同流量可視化權限打通，提升數據權限開通的效率，保證權限體係的適用性。同時，針對京東內部用戶、外部商家用戶不同的用戶類型，在流量可視化權限管理的基礎上，對營銷分析的個性化權限進行拆分，從而可通過同一套權限管理體係有效保障數據安全性。
京東易表
產品概述
京東易表是一款將數據轉化成直觀圖表的數據可視化產品。
易表可以用於配置日報/周報/月報等周期性報表，也可以用於在產品係統中的圖表展現需求。通過豐富的可視化效果，mysql、impala、es等眾多數據源的支持、簡單易用的操作方式，實現在2個小時內即可配置完成一張數據報表。
此外，易表支持權限控製和私有部署，保證數據安全；支持郵件訂閱和數據下載等分享方式，在保證數據安全的前提下滿足分享需求；支持定製開發，滿足個性化場景。
功能概述
1.豐富的數據可視化效果
支持19種圖表、4種查詢和靈活的報表布局，采用echarts3空間靈活樣式轉化，滿足不同場景需要。19種圖表包括柱形圖、堆積柱形圖、柱狀百分比、折線圖、折線堆積圖、折線百分比、麵積圖、堆積麵積圖、麵積百分比、條形圖、堆積條形圖、條形百分比、單Y軸組合圖、雙Y軸組合圖、餅狀圖、環形圖、指標卡、普通表格、分組表格4種查詢，多樣布局。
2.強大的數據連接與計算
支持MYSQL、ORACLE、DB2、IMPALA、SQLSERVER、POSTGRESQL、ES等多種數據源接入，滿足T+1和實時數據的不同需求。更多的數據源接入也正在開發中。
支持級聯查詢、下拉樹查詢、數據下鑽、條件標識、求和、平均值、計數等數據計算功能。
3.安心的數據安全與分享
插拔式權限適配，滿足不同場景的多種權限需求，支持定製開發對接個性化權限場景。同時支持私有化部署，全麵保障數據安全。
滿足數據安全的前提下，支持郵件訂閱等分享方式。
4.簡單的操作方式
隻需要熟悉SQL，便可快速連接數據（不熟悉SQL也沒有關係，專人指導配置數據）。再通過拖拽的操作方式，快速配置報表，操作簡單，快速實現報表開發。
產品價值
易表致力於通過數據可視化，最大化數據的價值，使數據更容易理解，更多人理解，更多場景運用。
易表通過豐富的可視化圖表，使各種數據用更加直觀的方式呈現；同時通過權限控製和分享機製，使可視化的數據成為團隊溝通的橋梁；並且用簡單易用的操作方式，使數據更加普及，效率更加提升。
京東視界
產品概述
京東視界既是京東總部A座1層實時數據中心的名字，同時也是京東大促作戰指揮室、智能生產可視化、生鮮溯源、實時競速等係統的集合。京東視界通過對銷售運營、物流等實時數據及實時影像的展示，打造成為實時數據可視化輸出最具創新性的產品。京東視界產品做到實時數據與生產畫麵個性化配置、頁麵風格動態化選擇、控製端便捷化操作，從大屏的展現，到中屏的配置，再到小屏的控製，一體化發展。京東視界產品不僅僅服務於京東內部用戶，同時將開放服務於外部商家，拓展更多的產品使用場景。
頁麵展示
實施作戰指揮室效果圖
智能生產可視化係統
實時競速排行榜
功能概述
數據接入、控製，可配置化
多種數據源接入，滿足各類大數據實時計算、監控的需求；針對不同的組件，可以分別設置該組件對應數據的刷新頻率。
豐富數據展示效果，數據炫麗化呈現
多種圖表組件，支撐多種數據類型的分析展示；多種可視化布局模板，由用戶自由布局；同時通過設置不同的屏幕尺寸，可實現在大中小不同終端上的完美投放展示。
數據多場景化輸出，全麵運作
京東視界集實時作戰指揮室、實時競速平台、智能可視化監控係統等於一體，創造了實時數據的創新化應用場景，滿足京東各部門以及商家不同的使用需求。同時，可實現在大屏上炫酷呈現，在中屏上動態配置，在小屏上便捷操作的聯動。
多端協作，便捷化操作
所見即所得式的配置方式，在PC上通過拖拽可快速完成可視化應用的創建；同時在便攜式移動設備上不僅可以靈活操控，切換，還可以進行數據下鑽的查詢以及分享操作。
權限控製，保障數據安全
京東視界同步集成數據可視化權限管理係統，通過共性與個性的授權方式的結合，完成有效的權限控製。
產品價值
大屏投放構建了一個炫酷的實時動態的全景視圖，便於京東各部門及外部商家對於全局指標的共享，更有效的進行電商大促的作戰指揮，同時作為一個創新型的產品展示，也是對外宣傳，講解參觀的一個窗口。
中屏投放本著實用的原則，可以在PC、TV、投影上根據不同需要，靈活投放，實時個性化配置，即時共享。
小屏投放本著方便的原則，可以隨時查看實時動態，對運營和係統運行進行隨時監控，靈活操作，實時便捷。
降低可視化應用的開發成本，提升開發效率，非專業的工程師也可以通過圖形化的界麵輕鬆搭建專業水準的可視化應用。
未來規劃
數據可視化係統在目前的產品體係基礎上，將做到：
產品互補互聯，一體化發展：數據可視化係統內產品之間有著相互關聯的關係，彼此支撐，共同保障京東數據可視化展現的完整性與一致性，提升數據使用效率，創新化數據展示方式。
數據安全有效把控，權限管理統一化：數據可視化係統內所有數據產品均設置完善的權限管理體係，保證數據的安全性，對於權限統一把控，同時各個產品根據自己的獨特使用場景，采取不同的授權方式，在共性中保證個性化。
產品動態可配置，自動化智能化發展：根據京東內部不同事業部的不同數據需求及外部商家不同的營銷需求，數據可視化係統將開放自主配置的功能，提升整體產品開發效率，並結合基礎平台的機器學習等技術，提升數據使用的效率與針對性。
最後更新：2017-10-08 01:38:57