603
技術社區[雲棲]
百度外賣分享的Greenplum技術點
百度外賣的同仁主要分享了他們自己的運維平台，知識點都在平台上，下麵記錄的比較零散，有需要的小夥伴可以留言跟我要PPT～
GPDB在百度外賣的實踐
物理架構：
- 總共60個節點
- 單個節點1T多的數據
- 總空間100T左右
- 目前已經使用80T左右
選型：
前期使用Hadoop平台，上麵計算用Impala，使用過程中，發現Impala無法滿足業務場景下，數據查詢快速返回，經過選型，選擇了Greenplum。
監控平台實踐：
- 分布鍵監控策略 - 分布鍵是否經常用於join；分布鍵數據分布是否均勻
- 角色資源分配 - 根據角色重要性分配資源，對於資源要求高的情況，動態的調整資源
- 鎖 - 根據Greenplum的鎖機製，實現了操作影響範圍提示功能，當操作一個SQL時，提示可能導致的鎖影響範圍
技術點
- 有時候一些滿查詢，從Master殺掉後，在segment依然可以看到，也就是說殺不幹淨，這時候可以使用ps -ax查詢到相關進程並殺掉
Ends～
最後更新：2017-08-24 14:32:23