日誌消費與查詢區別__常見問題_日誌服務-阿裏雲
日誌服務提供了兩項功能都和“讀”有關:
日誌收集與消費(LogHub):提供公共的日誌收集、分發通道。全量數據順序(FIFO)讀寫,提供類似Kafka的功能
- 每個LogStore有一個或多個Shard,數據寫入時,隨機落到某一個shard中
- 可以從指定shard中,按照日誌寫入shard的順序批量讀取日誌
- 可以根據server端接收日誌的時間,設置批量拉取shard日誌的起始位置(cursor)
- 日誌在LogHub中,默認保留2天時間,在此期間,日誌可消費
日誌查詢(Index):在LogHub基礎上提供海量日誌查詢功能,根據關鍵詞的數據隨機查詢
- 通過關鍵詞查找,隻抓取符合要求的數據
- 支持關鍵詞 AND、NOT、OR的布爾組合
- 數據查詢不區分shard
兩者區別:
功能 | 日誌查詢(LogSearch) | 日誌收集與消費(LogHub) |
---|---|---|
關鍵詞查找 | 支持 | 不支持 |
小量數據讀取 | 快 | 快 |
全量數據讀取 | 慢(100條日誌100ms,不建議這樣使用) | 快 (1MB日誌10ms,推薦方式) |
讀取是否區分topic | 區分 | 不區分,隻以shard作為標識 |
讀取是否區分shard | 不區分,查詢所有shard | 區分,單次讀取需要指定shard |
費用 | 較高 | 低 |
適用場景 | 監控、問題調查等需要過濾數據的場景 | 流式計算、批量處理等全量處理場景 |
最後更新:2016-11-24 11:23:47
上一篇:
API及SDK__常見問題_日誌服務-阿裏雲
下一篇:
日誌服務監控指標__常見問題_日誌服務-阿裏雲
修改伸縮組__伸縮組_用戶指南_彈性伸縮-阿裏雲
專有網絡__用戶指南_E-MapReduce-阿裏雲
查看鏡像列表__鏡像與模板管理_用戶指南_容器服務-阿裏雲
做世界雲計算的“兩極”,阿裏雲如何跨過“企業關”
新建虛擬邊界路由器__高速通道相關接口_API 參考_雲服務器 ECS-阿裏雲
應用_阿裏雲幫助中心-阿裏雲,領先的雲計算服務提供商
訂閱服務__使用說明_用戶手冊_雲服務總線 CSB-阿裏雲
Dubbo 開發注意事項__EDAS 中的 Dubbo 開發_開發者指南_企業級分布式應用服務 EDAS-阿裏雲
curl正常但健康檢查異常__異常排查_負載均衡-阿裏雲
查詢CC數據__資源監控接口_API 手冊_CDN-阿裏雲
相關內容
常見錯誤說明__附錄_大數據計算服務-阿裏雲
發送短信接口__API使用手冊_短信服務-阿裏雲
接口文檔__Android_安全組件教程_移動安全-阿裏雲
運營商錯誤碼(聯通)__常見問題_短信服務-阿裏雲
設置短信模板__使用手冊_短信服務-阿裏雲
OSS 權限問題及排查__常見錯誤及排除_最佳實踐_對象存儲 OSS-阿裏雲
消息通知__操作指南_批量計算-阿裏雲
設備端快速接入(MQTT)__快速開始_阿裏雲物聯網套件-阿裏雲
查詢API調用流量數據__API管理相關接口_API_API 網關-阿裏雲
使用STS訪問__JavaScript-SDK_SDK 參考_對象存儲 OSS-阿裏雲