閱讀163 返回首頁    go 魔獸


kafka用戶遷移__常見問題_日誌服務-阿裏雲

Kafka是分布式消息係統,由於其高吞吐和水平擴展,被廣泛使用於消息的發布和訂閱。以開源軟件的方式提供,各用戶可以根據需要搭建Kafka集群。

日誌服務(Log Service):是基於飛天Pangu構建的針對日誌平台化服務。服務提供各種類型日誌的實時收集,存儲,分發及實時查詢能力。通過標準話的Restful API對外提供服務。

Log Service Loghub提供公共的日誌收集、分發通道,用戶如果不想自己搭建、運維kafka集群,可以使用Log Service LogHub功能。

Log Service Loghub & Kafka 概念映射

概念 Kafka Loghub
存儲對象 topic logstore
水平分區 partition shard
數據消費位置 offset cursor

Loghub & Kafka 功能比較

功能 Kafka LogHub
使用依賴 自建或共享Kafka集群 Log Service服務
通信協議 TCP 打通網絡 Http (restful API),80端口
訪問控製 基於雲賬號的簽名認證+訪問控製
動態擴容 暫無 支持動態shard個數彈性伸縮(Merge/Split),對用戶無影響
多租戶Qos 暫無 基於shard的標準化流控
數據拷貝數 用戶自定義 暫不開放,默認3份拷貝
failover/replication 調用工具完成 自動,用戶無感知
擴容/升級 調用工具完成,影響服務 用戶無感知
寫入模式 round robin/key hash 暫隻支持round robin/key hash
當前消費位置 保存在kafka集群的zookeeper 服務端維護、無需關心

最後更新:2016-11-23 17:16:06

  上一篇:go 日誌服務監控指標__常見問題_日誌服務-阿裏雲
  下一篇:go 功能實時性__常見問題_日誌服務-阿裏雲