當前位置:
首頁 > 知識 > 消息隊列CKafka

消息隊列CKafka

消息隊列 CKafka(Cloud Kafka)是一個分散式、高吞吐量、高可擴展性的消息系統,100%兼容開源 Kafka API(0.9、0.10版本)。CKafka 基於發布/訂閱模式,通過消息解耦,使生產者和消費者非同步交互,無需彼此等待。CKafka 具有數據壓縮、同時支持離線和實時數據處理等優點,適用於日誌壓縮收集、監控數據聚合等場景。

功能

消息隊列 CKafka 解耦生產和消費,提供可擴展、低延遲、高性能消息傳輸能力。

收發解耦

消息隊列 CKafka 能夠有效解耦生產者、消費者之間的關係,允許用戶獨立的擴展或修改生產消費之間的處理過程,只要確保它們遵守同樣的介面約束即可。

因此,消息隊列 CKafka 可以平滑替換傳統消息中間件,在起到解耦生產者、消費者和緩存未處理消息的同時,消息隊列 CKafka 擁有更大的吞吐量、更強的分區複製機制和容錯機制。

削峰填谷

在業務訪問量激增的情況下,系統應對突發的能力至關重要。但這種突發流量的情況並不常見,如果以業務訪問量峰值為標準投入資源則會導致資源的浪費。

使用消息隊列 CKafka 可以保證系統關鍵組件具有應對突發訪問壓力的能力,不會因為超負荷請求而導致系統完全崩潰。

水平擴展

由於消息的處理過程被解耦,只需要水平擴展處理過程,即可有效增加消息的入隊效率和處理效率,十分靈活。

在具體實現上,消息隊列 CKafka 一個 Topic 可分多個 Partition, 並分布在一個或多個 Broker 上。

一個消費者可訂閱其中一個或者多個 Partition,生產者負責將消息均衡分配到對應的 Partition。因此,增加 Broker 可以水平擴展集群,一般 Broker 數量越多,集群吞吐率越高。

一次生產多次消費

消息隊列 CKafka 支持隊列、發布訂閱多種模式,Topic 支持分區(Partition)概念,不同分區可以落在不同 Broker, 有效增加吞吐量;此外,消息隊列 CKafka 支持發布/訂閱模式和多隊列模式,採用 Consumer Group 的策略,topic 在一個節點僅存儲一份數據,不同 Consumer Group 維護各自消費記錄數據。保證一次生產,多個 Consumer Group 消費的場景。

喜歡這篇文章嗎?立刻分享出去讓更多人知道吧!

本站內容充實豐富,博大精深,小編精選每日熱門資訊,隨時更新,點擊「搶先收到最新資訊」瀏覽吧!


請您繼續閱讀更多來自 昱唯 的精彩文章:

加速樂(CDN內容分發)
專用宿主機CDH

TAG:昱唯 |