Alibaba Cloud ApsaraMQ for Kafka_Apache Kafka_大數據分析

0.0.201

ApsaraMQ for Kafka Play Video

Apache Kafka 全託管服務開箱即用，助您快速建立大數據分析數據通道。

立即購買管理主控台聯絡銷售團隊

{"moduleinfo":{"rightBtn":{"text":"立即購買","url":"https://account.alibabacloud.com/login/login.htm?oauth_callback=https%3A%2F%2Fcommon-buy-intl.aliyun.com%2F%3FcommodityCode%3Dalikafka_pre_public_intl%23%2Fbuy","partnerAddress":"http://bca.org/kojubtqke","output4Partner":false,"hideForReseller":true},"iframeResizerUrl":"//g.alicdn.com/aliyun/www-product-ecs-price/0.0.18/iframeResizer.js","highlightAutoNav":true},"nav":[{"txt":"產品概覽","anchor":[{"name":"hmod-alicloud-product-ecs-advanced"},{"name":"hmod-alicloud-product-ecs-resource"},{"name":"hmod-wb-alicloud-database-news__0-0-7"},{"name":"hmod-wb-alicloud-database-with-text__0-0-2"},{"name":"hmod-ace-alicloud-floor-icon"}],"newWindow":false,"newAddress":"/","partnerAddress":"http://bca.org/kojubtqke","output4Partner":false,"highlight":true},{"txt":"產品定價","newAddress":"","anchor":[{"name":"hmod-alicloud-product-v3-pricing__0-0-21"}],"output4Partner":false},{"txt":"產品檔案","anchor":[],"newWindow":true,"output4Partner":false,"newAddress":"https://www.alibabacloud.com/help/zh/product/68138.htm","partnerAddress":"http://qccyivh.org/jkdirgro"}],"$root":{"moduleinfo":{"rightBtn":{"text":"立即購買","url":"https://account.alibabacloud.com/login/login.htm?oauth_callback=https%3A%2F%2Fcommon-buy-intl.aliyun.com%2F%3FcommodityCode%3Dalikafka_pre_public_intl%23%2Fbuy","partnerAddress":"http://bca.org/kojubtqke","output4Partner":false,"hideForReseller":true},"iframeResizerUrl":"//g.alicdn.com/aliyun/www-product-ecs-price/0.0.18/iframeResizer.js","highlightAutoNav":true},"nav":[{"txt":"產品概覽","anchor":[{"name":"hmod-alicloud-product-ecs-advanced"},{"name":"hmod-alicloud-product-ecs-resource"},{"name":"hmod-wb-alicloud-database-news__0-0-7"},{"name":"hmod-wb-alicloud-database-with-text__0-0-2"},{"name":"hmod-ace-alicloud-floor-icon"}],"newWindow":false,"newAddress":"/","partnerAddress":"http://bca.org/kojubtqke","output4Partner":false,"highlight":true},{"txt":"產品定價","newAddress":"","anchor":[{"name":"hmod-alicloud-product-v3-pricing__0-0-21"}],"output4Partner":false},{"txt":"產品檔案","anchor":[],"newWindow":true,"output4Partner":false,"newAddress":"https://www.alibabacloud.com/help/zh/product/68138.htm","partnerAddress":"http://qccyivh.org/jkdirgro"}]},"$moduleId":"3754212000"}

產品概覽
產品概覽
產品概覽
產品定價
產品定價
產品檔案
產品檔案

立即購買

輕鬆構建 Kafka 群集

阿里雲 ApsaraMQ for Kafka 為您提供增強型全託管 Apache Kafka 群集服務，免除群集配置、故障營運維修、修補程式升級、數據持久化、彈性伸縮、資源管控、監控警報等基礎建設難題，讓您盡享更便捷的排查體驗，可將更多精力投放到應用程式開發之中。

開箱即用，100% 兼容開源

開箱即用，無縫遷移，助您業務快速「上雲」。

全托管服務

營運維修團隊專業，且經驗豐富，可提供體系化的產品營運維修服務。

高度可用

阿里雲訊息產品研發與性能優化團隊進一步優化開源產品長久以來的痛點，提供更優質服務。

無需繁瑣配置，快速部署業務

開源自建的日常營運維修難度高，配置繁瑣，您可能經常面臨以下挑戰：

數據丟失與可用性抉擇
營運維修依賴群集
須保養機器狀態
須保養硬件環境
規格難以變更
開源產品帶來的未知異常

Alibaba Cloud Message Queue for Apache Kafka 特色：

支援自動巡檢、自動警告、自我恢復機制
磁碟到達 85% 水位後自動清理
系統自動修復
支援秒級一鍵擴充容量
阿里雲為您定位並處理開源故障

精心設計的功能

開箱即用，100% 兼容開源

開箱即用，無縫遷移，助您業務快速「上雲」。

開箱即用

100% 兼容開源社群 Kafka (0.10.x～ 2.2.x 版本)，全面兼容 Kafka 開源客戶端。

無縫遷移

以現有開源 Apache Kafka 生態代碼為基礎，無需任何改造，即可無縫遷移「上雲」。

生態豐富

開源結合雲端服務，全面融合 Kafka 開源社群生態，以及阿里雲平台大數據產品生態。

全托管服務

營運維修團隊專業，且經驗豐富，可提供體系化的產品營運維修服務，讓您專注建立流動應用程式，而毋須費心管理 Apache Kafka 環境的營運開支。

免營運維修

Alibaba Cloud Message Queue for Apache Kafka 可為您管理 Apache Kafka 群集和 Apache ZooKeeper 節點的預置、配置和維護。

HouseKeeping (健康巡檢組件)

Kafka 核心鏈路運行時會進行巡檢，每分鐘全面掃描診斷群集一次，並發佈健康預警，保障底層機器安全。

業務監控與警告

支援實例、訊息堆積、TPS 等多維度監控與警告設置，助您及時發現問題。

高度可用

阿里雲訊息產品研發與性能優化團隊進一步優化開源產品長久以來的痛點，提供更優質服務。

高度可靠，高度可用

跨可用區域、多重副本數據冗餘，數據可靠性達 99.999999%，服務可用性達 99.9%。

海量訊息堆積

在海量訊息堆積的情況下，始終保持 Kafka 群集訊息收發的高吞吐能力。

彈性伸縮

可根據業務規模按需擴充容量；Broker、Topic、分區橫向伸縮，上層業務無感知。

數據安全

提供鑑權與授權機制、主子帳號等功能，帶來企業級安全防護。

存取控制

VPC 網絡隔離，對每次訊息收發請求進行安全存取控制，確保訊息安全性。

主子帳號

全面支援 RAM 主子帳號、黑白名單、STS 等功能，提供授權能力。

數據安全

SASL 用戶身分認證與 SSL 加密傳輸，確保數據在傳輸過程中不被竊取或篡改，從而保證數據安全。

構建日誌分析平台
網站活動追蹤場景
數據中轉樞紐

構建日誌分析平台

日誌聚合

Kafka 效能極高，亦因其特性使然，非常適合作為「日誌收集中心」：
1. 採集日誌時，業務無感知；
2. Hadoop/ODPS 等離線倉庫儲存與 Storm/Spark 等實時在線分析對接；

主要解決的問題

應用程式與分析解耦 -構建應用程式系統與分析系統的橋樑，並為兩者之間的關聯解耦。

在線/離線分析系統 - 支援實時在線分析系統、以及類似 Hadoop 等的離線分析系統。

網站活動追蹤場景

高吞吐量，大數據整合

Alibaba Cloud Message Queue for Apache Kafka 可實時收集網站活動數據 (包括用戶瀏覽頁面、搜尋及其他行為等)。
發布-訂閱模式可根據不同業務數據類型，將訊息發佈到不同 Topic；亦可透過訂閱訊息的實時投遞，將訊息流應用於實時監控與業務分析，又或加載到 Hadoop、ODPS 等離線數據庫系統，進行離線處理。

主要解決的問題

高吞吐量
-網站全體用戶所產生的行為資訊極為龐大，需要極高吞吐量，方足以支援。

大數據分析
- 可無縫堆積 Kafka 開源生態包含的大數據產品，包括對接 Storm/Spark 實時流動運算引擎，亦可對接 Hadoop/ODPS 大數據運算引擎，構建大數據架構的過程極致便捷。

數據中轉樞紐

多路轉發

您可利用 Kafka 作為數據中轉樞紐，將同份數據導入不同專用系統中，例如 KV 儲存 (HBase)、搜尋 (ElasticSearch)、流動處理 (Storm/Spark Streaming/Samza)、時序數據庫 (OpenTSDB) 等。

主要解決的問題

一對多消費模型-發佈/訂閱模型支援同份數據集同時被消費多次。

同時支援實時與批量處理-內部數據持久性及 PageCache；在不損耗性能的情況下，可同時傳遞多個運算引擎。

產品定價

2020 年 5 月 1 日 00:00 (UTC+08:00) 後進行商業化程序，並開始收費。

Alibaba Cloud Message Queue for Apache Kafka 支援訂閱購買

具體計費方式：按此詳閱文件

版本

版本分為：標準版 (邏輯隔離共享群集) 和專業版 (物理專享版本)

表 1：標準版與專業版的差別：

版本	標準版	專業版
隔離	邏輯隔離的共享群集	物理專享版本
支援版本	短期內只能支援 0.10.x 系列	支援 0.10.x、1.x、2.x 系列主流版本
災難修復	僅支援單可用區域	災難修復可靠度更高；同城災難修復支援多可用區域部署
營運維修	全託管；提供基礎營運維修特性	高階特性即將上架，包括大量訊息下載、低 RT、更精細監控警報。後續訊息查詢等高階特性亦會先在專業版上提供服務。
容量	基礎 Topic 及分區數量	支援更大規模的 Topic 數量與分區數量

計費公式

費用總計 = (流量峰值單價 + 磁碟容量單價 x 購買磁碟容量/100 + Topic 單價 x 增加的 Topic 數量) x 月數

表 2-1：流量峰值計費規則 (標準版)

流量峰值 (MB/s)	Topic 數量 (個)	分區數量 (個)	Region1 (USD/月)	Region2 (USD/月)	Region3 (USD/月)
20	50	400	250	370	340
30	50	500	360	530	480
60	80	600	520	760	700
90	100	800	660	960	880
120	150	900	800	1160	1070

表 2-2：流量峰值計費規則 (專業版)

流量峰值 (MB/s)	Topic 數量 (個)	分區數量 (個)	Region1 (USD/月)	Region2 (USD/月)	Region3 (USD/月)
20	50	1100	600	870	800
30	50	1200	780	1040	1040
60	80	1040	1130	1510	1510
90	100	1600	1440	1920	1920
120	150	1800	1750	2330	2330
160	180	2000	2060	2740	2740
200	200	2200	2980	3970	3970
250	250	2500	3430	4570	4570
300	300	3000	3880	5170	5170
600	450	4500	5280	7030	7030
800	500	5000	6220	8280	8280
1000	600	6000	7270	9670	9670
1200	700	7000	8100	10780	10780
1500	800	8000	9500	12640	12640
1800	900	9000	10910	14520	14520
2000	1000	10000	12070	16060	16060