Alibaba Cloud の Confluent Data Streaming サービス
Alibaba Cloud は Confluent と連携し、Apache Kafka をベースとしたデータストリーミングソリューションを提供しています。継続的なリアルタイムストリームとしてデータへのアクセス、保存、管理を容易に行えます。煩雑な管理やモニタリング作業なしに、Kafka のエンタープライズグレード機能をすべて活用でき、大規模なデータストリームのリアルタイム処理、フィルタリング、分析をエンタープライズグレードのセキュリティのもとで実現します。Confluent Data Streaming は、金融サービス、オムニチャネルリテール、自動運転車製造、不正検知、マイクロサービス、IoT デバイスなど、さまざまな業界の幅広いユースケースで活用されています。
メリット
-
Kafka ベースのフルマネージドストリーミングサービス
豊富なコネクタエコシステム、CI/CD によるコンテナ化された統合・デリバリー、DevOps 自動化を備えた Kafka のエンタープライズグレードのデータストリーミング機能を、Alibaba Cloud の高いスケーラビリティとセキュリティを兼ね備えたクラウド環境で活用できます。
-
高いクラスタースケーラビリティとパフォーマンス
大量データ蓄積シナリオにおいて、メッセージを永続的にキューイングしてクラスターの高スループットを確保します。自動検査・運用保守システムにより、99.9% の高いサービス可用性を保証します。
-
容易でコスト効率に優れた運用
コアリンクのヘルスチェックやクラスターの自動診断機能を提供します。コンシューマーグループごとにメッセージ蓄積のアラートルールを設定できます。包括的な API により、さまざまなリソースを管理できます。
-
Kafka のプロフェッショナルサポート
24 時間体制のオンラインサポートにより、開発ライフサイクル全体を通じてアプリケーションのスケーラビリティを維持し、潜在的な問題を未然に防ぎます。
-
Apache Kafka の商用プロダクト
Confluent のストリーム処理に関する先端技術と、Apache Kafka へのコード貢献率 80% の実績を融合し、Kafka テクノロジーを最適化することで、安全で信頼性の高いエンタープライズグレードのストリーム処理プラットフォームを実現します。
-
シームレスな移行ですぐに利用開始
フルマネージドですぐに使える Confluent Platform を提供し、コード変更なしで既存ビジネスをシームレスに移行できます。移行コストと技術リスクを大幅に削減し、柔軟で高可用性のサービスを実現します。
特長
マルチ言語開発
Java、Python、Scala など、主要なプログラミング言語を幅広くサポートしています。
充実のビルトインエコシステム
エンタープライズグレードのコネクタ、MQTT ブローカー、Schema Registry を提供します。
Apache Kafka との互換性
Apache Kafka のコア機能をベースに構築され、Apache Kafka と完全に互換性があります。
KsqlDB
イベントストリーミングデータベースを活用した軽量 SQL により、ストリーム処理アプリケーションの構築を大幅に簡素化します。
エラスティッククラウドリソース
エラスティックなコンピューティングリソースとストレージリソースを提供します。
エンタープライズグレードのセキュリティ
SSL、ロールベースアクセス制御 (RBAC)、LDAP をサポートしています。
エンタープライズ向けアフターサポート
年中無休 24 時間体制のテクニカルサポートを提供します。
Alibaba Cloud サービスとの連携
Realtime Compute for Apache Flink や E-MapReduce (EMR) などの Alibaba Cloud サービスを利用して、データの取り込みと分散コンピューティングを実行できます。
Confluent Data Streaming の仕組み
お客様の課題
分散アプリケーション、データストア、システム、そして膨大なデータは、タイムリーなインサイトを得るためのデータ分析に課題をもたらします。硬直的なデータアーキテクチャは不要な初期コスト、アプリの遅延、ダウンタイムを引き起こします。
ソリューション
-
本ソリューションは Apache Kafka を活用し、ストリーム処理とリアルタイムのデータ抽出・変換・ロード (ETL) 機能を提供することで、適切かつタイムリーな分析やビジネスインテリジェンスアプリケーションを推進します。
Alibaba Cloud Kubernetes 環境上の Kafka は、Control Center などのエンタープライズ機能を備え、クラスターのモニタリングと DevOps を強化します。また、ロールベースアクセス制御 (RBAC) セキュリティモデルと LDAP を提供し、エンタープライズレベルのセキュリティを実現します。
KsqlDB は Apache Kafka をベースとしたイベントストリーミングアプリケーションの構築を支援します。コネクタはエコシステム全体をカバーし、SaaS プラットフォーム、アプリ、デバイス、データベースへの安全で効率的なデータアクセスを提供します。
Schema Registry は一貫したデータフォーマット、ポリシーの一元管理、データガバナンスを実現し、データストレージの効率とデータストリーミングのパフォーマンスを向上させます。
ユースケース
データ流動性
ApsaraMQ for Confluent を使用すると、複数のクラウドサービスやオンプレミス環境のデータを統合し、データストリームをリアルタイムに処理・分析できます。ハイブリッドクラウド環境でのデータの整合性と高可用性を確保します。また、統一された UI により、ハイブリッドクラウドの運用管理を簡素化します。
AI
AI モデルの有効性には、データの品質と適時性が不可欠です。ApsaraMQ for Confluent はストリーム処理プラットフォームとして、データの適時性、関連性、管理容易性、信頼性を確保し、AI システムとアプリケーションの大規模な本番運用とデリバリーを支えます。
カスタマーエクスペリエンス
ApsaraMQ for Confluent は、さまざまなデータソースからリアルタイムのデータストリームを統合し、匿名化、加工、分析を行います。これにより、データの包括的かつリアルタイムな統合ビューを提供します。ApsaraMQ for Confluent でイベント駆動型アプリケーションを構築し、リアルタイムに応答するカスタマイズされたサービスと体験を実現できます。
イベント駆動マイクロサービス
疎結合なマイクロサービスアーキテクチャにより、効率的にイノベーションを推進できます。ApsaraMQ for Confluent のマイクロサービスを活用して、サービス間のプロトコル標準を統一し、データの個別管理を防止します。
エディション
| 項目 | Professional Edition | Enterprise Edition |
|---|---|---|
| 環境デプロイ | Stage/Product | Stage/Product |
| マルチゾーンデプロイ | マルチアベイラビリティゾーン | マルチアベイラビリティゾーン |
| Schema Registry | 対応 | 対応 |
| KsqlDB | 対応 | 対応 |
| Connector | OpenSource Connectors | All Connectors |
| KafkaRestProxy | 対応 | 対応 |
| Cluster Linking | ソースとして対応 | ソース & デスティネーション |
| Schema Linking | 対応 | 対応 |
| ユーザー管理 | プリセット LDAP | プリセット LDAP およびカスタム LDAP |
| 認証方式 | SASL_SSL | SASL_SSL |
| 権限管理 | ACL & RBAC | ACL & RBAC |
| Exactly-once セマンティクス | 対応 | 対応 |
| キーベースのデータストレージ圧縮 | 対応 | 対応 |
| GUI 管理インターフェース | 対応 | 対応 |
| ビジネスメトリクス (Prometheus) | 対応 | 対応 |
| Simple Log Service (SLS) | 対応 | 対応 |
| Support | 通常サポート | Alibaba Cloud エキスパートサービス |
| サービス保証 | 99.9% | 99.9% |
Confluent との提携
Confluent はデータインモーションの技術に特化した企業です。Confluent のクラウドネイティブプラットフォームは、現代の企業にとって基盤となる存在になりつつあります。リアルタイムデータを解放し、企業の中枢神経として機能するよう設計されており、すべてのアプリケーションをリアルタイムストリームで接続し、ビジネスで起こるあらゆる事象にインテリジェントに対応できます。Confluent と Alibaba Cloud の提携により、堅牢かつ安全なクラウド環境で絶え間なく流れるデータの力を最大限に活用し、現代のデジタル世界でイノベーションと成功を実現できます。
