ApsaraDB for HBase는 고도로 최적화된 NoSQL 데이터베이스(엔터프라이즈 에디션은 Lindorm으로 사용 가능)로 HBase의 커뮤니티 에디션과 완벽하게 호환됩니다. 이러한 호환성 및 Spark, Phoenix, Solr와의 통합 덕분에 ApsaraDB for HBase는 사용하기 쉽고 뛰어난 안정성과 비용 성능을 제공합니다. ApsaraDB for HBase는 실시간 volumetric 데이터 스토리지, 전체 텍스트 인덱싱, 경량 SQL 쿼리, 시공간 및 시리즈 쿼리를 지원하여 높은 처리량과 높은 동시성 시나리오를 쉽게 지원할 수 있습니다.
다른 오픈소스 제품에 비해 ApsaraDB for HBase는 우수한 읽기/쓰기 성능, 재해 복구 기능, 스토리지 효율성 및 응답 레이턴시로 커널에 이르기까지 모두 최적화되어 있습니다. 수치 면에서 읽기/쓰기 성능은 3~7배 향상, RPO는 1분 미만으로 감소, 99% 백분위수 레이턴시는 90% 감소, MTTR은 90% 감소 그리고 압축률은 13배 증가했습니다. ApsaraDB for HBase는 99.9%의 서비스 가동 시간을 보장합니다. ApsaraDB for HBase는 리스크 제어, 추천, 광고, IoT, VoT, 피드 스트리밍, 데이터 시각화 시나리오 등 수요가 많은 산업 애플리케이션에 적합합니다. Alibaba 내부적으로 ApsaraDB for HBase는 이미 Taobao, Alipay, Cainiao를 포함한 Alibaba Group의 여러 핵심 비즈니스에 지원을 제공했습니다.
혜택
-
높은 스토리지 안정성
99.99999999%의 데이터 안정성을 보장하기 위해 6개의 데이터 백업과 3개 이상의 레플리카가 있는 분산 클러스터 아키텍쳐로 구축되었습니다.
-
고가용성
실시간 가용성 모니터링 및 단일 지점 failover 조치가 지원되어 워크로드의 연속성을 보장합니다. 서비스 프로세스 모니터링 및 자동 복구를 통해 몇 초 안에 프로세스를 복구할 수 있습니다.
-
고효율 운영 및 유지 관리
ApsaraDB for HBase는 시각화된 데이터베이스 관리, 모니터링 및 경고를 위한 통합 플랫폼이 탑재되어 있습니다. 고효율 운영 및 유지 관리를 위해 커널이 자동으로 업그레이드되었으며, 해당 웹 콘솔, API 및 다국어 SDK는 클러스터 관리가 용이하도록 설계되었습니다.
-
대폭 향상된 성능
HBase 커뮤니티 에디션의 개선된 버전으로 개발되었습니다. Alibaba Cloud는 커널을 대폭 최적화하여 읽기 및 쓰기 성능을 3~7배 향상시키고 99% 백분위수 레이턴시를 90%, MTTR을 90% 줄였습니다.
특징
최적화된 커널 및 아키텍쳐
무제한 클러스터 확장 및 고도로 최적화된 커널을 갖춘 고가용성 아키텍쳐.
고가용성 아키텍쳐
ApsaraDB for HBase는 마스터가 서로의 백업으로 실행되는 고가용성 아키텍쳐를 채택했습니다. 실시간 가용성 감지로 높은 신뢰성을 보장합니다. 코어 노드에 장애가 발생하면 몇 초 내에 리전을 전환할 수 있습니다.
스토리지 비용 절감
높은 압축률, 콜드 스토리지, 핫 및 콜드 데이터 분리가 지원되어 스토리지 비용을 50% 이상 절감합니다.
클러스터 확장성
각 코어 노드는 초당 최대 100,000개의 쿼리에 응답하고 최대 8TB의 스토리지 공간을 제공할 수 있습니다. 디스크 및 클러스터 크기는 필요에 따라 확장할 수 있습니다. 클러스터는 초당 1,000만 개의 쿼리를 처리하고 페타바이트의 데이터를 저장하기 위해 최대 1,000개의 노드로 확장할 수 있습니다.
낮은 읽기/쓰기 레이턴시
SSD는 고속 읽기 및 쓰기를 지원하는 데 사용됩니다. 0.2KB보다 작은 개별 데이터 항목은 99.9번째 백분위수 레이턴시 3밀리초, 평균 레이턴시 1밀리초로 읽거나 쓸 수 있습니다.
데이터 백업
클러스터 데이터 백업 및 복원, 실시간 증분 데이터 백업이 지원됩니다. RTO(복구 시간 목표)가 1분 미만으로 단축됩니다.
듀얼 클러스터 재해 복구
기본 및 보조 클러스터는 자동 failover에 사용됩니다. 두 클러스터 간의 데이터는 실시간으로 동기화됩니다.
다양한 시나리오 지원
SQL, 시계열, 시공간 및 데이터 검색이 지원됩니다.
SQL 지원
Phoenix SQL 구성 요소는 보조 인덱스 및 표준 SQL 구문을 지원합니다.
Solr 지원
내장된 Solr 구성 요소는 복잡한 검색을 위한 전체 텍스트 인덱스를 지원합니다. 이 구성 요소는 ApsaraDB for HBase에서 Solr로 데이터를 동기화하기 위해 제공됩니다.
네이티브 보조 인덱스
네이티브 보조 인덱스는 Phoenix 인덱스보다 6배 빠르게 읽고 쓸 수 있습니다. 외부 구성 요소를 설치할 필요가 없습니다.
시계열 지원
OpenTSDB 구성 요소는 시계열 데이터를 지원합니다.
시공간 지원
GeoMesa 구성 요소는 시공간 데이터를 지원합니다.
실시간 MOB(중간 크기 개체) 스토리지
10MB 미만의 개체에 대한 실시간 저장 및 액세스가 지원됩니다.
완전 관리형 HBase Analytics Engine
Analytics Engine은 데이터 스트리밍 및 데이터 분석의 사용자 요구를 충족하도록 설계되었습니다.
데이터 스트리밍 지원
Kafka, Log Service 및 Message Queue에서 데이터 수집을 지원하므로 경고 및 ETL(추출, 변환, 로드) 처리가 가능합니다.
다양한 데이터 소스 지원
HBase, OSS(Object Storage Service), RDS 및 MongoDB를 비롯한 다양한 데이터 소스를 지원하므로 복잡한 데이터 분석이 가능합니다.
고성능
오퍼레이터 푸시다운 및 열 가지치기를 지원합니다.
효율적인 운영 및 유지관리
시스템을 최신 버전으로 자동 업그레이드하는 시각화되고 사용하기 쉬운 O&M 플랫폼을 제공합니다.
클라우드의 클러스터 모니터링
클러스터 정보를 실시간으로 모니터링하여 최신 클러스터 정보를 얻을 수 있습니다. 모니터링되는 메트릭에는 CPU 사용률, IOPS, 커넥션, 디스크 공간이 포함됩니다. 이상 징후가 감지되면 경고가 전송됩니다.
시각화된 관리 플랫폼
클러스터를 쉽게 스케일아웃하고 구성을 수정하며, 클러스터를 다시 시작할 수 있도록 시각화된 관리 플랫폼이 제공됩니다.
데이터베이스 커널 버전 관리
취약점을 조기에 수정하기 위해 자동 업그레이드가 지원되므로 커널 버전을 수동으로 관리할 필요가 없습니다. HBase 설정은 시스템 리소스의 활용도를 극대화하도록 최적화되어 있습니다.
시나리오
-
금융 리스크 관리
-
Volumetric 데이터 스토리지 및 분석
-
추천 엔진
-
IoT 시계열 및 공간
-
소셜 피드
-
빠른 MOB 스토리지
-
Volumetric 데이터 유사 일치
-
게임 로그 데이터 처리
-
동영상 데이터 스토리지
-
실시간 데이터 시각화
금융 리스크 관리
정형 및 비정형 데이터 모두 지원
ApsaraDB for HBase는 트랜잭션 데이터, 기업 데이터 및 인터넷에서 크롤링되는 데이터를 집계하고 분석하는 데 도움이 될 수 있습니다. 그런 다음 사기 방지 및 사용자 프로파일링 시스템과 같은 빅데이터 기반 리스크 제어 서비스로 소프트웨어를 개발할 수 있습니다.
혜택
-
낮은 스토리지 비용
ApsaraDB for HBase는 스파스 스토리지 체계를 사용하여 페타바이트 규모의 정형 및 비정형 데이터를 지원합니다. 자세한 정보는 트랙션 기록을 검색해 확인할 수 있습니다.
-
Volumetric 데이터를 위한 HTAP(하이브리드 트랜잭션/분석 처리)
ApsaraDB for HBase를 통해 실시간 OLTP(온라인 트랜잭션 처리)에 Phoenix 및 보조 인덱스를 사용하고 OLAP(온라인 분석 처리)에 Spark를 사용할 수 있습니다.
-
빠른 쓰기를 위한 높은 동시성
기존 B+ 트리와 달리 ApsaraDB for HBase는 LSM(Log-Structured Merge) 기반 스토리지를 지원합니다. 높은 동시성을 기반으로 한 빠른 쓰기를 위해 설계되었습니다.
Volumetric 데이터 스토리지 및 분석
Volumetric 데이터 지원
ApsaraDB for HBase는 volumetric 데이터의 빠른 수집과 증분 데이터의 실시간 동기화를 지원합니다. Spark를 사용하여 volumetric 데이터를 오프라인으로 분석할 수 있습니다.
추천 엔진
최적화된 사용자 프로필 스토리지로 실시간 추천 레이턴시를 밀리초 단위로 단축
사용자 행동 데이터는 실시간으로 저장됩니다. 사용자 데이터를 기반으로 생성된 사용자 프로필을 사용하면 실시간 추천 시스템이 몇 밀리초만에 쿼리에 응답할 수 있습니다.
IoT 시계열 및 공간
고성능 분산 TSDB
내장된 OpenTSDB 구성 요소는 저렴한 비용과 고효율로 시계열 데이터를 처리하기 위해 제공되므로 ApsaraDB for HBase는 IoT, 모니터링 및 K-라인 차트 시나리오에 적합합니다.
혜택
-
저렴한 비용으로 부동 소수점 데이터 처리를 위한 네이티브 OpenTSDB
네이티브 OpenTSDB는 HBase 분산 아키텍쳐를 기반으로 하며 오픈소스 데이터베이스 엔진과 100% 호환되므로 시계열 데이터베이스를 쉽게 확장할 수 있습니다.
-
페타바이트 규모의 시공간 데이터 및 빠른 쓰기를 위한 높은 동시성 지원
스토리지와 컴퓨팅은 분리되어 있으며 빠른 쓰기를 위해 높은 동시성이 지원됩니다. 각 노드는 초당 수십만 개의 쿼리에 응답할 수 있습니다.
-
시공간 인덱스 및 알고리즘
분석 엔진은 공간 채우기 곡선 Z-Order 및 Hilbert를 기반으로 하며 2D 및 3D 시공간 인덱스를 지원합니다.
소셜 피드
Volumetric 소셜 피드 저장
ApsaraDB for HBase를 사용하여 게시물, 기사, 채팅 기록 및 댓글과 같은 volumetric 소셜 피드를 저장할 수 있습니다.
혜택
-
빠른 쓰기를 위한 높은 동시성
기존 B+ 트리와 달리 ApsaraDB for HBase는 LSM(Log-Structured Merge) 기반 스토리지를 지원합니다. 높은 동시성을 기반으로 한 빠른 쓰기를 위해 설계되었습니다.
-
비용 효율성
핫 및 콜드 데이터 분리가 지원됩니다. 콜드 데이터는 자동으로 OSS에 저장되어 스토리지 비용을 60% 이상 절감합니다.
-
낮은 읽기/쓰기 레이턴시
고도로 최적화된 커널. 워크로드가 응답 레이턴시에 민감한 경우 SSD를 사용하여 평균 읽기/쓰기 레이턴시를 2밀리초 미만으로 줄일 수 있습니다. P999 레이턴시를 80밀리초 미만으로 줄일 수 있습니다.
빠른 MOB 스토리지
매우 빠른 MOB 스토리지 및 검색
ApsaraDB for HBase는 MOB(중간 크기 개체) 기술을 사용합니다. 차트, 짧은 동영상 파일 및 문서와 같이 1KB에서 10MB 사이의 개체를 지원합니다. 여러 쿼리와 관련된 요청의 경우, 시스템 레이턴시가 몇 밀리초 정도로 낮을 수 있습니다.
게임 로그 데이터 처리
로그 데이터 수집, 저장 및 분석
ApsaraDB for HBase를 사용하여 게임 서버에서 사용자 행동 로그 데이터를 수집, 저장 및 검색하고 원시 데이터를 확인하며, 플레이어 계정 충전 기록을 확인하고 데이터를 실시간으로 분석할 수 있습니다. 다음으로 오프라인 로그 데이터 처리 및 분석을 통해 고객 유지율, LTV(대출 대 가치) 비율, ARPU(사용자당 평균 수익) 및 총 충전 금액도 계산할 수 있습니다.
혜택
-
온라인 및 오프라인 데이터 처리
ApsaraDB for HBase는 처리량이 높고 레이턴시가 낮은 온라인 데이터 쓰기 및 읽기를 지원합니다. Spark를 사용하여 ApsaraDB for HBase 데이터를 오프라인으로 처리하고 분석할 수도 있습니다.
-
정형 및 비정형 데이터 스키마
정형 및 비정형 데이터 스키마가 모두 지원되므로 열을 동적으로 추가하여 게임 운영 및 유지 관리 요구 사항을 충족할 수 있습니다.
-
비용 효율성
ApsaraDB for HBase는 핫 데이터와 콜드 데이터 분리를 지원하므로 콜드 데이터를 저렴한 비용으로 저장할 수 있습니다.
동영상 데이터 스토리지
수업, 강의, 감시 비디오를 위한 실시간 스토리지 및 분석
ApsaraDB for HBase는 낮은 레이턴시와 저렴한 비용으로 처리량이 많은 동영상 데이터의 읽기 및 쓰기를 지원합니다. 또한 동영상 인덱스, 특성 및 동영상 소스 데이터의 통합 스토리지를 지원합니다.
실시간 데이터 시각화
실시간 데이터 시각화
AparaDB for HBase는 비용 효율적이고 밀리초 레이턴시를 제공하는 동적 데이터 분석을 위한 올인원 솔루션을 제공합니다. 이 솔루션에는 Spark 실시간 컴퓨팅도 포함됩니다. 이 솔루션은 세계 최대 온라인 쇼핑 이벤트인 ‘광군제’를 위해 Alibaba의 여러 전자상거래 플랫폼에 사용되어 대형 화면에서 페이지 뷰, 고유 방문자, 트랜잭션 수 및 상품 순위 정보를 실시간으로 집계했습니다.
