다단계 장기 실행 상태 저장 애플리케이션 오케스트레이션 간소화
CloudFlow는 다양한 분산 태스크의 실행을 조정하는 데 사용되는 완전 관리형 서버리스 클라우드 서비스입니다. 이를 사용하면 비즈니스 프로세스를 개발하고 실행하는 데 필요한 태스크 조정, 상태 관리, 오류 처리와 같은 번거로운 태스크를 간소화할 수 있습니다. 따라서 사용자는 비즈니스 로직 개발에 집중할 수 있습니다.
분산 태스크를 순차적으로, 분야별로, 병렬로 정렬할 수 있습니다. 서비스는 설정된 순서에 따라 태스크 실행을 안정적으로 조정하고 각 태스크의 상태 전환을 추적합니다. 그런 다음 필요할 때마다 맞춤형 재시도 논리를 실행하여 워크플로가 원활하게 완료되도록 합니다.
분산 구성 요소
다양한 인프라, 네트워크 및 언어로 작성된 애플리케이션을 오케스트레이션할 수 있고, 하이브리드 클라우드 및 독점 클라우드에서 퍼블릭 클라우드로 전환할 필요 없이 단일 아키텍처에서 마이크로서비스 아키텍처로 진화할 수 있습니다.
코드 최소화
애플리케이션의 논리를 관리하도록 지원할 뿐만 아니라 순차적, 분야별, 병렬 등 다양한 제어 기본 요소를 제공하므로 비즈니스에서 반복되는 오케스트레이션 코드를 최소화할 수 있습니다.
내결함성 개선
프로세스 상태를 관리하고, 체크포인트를 설정하고, 재부팅을 처리하여 애플리케이션이 예상대로 단계별로 수행되고 있는지 확인할 수 있습니다. 기본 제공되는 시도/캐치, 재시도, 롤백 기능이 예외 오류를 자동으로 처리할 수 있습니다.
특징
Pay-As-You-Go 방식의 완전 관리형 운영 및 유지관리
운영 및 유지관리 담당자가 인프라 유지관리에서 벗어나 안전하고 가용성이 높으며 내결함성과 내구성이 뛰어난 서비스를 제공합니다. 단계 전환 수수료만 지불하면 되고 사용하지 않을 경우 추가 비용이 없습니다.
서비스 오케스트레이션 기능
태스크 실행에서 프로세스 논리를 분리하도록 지원할 뿐만 아니라 순차적, 분야별, 병렬 등 다양한 제어 기본 요소를 제공합니다. 또한 오류 재시도 및 캡처 기능이 기본 제공되므로 오케스트레이션 코드 작성 시간을 단축할 수 있습니다.
장기 실행 프로세스 지원
장기간 전체 프로세스를 추적하고 프로세스 실행 완료를 보장합니다. 운영 및 유지관리, 관련 파이프라인, 메일 프로모션 프로세스와 같은 일부 프로세스는 몇 시간, 며칠 또는 몇 달 동안 실행해야 할 수 있습니다.
프로세스 상태 관리
프로세스가 위치한 실행 단계 추적, 단계 사이에 저장된 입력 및 출력을 포함하여 프로세스 실행의 모든 상태를 관리합니다. 프로세스 상태를 직접 관리하거나 복잡한 상태 관리를 태스크에 구축할 필요가 없습니다.
시각적 모니터링
워크플로를 정의하고 실행 상태를 볼 수 있는 시각적 인터페이스를 제공합니다. 상태에는 입력 및 출력이 포함됩니다. 결함 위치를 신속하게 식별하고 결함 문제를 신속하게 제거하는 데 도움이 됩니다.
분산 구성 요소
다양한 인프라의 다양한 네트워크 내에서 서로 다른 언어로 작성된 애플리케이션을 조정합니다. 애플리케이션이 프라이빗 클라우드에서 전환하거나 프라이빗 클라우드에서 하이브리드 클라우드 또는 퍼블릭 클라우드로 원활하게 전환하거나 단일 아키텍처에서 마이크로서비스 아키텍처로 진화하는 경우, CloudFlow가 조정하는 역할을 할 수 있습니다.
가격 정책
사용량을 기준으로 비용을 지불합니다. 워크플로 실행의 단계 수에 따라 지불하고 워크플로의 함수 컴퓨팅, ECS, 컨테이너 및 기타 리소스의 상태 변환 비용을 청구합니다. 따라서 시간별로 충전하면 됩니다. 매월 주 계정의 첫 5,000회가 무료인 경우 실행 종료 시 더 이상 수수료가 부과되지 않지만, 이후에는 1,000회당 0.025 USD가 청구됩니다.
서버리스 서비스 자동 확장을 사용하면 하드웨어 예산 및 확장을 관리할 필요가 없습니다.
CloudFlow 사용 방법
1
1단계: 워크플로 정의 생성
정의를 사용하여 태스크 간의 실행 순서 또는 실행 논리를 설명합니다.
2
2단계: 워크플로 작업 준비
워크플로에 정의된 각 태스크 작업자를 구현해야 합니다. CloudFlow는 여러 유형의 작업자를 지원합니다.
3
3단계: 워크플로 작업 수행
CloudFlow, Execute Workflow 및 API를 호출하여 워크플로 애플리케이션을 실행할 수 있습니다.
4
4단계: 실행 상태 추적, 디버깅, 모니터링
CloudFlow에서 제공하는 시각적 모니터링을 사용하여 태스크의 실행 상태를 관찰합니다.
시나리오
멀티 태스크 오케스트레이션을 사용하여 프로세스 실패율 감소 및 멀티미디어 처리량 개선
CloudFlow를 사용하면 트랜스코딩, 프레임 가로채기, 안면 인식, 음성 인식, 감사 업로드와 같은 다양한 태스크를 완벽한 처리 흐름으로 구성할 수 있습니다. 함수 컴퓨팅을 통해 미디어 처리(IMM) 태스크(또는 자체 제작 프로세서)를 제출하여 비즈니스 요구 사항을 충족하는 출력을 생성합니다. 각 태스크의 실행 오류를 안정적으로 재시도할 수 있어 멀티미디어 태스크의 처리량이 크게 향상됩니다.
해결 가능 작업
멀티 태스크 오케스트레이션
트랜스코딩, 프레임 가로채기, 안면 인식, 음성 인식, 감사 업로드와 같은 프로세스 단계를 레이아웃으로 구성합니다.
프로세스 실패 해결
시스템은 태스크의 실행 오류를 여러 번 재시도합니다.
대규모 컴퓨팅 오케스트레이션 간소화, 비용 최적화, 총 프로세스 기간 단축
CloudFlow는 다양한 배치 컴퓨팅 분산 작업을 직렬 또는 병렬로 오케스트레이션하여 실행 시간이 길고 동시성이 큰 대규모 컴퓨팅을 안정적으로 지원할 수 있습니다. 예를 들어, 유전자 데이터 분석에서 유전자 염기서열을 정렬하고 모든 염색체에 대한 돌연변이 분석을 병렬로 수행하고 마지막으로 염색체 데이터를 집계하여 결과를 생성합니다. CloudFlow는 실행 안정성을 향상시키고 리소스 활용도를 개선하며 비용을 최적화하기 위해 지정된 종속성을 기반으로 다양한 CPU, 메모리 및 대역폭 사양의 배치 컴퓨팅 작업을 제출합니다.
해결 가능 작업
대규모 컴퓨팅 오케스트레이션 간소화
CloudFlow는 다양한 배치 컴퓨팅 분산 작업을 직렬 또는 병렬로 오케스트레이션하고 실행 시간이 길고 동시성이 큰 컴퓨팅을 지원합니다.
총 프로세스 기간 단축
병렬 실행의 안정성을 향상시키기 위해 작업 종속성을 기반으로 서로 다른 사양의 배치 컴퓨팅 작업을 제출합니다.
대용량 컴퓨팅 리소스의 안정적인 스케줄링 및 빅데이터 처리 태스크의 개인화된 오케스트레이션
CloudFlow를 사용하면 고가용성 데이터 처리 파이프라인을 빠르게 구축할 수 있습니다. 예를 들어, 다양한 데이터 소스의 계량 데이터가 로그 서비스에 수집되고 함수 컴퓨팅 타이머가 매시간 워크플로를 트리거합니다. CloudFlow는 함수 컴퓨팅을 사용하여 여러 샤드의 계량 데이터에 대해 병렬 처리를 수행하고, 결과는 각각 로그 서비스에 다시 기록됩니다. 그러면 모든 샤드 생성 파일을 집계하고 테이블 저장소에 쓸 수 있으며 각 사용자에 대해 청구서가 생성됩니다. CloudFlow는 프로세스 실패 가능성을 줄이기 위해 프로세스의 단일 단계를 재시도하도록 지원합니다. 또한 CloudFlow는 동적 병렬 태스크 실행과 높은 확장성의 데이터 처리 기능을 지원합니다.
해결 가능 작업
동시성 구현 문제 해결
병렬 태스크 실행과 높은 확장성의 데이터 처리 기능을 지원합니다.
O&M 효율성 및 안정성을 높이고 프로세스 진행 상황 파악을 위한 시각적 인터페이스
자동화된 O&M의 일반적인 문제에는 복잡한 단계, 안정성이 낮은 독립 실행형 스크립트, 복잡한 종속성, 시각화할 수 없는 진행 상황 등이 있습니다. CloudFlow + 함수 컴퓨팅 프로세스가 이러한 문제를 해결할 수 있습니다. 예를 들어, 자동화된 소프트웨어 배포는 Docker 컨테이너를 구축하고 컨테이너 이미지를 업로드하고 각 노드를 추적하여 이미지를 풀다운하는 것으로 시작됩니다. 새 이미지의 컨테이너를 시작하면 각 함수 단계에서 생성된 로그가 쿼리 및 공유를 위해 로그 서비스에 저장됩니다. 단일 머신 O&M 스크립트에 비해 워크플로 기반 자동화 도구는 고가용성, 기본 제공 오류 처리 메커니즘, 그래픽 진행 상황 파악을 특징으로 합니다.
해결 가능 작업
프로세스 진행 상황 시각화 문제 해결
자동화된 O&M 절차에는 여러 시간이 소요되며 독립 실행형 스크립트의 신뢰성이 낮습니다. 복잡한 종속성과 같은 일반적인 문제는 시각화할 수 없습니다.
관련 제품
CloudFlow를 사용하여 다양한 분산 작업의 실행을 조정할 수 있습니다.
이를 사용하면 함수 컴퓨팅 및 배치 컴퓨팅과 같은 컴퓨팅 서비스를 통합할 수 있고 ECS 및 컨테이너 서비스에서 실행되는 태스크가 Poll을 통해 실행자의 역할을 할 수 있습니다. 외부 이벤트 트리거 기능과 통합 메시지 서비스를 제공합니다.
