本文为您介绍实时计算独享模式系统架构。

架构介绍

下图为独享模式系统架构。系统架构
  • 实时计算独享模式为全托管管理方式。您所购买的ECS都托管在实时计算VPC下,暂不提供登录方式。
  • 为了访问您的VPC内服务,会在创建集群时在您账号下申请弹性网卡。您可以通过弹性网卡访问VPC下所有资源。
  • 如果您的实时计算集群需要访问公网,可以在弹性网卡上绑定NAT网关及弹性公网IP,详情请参见绑定NAT网关
  • 实时计算为您申请的弹性网卡存放于您账号下一个单独的安全组内。如果您需要访问VPC内其它安全组的服务,请配置该安全组的规则。
说明 在您不访问公网的情况下,弹性网卡不会产生任何额外费用。

产品特点

  • 支持全链路实时计算开发
    • 提供基于Flink SQL的实时数据处理能力,支持故障场景的自动恢复,保证异常场景仍然可以准确处理数据。
    • 支持多种内置函数,例如字符串、日期和聚合函数。
    • 支持多种窗口类型,例如滚动、滑动和会话窗口。
    • 计算资源控制精确,保证作业的隔离性。
    • 以下关键性能指标高于开源Flink:
      • 数据计算的延迟可以达到亚秒级。
      • 单个作业吞吐量可以达到百万条记录/秒,单集群规模达到数千台。
    • 深度整合各类云数据存储。方便您直接读写数据总线DataHub、日志服务SLS、云数据库RDS版、表格存储TableStore和分析型数据库MySQL版等数据存储系统。
  • 完全托管的实时计算服务
    • 采用完全托管的流式计算引擎。
    • 无需预置或管理任何基础设施,即可运行和查询流数据。
    • 支持一键启用流式数据服务。
    • 试用和迁移流式计算成本小,集成存储数据、开发数据、运维数据和监控报警等功能。
    • 为不同租户间的托管运行服务提供有效的隔离和全面防护。
  • 节省人力和集群成本
    • 大幅优化SQL执行引擎,计算作业比原生Flink作业更经济高效。
    • 开发和运行成本远低于开源流式框架。
  • 高可用性
    当实时计算产品底层ECS异常或者作业发生Failover时,JobManager及TaskManager可以在同可用区的ECS恢复使用,实现作业高可用性;也可以在不同可用区或地域的ECS恢复使用,实现跨可用区高可用性。高可用cluster