日志服务提供日志数据实时消费功能,是对全量数据的顺序读写,类似Kafka的功能。本文介绍了实时消费的类型。
日志服务采集到日志数据后,有三种方法可以处理日志数据:
方式 | 场景 | 实时性 | 存储时间 |
---|---|---|---|
实时消费 | 适合流计算、实时计算等。 | 实时。 | 自定义。 |
日志查询 | 适合最近热数据的在线查询。 | 实时(99.9%的情况为1秒,最大3秒)。 | 自定义。 |
日志投递 | 适合全量存储日志,进行离线分析。 | 5分钟~30分钟。 | 依赖于存储系统。 |
说明 日志消费与日志查询都是读取日志数据,两者区别请参见日志消费与查询区别。
实时消费
- SDK消费
日志服务提供多语言(Java、Python、Go等)SDK,且这些语言的SDK都支持日志消费接口。关于SDK的更多信息请参见SDK参考。
- 通过消费组消费日志数据
- 通过函数计算消费日志数据
- 云产品消费
- 开源产品消费