华为云首页用户手册

数据接入服务 DIS-下载流式数据:背景信息

数据接入服务 DIS-下载流式数据:背景信息

时间：2024-01-12 17:08:41

数据接入服务 DIS 使用SDK（Java）

背景信息

下载流式数据，需要确定从分区的什么位置开始获取（即获取游标）。确定起始位置后，再循环获取数据。

获取游标有如下五种方式：

AT_SEQUENCE_NUMBER
AFTER_SEQUENCE_NUMBER
TRIM_HORIZON
LATEST
AT_TIMESTAMP

为更好理解游标类型，您需要了解如下几个基本概念。

序列号（sequenceNumber）,每个记录的唯一标识符。序列号由DIS在数据生产者调用PutRecord操作以添加数据到DIS数据通道时DIS服务自动分配的。同一分区键的序列号通常会随时间变化增加。PutRecords请求之间的时间段越长，序列号越大。
每个分区的sequenceNumber从0开始持续增长，每条数据对应唯一的sequenceNumber，超过生命周期后此sequenceNumber将过期不可用。(例如上传一条数据到新分区，其sequenceNumber起始为0，上传100条之后，则最后一条的sequenceNumber为99；如超过生命周期之后，0~99的数据则不可用)
分区的数据有效范围可以通过调用describeStream(查询通道详情)接口获取，其sequenceNumberRange代表数据有效范围，第一个值为最老数据的sequenceNumber，最后一个值为下一条上传数据的sequenceNumber(最新数据的sequenceNumber为此值-1)
例如[100, 200]，表示此分区总共上传了200条数据，其中第0~99条已过期，有效的最老数据为100，最新数据为199，下一条上传数据的sequenceNumber为200。

上一篇：数据接入服务 DIS-下载流式数据:参数说明

下一篇：对象存储服务 OBS-设置桶的网站配置:响应示例：设置桶的网站配置，并重定向错误

数据接入服务 DIS-下载流式数据:背景信息

意见反馈

0/200

提交成功！非常感谢您的反馈，我们会继续努力做到更好反馈提交失败！请稍后重试！

推荐文章

解决方案
相关专题