-
区域和可用区 - 数据接入服务 DIS
区域(Region):从地理位置和网络时延维度划分,同一个Region内共享弹性计算、块存储、对象存储、VPC网络、弹性公网IP、镜像等公共服务。
-
新增转储任务 - 数据接入服务 DIS
写入记录数 写入目标服务(如MRS)的记录数,例如通道内的一条用户记录可能转换为多条记录写入MRS服务的opentsdb。 转储文件名 转储到目标服务的文件名称。
-
转储至OBS - 数据接入服务 DIS
桶名称在“对象存储服务”中“创建桶”时创建。 - 转储文件目录 在OBS中存储通道文件的自定义目录,多级目录可用“/”进行分隔,不能以“/”开头。 取值范围:0~50个字符。 默认配置为空。 - 时间目录格式 数据将存储在OBS桶中转储文件目录下,按时间格式作为层级的目录中。
-
与其他服务的关系 - 数据接入服务 DIS
与其他服务的关系 介绍DIS与其他服务的关系。 对象存储服务(Object Storage Service,简称OBS) 在用户购买接入通道时选择数据转储至OBS,用户上传的数据会存储至对象存储服务(OBS)。
-
配置DIS Agent - 数据接入服务 DIS
Linux服务器上配置DIS Agent 使用PuTTY 工具登录日志所在服务器。 执行cd /opt/dis-agent-X.X.X/命令,进入“dis-agent-X.X.X”文件夹。
-
验证Plugin - 数据接入服务 DIS
验证Plugin 验证DIS Source 使用PuTTY工具远程登录Flume所在服务器。
-
DIS服务端错误码 - 数据接入服务 DIS
请求头里的签名信息Authorization字段中缺失服务名 请检查请求头里的Authorization字段中是否包含服务名dis。
-
图解数据接入服务DIS - 数据接入服务 DIS
图解数据接入服务DIS
-
配置Plugin - 数据接入服务 DIS
重试时会使用指数退避算法,并等待一段时间,以减轻异常时服务器压力。 2147483647 resultLogLevel 否 每次调用DIS接口后输出最新sequenceNumber到日志的级别。
-
DIS SDK能做什么 - 数据接入服务 DIS
DIS SDK能做什么 DIS概述 数据接入服务(Data Ingestion Service)为处理或分析流数据的自定义应用程序构建数据流管道,主要解决云服务外的数据实时传输到云服务内的问题。
-
什么是DIS? - 数据接入服务 DIS
-
使用DIS采集增量驾驶行为日志数据 - 数据接入服务 DIS
lz4 PROXY_HOST 否 配置代理IP,请求走代理服务器的需要配置。 请根据实际情况配置 PROXY_PORT 否 配置代理端口。 80 PROXY_PROTOCOL 否 配置代理协议。支持http和https。
-
获取认证信息 - 数据接入服务 DIS
图1 单击新增访问密钥 单击“确定”,根据浏览器提示,保存密钥文件。密钥文件会直接保存到浏览器默认的下载文件夹中。打开名称为“credentials.csv”的文件,即可查看访问密钥(Access Key Id和Secret Access Key)。
-
基本概念 - 数据接入服务 DIS
用户 由账号在IAM中创建的用户,是云服务的使用人员,具有身份凭证(密码和访问密钥)。 在我的凭证下,您可以查看账号ID和用户ID。通常在调用API的鉴权过程中,您需要用到账号、用户和密码等信息。
-
转储相关问题 - 数据接入服务 DIS
-
附录 - 数据接入服务 DIS
附录 错误码 状态码 获取项目ID
-
监控管理 - 数据接入服务 DIS
监控管理 查询通道监控 查询分区监控 父主题: API说明
-
使用Agent上传数据 - 数据接入服务 DIS
使用Agent上传数据 DIS Agent概述 安装前准备 安装DIS Agent 配置DIS Agent 启动DIS Agent 验证DIS Agent 停止DIS Agent 父主题: 使用DIS
-
与原生KafkaConsumer接口适配说明 - 数据接入服务 DIS
与原生KafkaConsumer接口适配说明 表1 接口适配说明 原生KafkaConsumer 类型 DISKafkaConsumer 说明 Set<TopicPartition> assignment() 接口 支持 获取consumer消费的通道与分区信息 Set<String
-
使用DIS Logstash Plugin上传与下载数据 - 数据接入服务 DIS
使用DIS Logstash Plugin上传与下载数据 DIS Logstash Plugin概述 安装DIS Logstash Plugin前准备 在线安装DIS Logstash Plugin 离线安装DIS Logstash Plugin 配置DIS Logstash Plugin