-
最新动态 - 数据接入服务 DIS
-
停止DIS Agent - 数据接入服务 DIS
Shutting down... 等待出现如下提示,则表示停止完成.输入“Y”,单击“回车”键即可正常关闭窗口。 Terminate batch job (Y/N)? 父主题: 使用Agent上传数据
-
应用场景 - 数据接入服务 DIS
场景示例图 实时文件传输 实时检测客户应用系统中产生的文件,并采集上传到云上,进行离线分析、存储查询及机器学习,对客户进行分类和信息查询,识别出大型客户,加强服务,进一步提升客户满意度。 图2 场景示例图 数据接入备份 将大量滚动日志文件传输到云端做备份,用于数据丢失或异常后的恢
-
转储至MRS - 数据接入服务 DIS
node下做数据排序; no_sort:即不排序,在需要快速入库时使用,可以在入库后系统闲时通过Compaction命令再建立索引; batch_sort:表示在一个node下,内存排序后直接生成CarbonData文件,不再进行node下的全排序;使用该配置,可以提升加载速度,但查询性能不如LOCAL_SORT;
-
批量暂停转储任务 - 数据接入服务 DIS
tasks=listTasksbody, action="stop" ) response = client.batch_stop_transfer_task(request) print(response) except exceptions
-
批量启动转储任务 - 数据接入服务 DIS
tasks=listTasksbody, action="start" ) response = client.batch_start_transfer_task(request) print(response) except exceptions
-
批量删除资源标签 - 数据接入服务 DIS
tags=listTagsbody, action="delete" ) response = client.batch_delete_tags(request) print(response) except exceptions.
-
批量添加资源标签 - 数据接入服务 DIS
tags=listTagsbody, action="create" ) response = client.batch_create_tags(request) print(response) except exceptions.
-
上传数据 - 数据接入服务 DIS
(kafka必须配置) linger.ms 参数 支持 含义与kafka设置相同,但默认值为50(kafka是0),目的是提高Rest接口的上传效率 batch.size 参数 支持 含义与kafka设置相同,但默认值为1MB(kafka是16KB),目的是匹配流控的大小 buffer.memory
-
上传数据 - 数据接入服务 DIS
(kafka必须配置) linger.ms 参数 支持 含义与kafka设置相同,但默认值为50(kafka是0),目的是提高Rest接口的上传效率 batch.size 参数 支持 含义与kafka设置相同,但默认值为1MB(kafka是16KB),目的是匹配流控的大小 buffer.memory
-
转储至OBS - 数据接入服务 DIS
node下做数据排序; no_sort:即不排序,在需要快速入库时使用,可以在入库后系统闲时通过Compaction命令再建立索引; batch_sort:表示在一个node下,内存排序后直接生成CarbonData文件,不再进行node下的全排序;使用该配置,可以提升加载速度,但查询性能不如LOCAL_SORT;
-
管理通道标签 - 数据接入服务 DIS
管理通道标签 标签是通道的标识。为通道添加标签,可以方便用户识别和管理拥有的通道资源。 您可以在创建通道时添加标签,也可以在通道创建完成后,在通道的详情页添加标签,您最多可以给通道添加10个标签。 标签共由两部分组成:“标签键”和“标签值”,其中,“标签键”和“标签值”的命名规则如表1所示。
-
步骤1:开通DIS通道 - 数据接入服务 DIS
单击“现在配置”,呈现添加标签。 添加标签具体请参考管理通道标签。 - 暂不配置 暂不配置任何信息。 - 标签 标签是通道的标识。为通道添加标签,可以方便用户识别和管理拥有的通道资源。 - 单击“立即购买”,弹出“规格确认”页面。 单击“提交”,完成通道接入。
-
步骤1:开通DIS通道 - 数据接入服务 DIS
单击“现在配置”,呈现添加标签。 添加标签具体请参考管理通道标签。 - 暂不配置 暂不配置任何信息。 - 标签 标签是通道的标识。为通道添加标签,可以方便用户识别和管理拥有的通道资源。 - 单击“立即购买”,弹出“规格确认”页面。 单击“提交”,完成通道接入。 父主题: 入门