asp数据源

数据源--添加DIS数据源 前提条件 您已购买华为云DIS服务。 操作步骤 点击IoT数据分析服务控制台左侧导航栏的数据源，进入数据源页面，点击“实时数据源”。 实时点击“添加数据源”，在弹出的页面中输入消息通知服务的连接参数，各参数说明详见表1。 表1 添加实时数据源参数说明 参数名

查看更多 →

数据源--添加API数据源 操作步骤 登录进入“IoT数据分析”服务控制台。 在左侧导航栏选择“数据源>API数据源”进入页面。 点击“添加数据源”按钮，在弹出的页面中输入数据源名称，点击“确定”按钮，完成API数据源的添加。您可通过第三方APP（例如postman）向这个API数据源的URL发送数据。

查看更多 →

数据源--添加IoTDA实时数据源 前提条件 您已开通IoT设备接入服务 操作步骤 使用华为云租户主账号登录进入“IoT数据分析”服务控制台。 在左侧导航栏选择“数据源>IoTDA实时数据源”，点击页面中“立即授权”按钮进行确认授权。以便后续IoT数据分析服务与IoTDA服务能够互相访问租户数据。

查看更多 →

object 近线数据源。 表6 Offline 参数 参数类型 描述 user_url String 用户数据url。 item_url String 物品数据url。 behavior_url String 行为数据url。 表7 Nearline 参数 参数类型 描述 item_topic

查看更多 →

用户token，获取方式请参见获取用户Token。 请求参数 表3 请求Header参数 参数 是否必选 参数类型 描述 Content-Type 是 String 内容类型，取值为application/json。 响应参数 状态码： 200 表4 响应Body参数 参数 参数类型 描述 is_success

查看更多 →

Integer 在线服务最大并发数。 表5 DataConfig 参数 是否必选 参数类型 描述 offline 是 Offline object 离线计算规格。 nearline 否 Nearline object 近线数据源。 表6 Offline 参数 是否必选 参数类型 描述 user_url

查看更多 →

请求参数 表3 请求Header参数 参数 是否必选 参数类型 描述 X-Auth-Token 是 String 租户Token 最小长度：1 最大长度：65535 响应参数 状态码： 200 表4 响应Body参数 参数 参数类型 描述 count Integer 总数 最小值：0

查看更多 →

表8 ApiContentReq 参数 是否必选 参数类型 描述 name 是 String api数据源名称 最小长度：1 最大长度：128 响应参数 状态码： 201 表9 响应Body参数 参数 参数类型 描述 id String 数据源id 最小长度：1 最大长度：256

查看更多 →

表1 路径参数 参数 是否必选 参数类型 描述 datasource_id 是 String 数据源id 最小长度：1 最大长度：256 project_id 是 String projectid 最小长度：1 最大长度：128 请求参数 表2 请求Header参数 参数 是否必选

查看更多 →

表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String projectid 最小长度：1 最大长度：128 datasource_id 是 String 数据源id 最小长度：1 最大长度：256 请求参数 表2 请求Header参数 参数 是否必选

查看更多 →

表1 路径参数 参数 是否必选 参数类型 描述 datasource_id 是 String 数据源id。 project_id 是 String 项目id，获取方式请参见获取项目ID。 workspace_id 是 String 工作空间id。 表2 Query参数 参数 是否必选

查看更多 →

oken 请求参数 表3 请求Header参数 参数 是否必选 参数类型 描述 Content-Type 是 String 内容类型，取值为application/json 表4 请求Body参数 参数 是否必选 参数类型 描述 name 是 String 数据源名称:，1-64位字母、数字、下划线、中划线组合。

查看更多 →

参考创建HetuEngine用户创建HetuEngine管理员用户。 操作步骤 参考配置传统数据格式数据源配置传统格式数据源，执行步骤1至6.g。 在“自定义配置”项中添加自定义参数，如表1。 表1 Hudi数据格式自定义配置参数 自定义参数名称 值 hive.parquet.use-column-names

查看更多 →

数据接入参数说明如表1所示。 表1 数据接入参数说明 参数名 参数说明 数据源名称 编写数据源名称。输入仅支持由中文、字母、数字、空格，特殊字符：_()（）#.-/ 单击“”可直接复制已有数据源。 跳过采集 表示读取配置信息的同时是否会采集数据。 是 否 采集周期 数据采集周期，当前支持：

查看更多 →

表3 请求Header参数 参数 是否必选 参数类型 描述 Content-Type 是 String 内容类型，取值为application/json。 响应参数 状态码： 200 表4 响应Body参数 参数 参数类型 描述 error_count error_count object

查看更多 →

准备离线数据源 在使用RES创建数据源时，您需要准备以下的3种基础数据包并上传至OBS。若使用近线流程，需先将业务系统埋点日志转换成推荐系统指定格式，并实时写入DIS相应通道。本章节介绍了RES当前离线数据源和近线数据源的数据格式，您可以参考本章节说明，准备相应的数据。 目前数据源只支持JSON格式。

查看更多 →

表8 ApiContentReq 参数 是否必选 参数类型 描述 name 是 String api数据源名称 最小长度：1 最大长度：128 响应参数 状态码： 200 表9 响应Body参数 参数 参数类型 描述 id String 数据源id 最小长度：1 最大长度：256

查看更多 →

object 近线数据源。 表6 Offline 参数 参数类型 描述 user_url String 用户数据url。 item_url String 物品数据url。 behavior_url String 行为数据url。 表7 Nearline 参数 参数类型 描述 item_topic

查看更多 →

RES的离线数据源包括什么？ 离线数据包括如下几张表： 用户属性表 物品属性表 用户操作行为表 每张表的字段描述和规范详情请参见《推荐系统用户指南》中准备离线数据源章节。 父主题： 数据源

查看更多 →

le界面。 单击“数据源”，在hive数据源所在行的“操作”列下单击“编辑”，在页面内修改配置，可修改配置如下表。 参数 描述 取值样例 描述 数据源的描述信息。 只能包含汉字、英文字母、数字、中英文逗号、中英文句号、下划线（_）、空格和换行符。 - 开启数据源鉴权 是否同时使用Hive数据源的权限策略进行鉴权。

查看更多 →

数据源类型管理 用户可以选择多个系统预制数据源类型，也可通过自身需求自定义编辑新的数据源类型。为用户的数据源数据提取提供多种配置方式。当用户选择通用数据类型时，需要用户配置字段提取获取文件内的字段数据，只有字段和数据匹配成功后，数据源才能采集到数据为APP应用输出原始数据。 通用数据类型

查看更多 →

。 选择“数据源”，单击“添加数据源”。在“添加数据源”页面填写参数。 配置“基本配置”，参数配置请参考表1。 表1 基本配置 参数 描述 取值样例 数据源名称 对接的数据源的名称。 只能包含字母、数字、下划线（_），仅字母开头。 hive_1 数据源类型 对接的数据源的类型。选择“Hive”。

查看更多 →

在使用RES之前，首先您需要创建一个数据源，后续的操作都是基于您创建的数据源进行的。 上传实时数据 RES通过SDK上传实时数据，进行数据计算和处理，更新用户的相关数据。 数据质量管理 数据质量管理操作可以将数据源经过数据特征抽取，生成推荐系统内部通用的数据格式。 修改或删除数据源 对您已经创建的数据源进行修改，对不需要的数据源进行删除。

查看更多 →

Kafka数据源连接失败 原因分析 连接地址填写的是MQS内网地址，且MQS同时开启了SSL与VPC内网明文访问时，“是否SSL”选择了“是”。 解决方案 修改“是否SSL”为“否”。 如果排除以上问题后，仍然连接失败，可参考数据源连接测试失败排查操作进行问题排查。 父主题： 数据源

查看更多 →

请求Header参数 参数 是否必选 参数类型 描述 X-Auth-Token 是 String 用户Token。通过调用IAM服务获取用户Token接口获取（响应消息头中X-Subject-Token的值）。 表3 请求Body参数 参数 是否必选 参数类型 描述 datasource_name

查看更多 →

数据源配置概述 IoT数据分析服务支持多种数据源类型，用户可选择合适的数据源并进行配置： IoTDA实时数据源：将IoT设备接入服务（IoTDA）作为数据源，IoT设备接入服务将转发设备上报的数据到IoT数据分析服务，之后您可以通过IoT数据分析服务分析设备上报数据。 DIS数据

查看更多 →

400 表9 响应Body参数 参数 参数类型 描述 error_code String 错误码 最小长度：8 最大长度：36 error_msg String 错误描述 最小长度：2 最大长度：512 状态码： 500 表10 响应Body参数 参数 参数类型 描述 error_code

查看更多 →

登录RES管理控制台，在左侧菜单栏中选择“数据源”，进入“数据源”列表页面。 单击“创建”，在创建数据源页面，参考表1配置相关参数。 表1 创建数据源参数说明 参数名称 说明 名称 数据源的名称，名称只能是字母、数字、下划线或者中划线组成的合法字符串。 用户属性表 从OBS桶中选择数据。在“用户属性表”

查看更多 →

导入近线数据源 通过导入近线数据源，达到实时计算并更新用户画像、物品画像，实时更新增量数据的目的。 前提条件 按数据规范准备数据并上传至通道。具体上传方法请参见上传实时数据。 导入近线数据源 登录RES管理控制台，在左侧菜单栏中选择“数据源”，进入“数据源”列表页面。 在数据源列表单击目标数据源名称，进入数据源详情页面。

查看更多 →

FTP数据源测试连接失败 原因分析 服务器端和数据源的连接模式不一致，例如，服务器端连接模式配置为主动连接模式，而数据源配置为被动连接模式。 解决方案 修改连接模式，使服务器端和数据源的连接模式保持一致。 如果排除以上问题后，仍然连接失败，可参考数据源连接测试失败排查操作进行问题排查。

查看更多 →

上传离线数据源至OBS RES使用对象存储服务（Object Storage Service，简称OBS）进行数据源的存储。因此，在使用RES之前您需要开通OBS服务并创建桶，然后在OBS桶中上传用户数据用于推荐作业的计算。 需要存放在OBS桶中的数据包括： 离线数据源：包含用户

查看更多 →

请求Body参数 参数 是否必选 参数类型 描述 datasource_name 否 String 数据源名称，数据源名称不能包含&、<、>、"、'、(、) ，长度为1~255字符 最小长度：4 最大长度：255 datasource_type 否 String 数据源类型 DB2

查看更多 →

修改或删除数据源 您可以对离线数据源进行重新编辑操作来更新数据源，如果该数据源不再使用，您可以删除数据源释放资源。 修改离线数据源 前提条件 已存在的离线数据源有修改或者更新并已经上传至OBS。 只有在数据源数据结构特征抽取人工复核确认之前才允许修改数据源。 注意事项 修改编辑之

查看更多 →

数据源连接测试失败排查操作 请检查数据源相关配置是否正确，例如数据库名及密码是否填写错误。 请检查数据源IP与FDI是否在同一个VPC内，若不在请先创建对等连接。 如何创建VPC对等连接请参考VPC对等连接。 请检查数据源服务器端防火墙是否开放连接端口。 请检查数据源服务器端IP白名单限制是否添加FDI数据面IP。

查看更多 →

MRS Hive数据源测试连接失败 原因分析 可能是以下两种原因导致： MRS Hive的配置文件中使用的私网IP，私网IP与FDI数据面IP不通导致连接失败。 HDFS URL填写了根目录hdfs://hacluster，机机交互用户名填写的用户不具备管理员权限导致连接失败。 解决方案

查看更多 →

在左侧的导航栏选择“数据源管理”，单击页面右上角的“接入数据源”。 在接入数据源页面的“默认数据源”页签下，选择“MySQL”类型的数据源，然后单击“下一步”。 在页面中配置数据源的连接信息。 表1 数据源连接信息 参数 配置说明 数据源名称 填写数据源的名称，根据规划自定义。建议您

查看更多 →

在左侧的导航栏选择“数据源管理”，单击页面右上角的“接入数据源”。 在接入数据源页面的“默认数据源”页签下，选择“HANA”类型的数据源，然后单击“下一步”。 在页面中配置数据源的连接信息。 表1 数据源连接信息 参数 配置说明 数据源名称 填写数据源的名称，根据规划自定义。建议您

查看更多 →

在左侧的导航栏选择“数据源管理”，单击页面右上角的“接入数据源”。 在接入数据源页面的“默认数据源”页签下，选择“OBS”类型的数据源，然后单击“下一步”。 在页面中配置数据源的连接信息。 表1 数据源连接信息 参数 配置说明 数据源名称 填写数据源的名称，根据规划自定义。建议您按

查看更多 →