云服务器内容精选

  • 公网方式接入Hive数据源 登录智能数据洞察控制台。 从新建数据源进入创建数据源页面,选择要创建数据源所在的项目,源库类型选择数据Hive。 接入网络类型选公网。 在配置连接对话框,填写以下配置。 图1 接入Hive数据源参数 表1 参数说明 参数名称 是否必填 说明 源库类型 是 接入的数据源类型,本示例为Hive。更多数据源类型连接请参考表1。 接入网络类型 是 公网方式接入。 名称 是 数据源配置列表的显示名称。 说明: 输入不能为空,且名称长度不能超过32个字符,不少于2个字符,只能由字母、数字和下划线(_)组成,且只能以字母开头。 域名 是 数据源的IP地址。 用户名 是 登录云数据库的用户名。 密码 是 登录数据库的密码。 端口 是 对应数据库的登录端口。 数据库 是 登录的数据库名称。 单击“连接测试”,进行数据源连通性测试。 测试成功后单击“确定”,完成数据源添加。
  • 概述 交换数据空间支持把MYSQL作为一种数据源类型,并用于数据上传和下载。在使用MYSQL数据源前,需要先接入数据源。 在数据目录下新增和下载JDBC类型的数据,MYSQL数据源连接参数中配置的用户需要不同的权限。 以MYSQL数据源新增JDBC类型的数据,数据源连接参数中配置的用户需要如下权限。 系统表的查询权限:information_schema.tables、information_schema.key_column_usage、information_schema.columns。 数据表的查询权限。 以MYSQL数据源下载JDBC类型的数据,数据源连接参数中配置的用户需要有创建表和在表中插入数据的权限。
  • 操作步骤 登录交换数据空间官网。 单击“管理控制台”,进入交换数据空间控制台界面。 单击“我的空间”,在交换数据空间实例中,选择实例,单击实例卡片上的“连接器”。 单击实例下的连接器,选择界面左侧导航栏中的“数据源管理”,进入“数据源管理”界面。 单击数据源列表上方“接入数据源”,进入“接入数据源”界面,设置MYSQL数据源的基本信息,具体参数如表1所示。 表1 参数说明 参数 说明 数据源类型 MYSQL:MYSQL是一款小型关联式数据库管理系统,用户可以读取存放在MYSQL的业务数据,将数据上传到EDS上。 数据源名称 自定义数据源名称,建议按照一定的命名规则填写任务名称,方便快速识别和查找。要求如下: 长度范围为1位~50位。 名称由中文、英文、数字、下划线(_)和中划线(-)组成。 只能以中文或者英文开头。 数据源描述 用户可以根据需要在文本框中输入对该数据源的描述信息。 设置完成后,配置数据源连接参数,具体参数如表2所示。 表2 参数说明 参数 说明 连接地址 MYSQL数据库的IP地址。 端口 MYSQL数据库的端口号。 数据库名称 MYSQL数据库服务的名称。 用户名、密码 登录数据库用户名和密码。 SSL加密 支持启用SSL加密传输。 连接参数配置完成后,单击“测试连接”,测试数据源是否可以和EDS进行正常的连通。 若测试结果为“测试连接成功”,则继续下一步。 若测试结果为“测试连接失败”,则检查数据源状态和数据源连接参数配置,然后单击“测试连接”,直到连接成功为止。 测试成功后,单击“保存”,返回数据源列表界面。
  • 操作步骤 登录交换数据空间官网。 单击“管理控制台”,进入交换数据空间控制台界面。 单击“我的空间”,在交换数据空间实例中,选择实例,单击实例卡片上的“连接器”。 单击实例下的连接器,选择界面左侧导航栏中的“数据源管理”,进入“数据源管理”界面。 单击数据源列表上方“接入数据源”,进入“接入数据源”界面,设置API数据源的基本信息,具体参数如表1所示。 表1 参数说明 参数 说明 数据源类型 API:数据资源需要通过调用API接口获取。 数据源名称 自定义数据源名称,建议按照一定的命名规则填写任务名称,方便快速识别和查找。要求如下: 长度范围为1位~50位。 名称由中文、英文、数字、下划线(_)和中划线(-)组成。 只能以中文或者英文开头。 数据源描述 用户可以根据需要在文本框中输入对该数据源的描述信息。 设置完成后,配置API数据源请求信息,具体参数如表2所示。 表2 参数说明 参数 说明 请求方式 选择API的请求方式。 URL 填写API的请求URL地址,例如“https://{ip:port}/v1/token”。 认证方式 选择API的请求认证方式,目前仅支持OAuth2。 OAuth2:调用接口时提供请求的header中需携带Authorization信息,接口获取header中的secret信息,校验成功后才允许调用。 其中,Authorization中的Token信息需要通过Access Token Url获取,所以还需要选择授权类型,并填写Access Token Url、客户端标识、客户端密匙以及Scope。 认证模板 调用接口时所要添加的认证模板。 如果您已有认证模板,并且可以直接使用。直接选择所需要的模板即可,否则需新增认证模板,具体参见步骤7。 (可选)新增认证模板,具体参数如表3所示。 表3 参数说明 参数 说明 认证名称 认证模板的名称,系统会自定义生成一个模板名称。 您也可根据规划自定义,建议您按照一定的命名规则填写数据源名称,方便您快速识别和查找。 认证方式 认证模板的认证方式,目前仅支持OAuth2。 授权方式 认证模板的授权方式,目前仅支持用户名密码方式。 客户端ID 在应用程序注册过程中向客户端颁发的客户端标识符。 Token地址 身份验证服务器的端点。这用于交换访问字符的授权码。 Token路径 调用获取token地址后返回体中token所在位置。 Token类型 Token类型,目前仅支持作为Basic认证。 用户名/密码 调用API获取鉴权时使用的用户名和密码。 填写请求的param、header、body参数。 设置响应信息的响应类型。 连接参数配置完成后,单击“测试连接”,测试数据源是否可以和EDS进行正常的连通。 若测试结果为“测试连接成功”,则返回文件信息(文件名、类型、大小),则继续下一步。 若测试结果为“测试连接失败”,则根据返回的响应信息检查数据源状态和数据源连接参数配置,然后单击“测试连接”,直到连接成功为止。 测试成功后,单击“保存”,返回数据源列表界面。
  • 操作步骤 登录交换数据空间官网。 单击“管理控制台”,进入交换数据空间控制台界面。 单击“我的空间”,在交换数据空间实例中,选择实例,单击实例卡片上的“连接器”。 单击实例下的连接器,选择界面左侧导航栏中的“数据源管理”,进入“数据源管理”界面。 单击数据源列表上方“接入数据源”,进入“接入数据源”界面,设置MRS_HIVE数据源的基本信息,具体参数如表1所示。 表1 参数说明 参数 说明 数据源类型 MRS_HIVE:MRS_HIVE是一个基于HDFS和MapReduce架构的数据仓库,用户可以读取存放在MRS_HIVE的业务数据,将数据上传到EDS上。 数据源名称 自定义数据源名称,建议按照一定的命名规则填写任务名称,方便快速识别和查找。要求如下: 长度范围为1位~50位。 名称由中文、英文、数字、下划线(_)和中划线(-)组成。 只能以中文或者英文开头。 数据源描述 用户可以根据需要在文本框中输入对该数据源的描述信息。 设置完成后,配置数据源连接参数,具体参数如表2所示。 表2 参数说明 参数 说明 连接地址 MRS_HIVE数据库的IP地址。 端口 MRS_HIVE数据库的端口号。 域名 MRS_HIVE数据库的域名。 数据库名称 MRS_HIVE数据库服务的名称。 用户名 MRS_HIVE的机机类型用户名。 keytab MRS_HIVE配置文件。配置文件获取请参考下方获取MRS Hive配置文件。 krb5 MRS_HIVE配置文件。配置文件获取请参考下方获取MRS Hive配置文件。 获取MRS Hive配置文件: 获取“krb5.conf”和“user.keytab”文件。 参考下载用户认证文件,在MRS Manager下载用户认证文件,解压后得到“krb5.conf”和“user.keytab”文件。 若是客户端网络连接不通,可以将hosts文件中的私网IP替换成EDS公网IP,具体请参见:配置Windows通过EIP访问普通模式集群Hive。 连接参数配置完成后,单击“测试连接”,测试数据源是否可以和EDS进行正常的连通。 若测试结果为“测试连接成功”,则继续下一步。 若测试结果为“测试连接失败”,则检查数据源状态和数据源连接参数配置,然后单击“测试连接”,直到连接成功为止。 测试成功后,单击“保存”,返回数据源列表界面。
  • 操作步骤 在连接器中,选择界面左侧导航栏中的“数据源管理”,进入“数据源管理”界面。 单击数据源列表上方“接入数据源”,进入“接入数据源”界面,设置OBS数据源的基本信息,具体参数如表1所示。 表1 参数说明 参数 说明 数据源类型 OBS:OBS是一个华为云基于对象的海量存储服务,为客户提供海量、安全、低成本的数据存储能力。 数据源名称 自定义数据源名称,建议按照一定的命名规则填写任务名称,方便快速识别和查找。要求如下: 长度范围为1~50位。 名称由中文、英文字母、数字、下划线(_)和中划线(-)组成。 只能以中文或者英文开头。 数据源描述 用户可以根据需要在文本框中输入对该数据源的描述信息。 设置完成后,配置数据源连接参数,具体参数如表2所示。 表2 参数说明 参数 说明 桶名称 用户在OBS服务中创建桶的名称。如没有OBS桶,可在OBS中创建桶。 连接地址 OBS远程Endpoint地址,可通过查看桶信息来获取地址。 Access Key ID 访问密钥的一部分,访问密钥ID。华为云通过AK识别访问用户的身份。如没有AK/SK,可通过新增访问密钥来创建新的密钥。 Secret Access Key 访问密钥的一部分,与访问密钥ID结合使用的密钥。华为云通过SK对请求数据进行签名认证。如没有AK/SK,可通过新增访问密钥来创建新的密钥。 连接参数配置完成后,单击“测试连接”,测试数据源是否可以和EDS进行正常的连通。 若测试结果为“测试连接成功”,则继续下一步。 若测试结果为“测试连接失败”,则检查数据源状态和数据源连接参数配置,然后单击“测试连接”,直到连接成功为止。 测试成功后,单击“保存”,返回数据源列表界面。