创建弹性云服务器ECS和数据仓库DWS 创建弹性云服务器ECS 创建数据仓库DWS 父主题: 测试方法
父主题: 创建弹性云服务器ECS和数据仓库DWS
视频介绍 准备ECS作为GDS服务器 购买Linux弹性云服务器的操作步骤,请参见《弹性云服务器快速入门》中的购买弹性云服务器。购买后,请参见登录Linux弹性云服务器进行登录。 ECS按以下最低规格配置。
参见弹性云服务的购买弹性云服务器创建弹性云服务器,注意ECS与DWS创建在同一个区域、VPC内,本例ECS镜像选择CentOS 7.6版本。
本实践演示在弹性云服务器ECS上的Windows环境下安装Power BI,并使用On-premises Data Gateway(本地数据网关)模式与DWS进行对接。
使用GDS从远端服务器导入数据到DWS。 当用户需要将普通文件系统(例如,弹性云服务器)中的数据文件导入到DWS时,可以使用DWS提供的GDS导入数据的功能。 使用CDM迁移数据到DWS。 父主题: 数据迁移
原因:弹性云服务器异常,错误码${FailureReason}! 请联系客服或稍后重试。 说明: ${FailureReason}实际显示为弹性云服务器具体的错误码。例如,“ECS.0219”。
业务数据安全 数据仓库服务构建在公有云的基础软件设施之上,包括云主机弹性云服务器和对象存储服务OBS。弹性云服务器和OBS服务2017年双双通过了中国数据中心联盟的可信云认证 。
如果是在公有云环境无法连接,还需要检查以下可能导致异常的原因: 弹性云服务器是否与集群在相同可用分区、虚拟私有云、子网和安全组。 安全组的出入规则是否正确。 如果是在互联网环境无法连接,还需要检查以下可能导致异常的原因: 用户网络是否与互联网可以正常连通。
与弹性云服务器的关系 数据仓库服务使用弹性云服务器(Elastic Cloud Server,简称ECS)作为集群的节点,每个弹性云服务器是集群中的一个节点。
前提条件 GDS服务器和DWS集群之间网络可以互通。 需要创建一个弹性云服务器作为GDS服务器。 创建的弹性云服务器与DWS集群应处于同一区域、同一虚拟私有云和子网。 操作步骤 在DWS中创建目标表,用于存储导入的数据。
(可选)准备ECS作为gsql客户端主机 购买弹性云服务器的操作步骤,请参见《弹性云服务器快速入门》中的购买弹性云服务器章节。 创建的弹性云服务器需要满足如下要求: 弹性云服务器需要与GaussDB(DWS)集群在相同的区域、可用分区。
若DWS集群没有配置公网IP,为方便起见,推荐您创建一台Linux弹性云服务器(简称ECS),详情可参见(可选)准备ECS作为gsql客户端主机。 (可选)准备ECS作为gsql客户端主机 购买弹性云服务器的操作步骤,请参见《弹性云服务器快速入门》中的购买弹性云服务器章节。
处理方法 网络不通 如果客户端主机通过DWS集群的内网地址进行连接,应重新申请一台弹性云服务器作为客户端主机,且该弹性云服务器必须和DWS集群处于相同的VPC和子网内。 安全组规则禁止ping 检查DWS集群所属的安全组规则,查看是否对客户端主机的IP地址开放了ICMP协议端口。
应用程序可以在华为云平台环境的弹性云服务器中,或者互联网环境连接数据库。 ODBC接口的使用方法,请自行查阅官方文档。
准备数据构建工具编译环境 远程连接ECS弹性云服务器。 执行以下命令, 安装git。 yum install git 执行以下命令,安装gcc。 yum install gcc 父主题: 构建TPC-H&TPC-DS使用数据
应用程序可以在华为云平台环境的弹性云服务器中,或者互联网环境连接数据库。 用户通过JDBC连接GaussDB(DWS)集群时,可以选择是否采用SSL认证方式。SSL认证用于加密客户端和服务器之间的通讯数据,为敏感数据在Internet上的传输提供了一种安全保障手段。
主要有以下三种方式: 使用ELB连接集群:弹性负载均衡(ELB)是将访问流量根据转发策略分发到后端多台弹性云服务器的流量分发控制服务,可以通过流量分发扩展应用系统对外的服务能力,提高应用程序的容错能力。
表1 DWS规格 参数项 参数取值 区域 中国-香港 可用区 可用区1 产品类型 标准数仓 节点规格 8xlarge | 32 vCPUs | 256GB 每节点可用存储 500GB 节点数 3 父主题: 创建弹性云服务器ECS和数据仓库DWS
测试方法 总体流程 创建弹性云服务器ECS和数据仓库DWS 构建TPC-H&TPC-DS使用数据 建表与数据导入 执行查询与结果收集