华为云用户手册

步骤二：数据迁移 配置 CDM 数据源连接。 配置源端 MRS Hive的数据源连接。 登录CDM控制台，选择“集群管理”，选择已创建的CDM集群，在操作列选择“作业管理”。 在作业管理界面，选择“连接管理”，单击“新建连接”，连接器类型选择“MRS Hive”，单击“下一步”。 图3 创建MRS Hive数据源连接 配置源端MRS Hive的数据源连接，具体参数配置如下。 表1 MRS Hive数据源配置 参数 值 名称 自定义MRS Hive数据源名称。例如当前配置为：source_hive Manager IP 单击输入框旁边的“选择”按钮，选择当前MRS Hive集群即可自动关联出来Manager IP。 认证类型 如果当前MRS集群为普通集群则选择为SIMPLE，如果是MRS集群启用了Kerberos安全认证则选择为KERBEROS。 本示例选择为：KERBEROS。 Hive版本 根据当前创建MRS集群时候的Hive版本确定。当前Hive版本为3.1.0，则选择为：HIVE_3_X。 用户名 在3中创建的MRS Hive用户名。 密码 对应的MRS Hive用户名的密码。 其他参数保持默认即可。更多参数的详细说明可以参考CDM上配置Hive连接。 图4 CDM配置MRS Hive数据源 单击“保存”完成MRS Hive数据源配置。 配置目的端 DLI 的数据源连接。 登录CDM控制台，选择“集群管理”，选择已创建的CDM集群，在操作列选择“作业管理”。 在作业管理界面，选择“连接管理”，单击“新建连接”，连接器类型选择“ 数据湖探索 （DLI）”，单击“下一步”。 图5 创建DLI数据源连接 配置目的端DLI数据源连接连接参数。具体参数配置可以参考在CDM上配置DLI连接。 图6 配置DLI数据源连接参数 配置完成后，单击“保存”完成DLI数据源配置。 创建CDM迁移作业。 登录CDM控制台，选择“集群管理”，选择已创建的CDM集群，在操作列选择“作业管理”。 在“作业管理”界面，选择“表/文件迁移”，单击“新建作业”。 在新建作业界面，配置当前作业配置信息，具体参数参考如下： 图7 新建CDM作业作业配置 作业名称：自定义数据迁移的作业名称。例如，当前定义为：hive_to_dli。 源端作业配置，具体参考如下： 表2 源端作业配置 参数名 参数值 源连接名称 选择1.a中已创建的数据源名称。 数据库名称 选择MRS Hive待迁移的数据库名称。例如当前待迁移的表数据数据库为“default”。 表名 待建议Hive数据表名。当前示例为在DLI上创建数据库和表中的“user_info”表。 读取方式 当前示例选择为：HDFS。具体参数含义如下： 包括HDFS和JDBC两种读取方式。默认为HDFS方式，如果没有使用WHERE条件做数据过滤及在字段映射页面添加新字段的需求，选择HDFS方式即可。 HDFS文件方式读取数据时，性能较好，但不支持使用WHERE条件做数据过滤及在字段映射页面添加新字段。 JDBC方式读取数据时，支持使用WHERE条件做数据过滤及在字段映射页面添加新字段。 更多参数的详细配置可以参考：CDM配置Hive源端参数。 目的端作业配置，具体参考如下： 表3 目的端作业配置 参数名 参数值 目的连接名称 选择1.b已创建的DLI数据源连接。 资源队列 选择已创建的DLI SQL类型的队列。 数据库名称 选择DLI下已创建的数据库。当前示例为在DLI上创建数据库和表中创建的数据库名，即为“testdb”。 表名 选择DLI下已创建的表名。当前示例为在DLI上创建数据库和表中创建的表名，即为“user_info”。 导入前清空数据 选择导入前是否清空目的表的数据。当前示例选择为“否”。 如果设置为是，任务启动前会清除目标表中数据。 更多参数的详细配置可以参考：CDM配置DLI目的端参数。 单击“下一步”，进入到字段映射界面，CDM会自动匹配源和目的字段。 如果字段映射顺序不匹配，可通过拖拽字段调整。 如果选择在目的端自动创建类型，这里还需要配置每个类型的字段类型、字段名称。 CDM支持迁移过程中转换字段内容 图8 字段映射 单击“下一步”配置任务参数，一般情况下全部保持默认即可。 该步骤用户可以配置如下可选功能： 作业失败重试：如果作业执行失败，可选择是否自动重试，这里保持默认值“不重试”。 作业分组：选择作业所属的分组，默认分组为“DEFAULT”。在CDM“作业管理”界面，支持作业分组显示、按组批量启动作业、按分组导出作业等操作。 是否定时执行：如果需要配置作业定时自动执行，请参见配置定时任务。这里保持默认值“否”。 抽取并发数：设置同时执行的抽取任务数。这里保持默认值“1”。 是否写入脏数据：如果需要将作业执行过程中处理失败的数据、或者被清洗过滤掉的数据写入OBS中，以便后面查看，可通过该参数配置，写入脏数据前需要先配置好OBS连接。这里保持默认值“否”即可，不记录脏数据。 单击“保存并运行”，回到作业管理界面，在作业管理界面可查看作业执行进度和结果。 图9 迁移作业进度和结果查询

前提条件 已创建DLI的SQL队列。创建DLI队列的操作可以参考创建DLI队列。 创建DLI队列时队列类型需要选择为“SQL队列”。 已创建包含Hive组件的MRS安全集群。创建MRS集群的操作详细可以参考创建MRS集群。 本示例创建的MRS集群和各组件版本如下： MRS集群版本：MRS 3.1.0 Hive版本：3.1.0 Hadoop版本：3.1.1 本示例创建MRS集群时开启了Kerberos认证。 已创建CDM迁移集群。创建CDM集群的操作可以参考创建CDM集群。 如果目标数据源为云下的数据库，则需要通过公网或者专线打通网络。通过公网互通时，需确保CDM集群已绑定EIP、CDM云上安全组出方向放通云下数据源所在的主机、数据源所在的主机可以访问公网且防火墙规则已开放连接端口。 数据源为云上的MRS、DWS等服务时，网络互通需满足如下条件： i. CDM集群与云上服务处于不同区域的情况下，需要通过公网或者专线打通网络。通过公网互通时，需确保CDM集群已绑定EIP，数据源所在的主机可以访问公网且防火墙规则已开放连接端口。 ii. CDM集群与云上服务同区域情况下，同虚拟私有云、同子网、同安全组的不同实例默认网络互通；如果同虚拟私有云但是子网或安全组不同，还需配置路由规则及安全组规则。 配置路由规则请参见如何配置路由规则章节，配置安全组规则请参见如何配置安全组规则章节。 iii. 此外，您还必须确保该云服务的实例与CDM集群所属的企业项目必须相同，如果不同，需要修改工作空间的企业项目。 本示例CDM集群的虚拟私有云、子网以及安全组和MRS集群保持一致。

数据说明 为保护用户的隐私和数据安全，所有数据均已进行了采样和脱敏。 用户数据 表1 用户数据 字段名称 字段类型 字段说明 取值范围 user_id int 用户ID 脱敏 age int 年龄段 -1表示未知 gender int 性别 0表示男 1表示女 2表示保密 rank Int 用户等级 有顺序的级别枚举，越高级别数字越大 register_time string 用户注册日期 单位：天 商品数据 表2 商品数据 字段名称 字段类型 字段说明 取值范围 product_id int 商品编号 脱敏 a1 int 属性1 枚举，-1表示未知 a2 int 属性2 枚举，-1表示未知 a3 int 属性3 枚举，-1表示未知 category int 品类ID 脱敏 brand int 品牌ID 脱敏 评价数据 表3 评价数据 字段名称 字段类型 字段说明 取值范围 deadline string 截止时间 单位：天 product_id int 商品编号 脱敏 comment_num int 累计评论数分段 0表示无评论 1表示有1条评论 2表示有2-10条评论 3表示有11-50条评论 4表示大于50条评论 has_bad_comment int 是否有差评 0表示无，1表示有 bad_comment_rate float 差评率 差评数占总评论数的比重 行为数据 表4 行为数据 字段名称 字段类型 字段说明 取值范围 user_id int 用户编号 脱敏 product_id int 商品编号 脱敏 time string 行为时间 - model_id string 模块编号 脱敏 type string 浏览（指浏览商品详情页） 加入购物车 购物车删除 下单 关注 点击 -

步骤1：上传数据 将数据上传到 对象存储服务 OBS，为后面使用DLI完成数据分析做准备。 下载OBS Browser+。下载地址请参考《对象存储服务工具指南》。 安装OBS Browser+。安装步骤请参考《对象存储服务工具指南》。 登录OBS Browser+。OBS Browser+支持AK方式登录，以及授权码登录两种登录方式。登录步骤请参考《对象存储服务工具指南》。 通过OBS Browser+上传数据。 在OBS Browser+页面单击“创建桶”，按照要求选择“区域”和填写“桶名”（例如：DLI-demo），创建桶成功后，返回桶列表，单击桶DLI-demo。OBS Browser+提供强大的拖拽上传功能，您可以将本地的一个或多个文件或者文件夹拖拽到对象存储的对象列表或者并行文件系统的对象列表中；同时您也可以将文件或文件夹拖拽到指定的目录上，这样可以上传到指定的目录中。 单击Best_Practice_04.zip获取本示例的测试数据，解压“Best_Practice_04.zip”压缩包，解压后将data文件夹上传到OBS桶根目录下。测试数据目录说明如下： user表数据：data/JData_User product表数据：data/JData_Product comment表数据：data/JData_Product/JData_Comment action表数据：data/JData_Action

应用场景 某商城作为中国一家自营式电商，在保持高速发展的同时，沉淀了数亿的忠实用户，积累了海量的真实数据。如何利用BI工具从历史数据中找出商机，是大数据应用在精准营销中的关键问题，也是所有电商平台在做智能化升级时所需要的核心技术。 本案例以某商城真实的用户、商品、评论数据（脱敏后）为基础，利用华为云 数据湖 探索、 数据仓库 服务以及永洪BI来分析用户和商品的各种数据特征，可为营销决策、广告推荐、信用评级、品牌监控、用户行为预测提供高质量的信息。

步骤二：数据迁移 配置CDM数据源连接。 配置源端 CSS 的数据源连接。 登录CDM控制台，选择“集群管理”，选择已创建的CDM集群，在操作列选择“作业管理”。 在作业管理界面，选择“连接管理”，单击“新建连接”，连接器类型选择“ 云搜索服务 ”，单击“下一步”。 图1 创建 CS S数据源 配置源端CSS的数据源连接，具体参数配置如下。详细参数配置可以参考CDM上配置CSS连接。 表1 CSS数据源配置 参数 值 名称 自定义CSS数据源名称。例如当前配置为“source_css”。 Elasticsearch服务器列表 单击输入框旁边的“选择”按钮，选择当前CSS集群即可自动关联出来Elasticsearch服务器列表。 安全模式认证 如果所需连接的CSS集群在创建时开启了“安全模式”，该参数需设置为“是”，否则设置为“否”。 本示例选择为“否”。 图2 CDM配置CSS数据源 单击“保存”完成CSS数据源配置。 配置目的端DLI的数据源连接。 登录CDM控制台，选择“集群管理”，选择已创建的CDM集群，在操作列选择“作业管理”。 在作业管理界面，选择“连接管理”，单击“新建连接”，连接器类型选择“数据湖探索（DLI）”，单击“下一步”。 图3 创建DLI数据源连接 配置目的端DLI数据源连接连接参数。具体参数配置可以参考在CDM上配置DLI连接。 图4 配置DLI数据源连接参数 配置完成后，单击“保存”完成DLI数据源配置。 创建CDM迁移作业。 登录CDM控制台，选择“集群管理”，选择已创建的CDM集群，在操作列选择“作业管理”。 在“作业管理”界面，选择“表/文件迁移”，单击“新建作业”。 在新建作业界面，配置当前作业配置信息，具体参数参考如下： 图5 新建CDM作业作业配置 作业名称：自定义数据迁移的作业名称。例如，当前定义为：css_to_dli。 源端作业配置，具体参考如下： 表2 源端作业配置 参数名 参数值 源连接名称 选择1.a中已创建的数据源名称。 索引 选择CSS集群中创建的Elasticsearch索引名。当前示例为CSS集群上创建索引并导入数据中创建的索引“my_test”。 索引名称只能全部小写，不能有大写。 类型 Elasticsearch的类型，类似关系数据库中的表名称。类型名称只能全部小写，不能有大写。当前示例为：“_doc”。 更多其他参数说明可以参考：CDM配置CSS源端参数。 目的端作业配置，具体参考如下： 表3 目的端作业配置 参数名 参数值 目的连接名称 选择1.b已创建的DLI数据源连接。 资源队列 选择已创建的DLI SQL类型的队列。 数据库名称 选择DLI下已创建的数据库。当前示例为在DLI上创建数据库和表中创建的数据库名，即为“testdb”。 表名 选择DLI下已创建的表名。当前示例为在DLI上创建数据库和表中创建的表名，即为“tablecss”。 导入前清空数据 选择导入前是否清空目的表的数据。当前示例选择为“否”。 如果设置为是，任务启动前会清除目标表中数据。 详细的参数配置可以参考：CDM配置DLI目的端参数。 单击“下一步”，进入到字段映射界面，CDM会自动匹配源和目的字段。 如果字段映射顺序不匹配，可通过拖拽字段调整。 如果选择在目的端自动创建类型，这里还需要配置每个类型的字段类型、字段名称。 CDM支持迁移过程中转换字段内容，详细请参见字段转换。 图6 字段映射 单击“下一步”配置任务参数，一般情况下全部保持默认即可。 该步骤用户可以配置如下可选功能： 作业失败重试：如果作业执行失败，可选择是否自动重试，这里保持默认值“不重试”。 作业分组：选择作业所属的分组，默认分组为“DEFAULT”。在CDM“作业管理”界面，支持作业分组显示、按组批量启动作业、按分组导出作业等操作。 是否定时执行：如果需要配置作业定时自动执行，请参见配置定时任务。这里保持默认值“否”。 抽取并发数：设置同时执行的抽取任务数。这里保持默认值“1”。 是否写入脏数据：如果需要将作业执行过程中处理失败的数据、或者被清洗过滤掉的数据写入OBS中，以便后面查看，可通过该参数配置，写入脏数据前需要先配置好OBS连接。这里保持默认值“否”即可，不记录脏数据。 单击“保存并运行”，回到作业管理界面，在作业管理界面可查看作业执行进度和结果。 图7 迁移作业进度和结果查询

前提条件 已创建DLI的SQL队列。创建DLI队列的操作可以参考创建DLI队列。 创建DLI队列时队列类型需要选择为“SQL队列”。 已创建Elasticsearch类型的CSS集群。具体创建CSS集群的操作可以参考创建CSS集群。 本示例创建的CSS集群版本为：7.6.2，集群为非安全集群。 已创建CDM迁移集群。创建CDM集群的操作可以参考创建CDM集群。 如果目标数据源为云下的数据库，则需要通过公网或者专线打通网络。通过公网互通时，需确保CDM集群已绑定EIP、CDM云上安全组出方向放通云下数据源所在的主机、数据源所在的主机可以访问公网且防火墙规则已开放连接端口。 数据源为云上的CSS服务时，网络互通需满足如下条件： i. CDM集群与云上服务处于不同区域的情况下，需要通过公网或者专线打通网络。通过公网互通时，需确保CDM集群已绑定EIP，数据源所在的主机可以访问公网且防火墙规则已开放连接端口。 ii. CDM集群与云上服务同区域情况下，同虚拟私有云、同子网、同安全组的不同实例默认网络互通；如果同虚拟私有云但是子网或安全组不同，还需配置路由规则及安全组规则。 配置路由规则请参见如何配置路由规则章节，配置安全组规则请参见如何配置安全组规则章节。 iii. 此外，您还必须确保该云服务的实例与CDM集群所属的企业项目必须相同，如果不同，需要修改工作空间的企业项目。 本示例CDM集群的虚拟私有云、子网以及安全组和创建的CSS集群保持一致。

方案优势 大数据分析BI工具提供数据探索能力：FineBI 作为新一代自助大数据分析的 BI 工具，为企业提供多源数据采集，自助探索式分析，多屏解决方案以及企业级管控等一站式企业商业智能解决方案。 华为云DLI提供数据的融合分析处理能力：DLI支持与多种数据源的对接，通过SQL建表就可以完成数据源的映射。直接使用标准SQL编写指标分析逻辑，无需关注背后复杂的分布式计算平台。 通过FineBI与华为云DLI对接实现数据实时接入、数据处理效率高、 数据可视化 效果好。DLI支持多种数据源对接FineBI，Fine BI可以将DLI数据以图表、报表等形式进行可视化展示，使数据更加更加直观，益于理解和分析提高了决策的准确性和效率。

资源和成本规划 表1 资源和成本规划 资源 资源说明 成本说明 OBS DLI需要绑定OBS作为日志桶。 OBS的使用涉及以下几项费用： 存储费用：静态网站文件存储在OBS中产生的存储费用。 请求费用：用户访问OBS中存储的静态网站文件时产生的请求费用。 流量费用：用户使用自定义 域名 通过公网访问OBS时产生的流量费用。 实际产生的费用与存储的文件大小、用户访问所产生的请求次数和流量大小有关，请根据自己的业务进行预估。 DLI 本例使用弹性资源池创建SQL作业。 参考DLI弹性资源池的计费说明。 VPCEP 用来打通FineBI与DLI的网络连接。 参考VPCEP的计费说明。 ELB ELB是将访问流量根据分配策略分发到后端多台服务器的流量分发控制服务。 参考ELB的计费说明。 EIP 提供独立的公网IP资源，包括公网IP地址与公网出口带宽服务 参考EIP的计费说明。

约束限制 Trino引擎队列仅支持HTTPS协议的连接方式。 使用Trino引擎时，所创建的SQL队列不支持扩缩容。 如果需要调整队列CU的大小，需要先在弹性资源池下先删除队列后在弹性资源池下创建CU大小合适的Trino引擎的队列。 DLI Trino引擎处于公测阶段，如果有需要请联系客服申请开通。 支持DLI Trino引擎的区域：华北-北京四、华东-上海一、中国-香港、亚太-曼谷、亚太-新加坡、非洲-约翰内斯堡 BI对接暂只支持使用Hive语法创建的外表。

步骤1：上传数据 将数据上传到对象存储服务OBS，为后面使用DLI完成数据分析做准备。 下载OBS Browser+。下载地址请参考《对象存储服务工具指南》。 安装OBS Browser+。安装步骤请参考《对象存储服务工具指南》。 登录OBS Browser+。OBS Browser+支持AK方式登录，以及授权码登录两种登录方式。登录步骤请参考《对象存储服务工具指南》。 通过OBS Browser+上传数据。 在OBS Browser+页面单击“创建桶”，按照要求选择“区域”和填写“桶名”（例如：dli-demo），其他参数保持默认或根据需要选择，创建桶成功后，返回桶列表，单击桶dli-demo。OBS Browser+提供强大的拖拽上传功能，您可以将本地的一个或多个文件或者文件夹拖拽到对象存储的对象列表或者并行文件系统的对象列表中；同时您也可以将文件或文件夹拖拽到指定的目录上，这样可以上传到指定的目录中。 单击Best_Practice_01.zip获取本示例的测试数据，将“Best_Practice_01.zip”压缩包解压。后续操作说明如下： 详单数据：将解压后Data目录下的“detail-records”文件夹上传到OBS桶根目录下。 订单数据：将解压后Data目录下的“order-records”文件夹上传到OBS桶根目录下。

资源和成本规划 表1 资源和成本规划 资源 资源说明 成本说明 OBS 需要创建一个OBS桶将数据上传到对象存储服务OBS，为后面使用DLI完成数据分析做准备。 OBS的使用涉及以下几项费用： 存储费用：静态网站文件存储在OBS中产生的存储费用。 请求费用：用户访问OBS中存储的静态网站文件时产生的请求费用。 流量费用：用户使用自定义域名通过公网访问OBS时产生的流量费用。 实际产生的费用与存储的文件大小、用户访问所产生的请求次数和流量大小有关，请根据自己的业务进行预估。 DLI 在创建SQL作业前需购买队列，使用DLI的队列资源时，按照队列CU时进行计费。 如购买按需计费的队列，在使用队列资源时，按照队列CU时进行计费。 以小时为单位进行结算。不足一小时按一小时计费，小时数按整点计算。队列CU时按需计费的计算费用=单价*CU数*小时数。

数据说明 详单数据 车辆上报的详单数据，包括定时上报的位置记录和异常的驾驶行为触发的告警事件数据。 表2 详单数据 字段名称 字段类型 字段说明 driverID string 驾驶员ID carNumber string 车牌号 latitude double 纬度 longitude double 经度 speed int 速度 direction int 方向 siteName string 地点 time timestamp 记录上报时间 isRapidlySpeedup int 急加速标识，“1”表示急加速，“0”表示非急加速 isRapidlySlowdown int 急减速 isNeutralSlide int 空挡滑行 isNeutralSlideFinished int 空挡滑行结束 neutralSlideTime bigint 空挡滑行时长 isOverspeed int 超速 isOverspeedFinished int 超速结束 overspeedTime bigint 超速时长 isFatigueDriving int 疲劳驾驶 isHthrottleStop int 停车轰油门 isOilLeak int 用油异常 订单数据 订单数据记录了货运订单相关的信息。 表3 订单数据 字段名称 字段类型 字段说明 orderNumber string 订单号 driverID string 驾驶员ID carNumber string 车牌号 customerID string 客户ID sourceCity string 出发城市 targetCity string 到达城市 expectArriveTime timestamp 期望送达时间 time timestamp 记录产生时间 action string 事件类型，包括创建订单、开始发货、货物送达、订单签收等事件

资源和成本规划 表1 资源和成本规划 资源 资源说明 成本说明 OBS 需要创建一个OBS桶将数据上传到对象存储服务OBS，为后面使用DLI完成数据分析做准备。 OBS的使用涉及以下几项费用： 存储费用：静态网站文件存储在OBS中产生的存储费用。 请求费用：用户访问OBS中存储的静态网站文件时产生的请求费用。 流量费用：用户使用自定义域名通过公网访问OBS时产生的流量费用。 实际产生的费用与存储的文件大小、用户访问所产生的请求次数和流量大小有关，请根据自己的业务进行预估。 DLI 在创建SQL作业前需购买队列，使用DLI的队列资源时，按照队列CU时进行计费。 如购买按需计费的队列，在使用队列资源时，按照队列CU时进行计费。 以小时为单位进行结算。不足一小时按一小时计费，小时数按整点计算。队列CU时按需计费的计算费用=单价*CU数*小时数。

步骤2：使用DLI将CSV数据转换为Parquet数据 在DLI控制台总览页面左侧，单击“SQL编辑器”，进入SQL作业编辑器页面。 在SQL作业编辑器左侧，选择“数据库”页签，单击创建名字为demo的数据库。 在DLI的SQL编辑窗口，执行引擎选择“spark”，队列选择“default”，数据库选择为“demo”。输入以下建表语句，创建OBS表test_csv_hw并导入test.csv数据。 create table test_csv_hw(id1 int, id2 int, id3 int, id4 int, id5 int) using csv options( path 'obs://obs-csv-parquet/test.csv' ) 在DLI的SQL编辑窗口，执行以下语句可以查询表test_csv_hw中的数据。 图4 查询表test_csv_hw 在DLI的SQL编辑窗口中创建OBS表test_parquet_hw。 create table `test_parquet_hw` (`id1` INT, `id2` INT, `id3` INT, `id4` INT, `id5` INT) using parquet options ( path 'obs://obs-parquet-data/' ) 不需要指明具体的文件，因为在将数据从CSV格式转换为Parquet格式之前，不存在任何Parquet文件。 在DLI的SQL编辑窗口中将CSV数据转换为Parquet数据并存储在OBS中。 insert into test_parquet_hw select * from test_csv_hw 检查结果，如图5所示，系统自动创建了一个文件用于保存结果。 图5 保存Parquet数据

操作步骤 在永洪SaaS生产环境主页，单击左侧导航栏中的“制作报告”，请参见图1。 图1 制作报告 选择图表风格，请参见图2。 图2 选择报告风格 选择“清爽绿主题”为例，在界面左侧下拉选择添加已创建的数据集，选择其中的一个表（例如table_child）作为数据源，会在下方的“数据”栏显示出该表的元数据（包括字段和字段类型），请参见图3。 图3 选择表数据源 在制作报告界面，制表组件主要包括图表、表、交叉表、列表过滤等，以新建图表为例，单击工具栏中的“新建图表 ”，将其拖入编辑区域，请参见图4。 图4 新建图表 选择“name”作为X变量，“age”作为Y变量，将其直接拖入对应的位置，系统将自动生成对应的柱状图，请参见图5。 图5 生成图表 在“制作图表”页面工具栏中单击“保存”，完成制作图表。

步骤5：配置NAT网关 创建NAT网关。 登录控制台，在“服务列表”搜索“NAT网关”，进入网络控制台页面。 单击“购买公网NAT网关”，配置NAT网关的相关信息。 详细请参考《NAT网关用户指南》中“购买公网NAT网关”。 图4 购买NAT网关 配置完成后，单击“立即购买”。 “虚拟私有云”为步骤1：创建VPC创建的VPC。 添加路由。 进入VPC的路由表，配置路由规则。通常NAT创建成功会自动创建到NAT网关的路由。 目的地址为访问的公网IP地址，下一跳为NAT网关。 图5 添加路由 添加SNAT规则。 为新建的NAT网关添加SNAT规则，才能实现该子网下的主机与Internet互相访问。 NAT网关购买成功后，在NAT控制台，单击购买成功的NAT网关“名称”，进入NAT网关详情页面。 选择“SNAT规则”页签，单击“添加SNAT规则”。 详细请参考《NAT网关用户指南》中“添加SNAT规则”。 使用场景选择云专线/云连接。 添加专属队列所在的网段。 绑定对应的弹性公网IP。 图6 添加SNAT规则 添加完成后，单击“确定”。

方案优势 大数据分析BI工具提供数据探索能力：PowerBI可以将数据转换成丰富的图表、表格、地图、仪表盘等多种形式，让数据更加直观、易懂。 华为云DLI提供数据的融合分析处理能力：DLI支持与多种数据源的对接，通过SQL建表就可以完成数据源的映射。DLI提供强大的数据探索能力，可以通过数据筛选、排序、分组等方式深入 挖掘数据的潜力。 通过PowerBI与华为云DLI对接实现数据实时接入、数据准确性高、数据处理效率高、数据可视化效果好：DLI和PowerBI对接后可以将不同数据源的数据整合在一起；DLI支持大数据处理，可以处理大量的数据并挖掘出数据的潜力，PowerBI可以对这些数据进行快速的可视化，提高数据分析的效率和精度。

资源和成本规划 表1 资源和成本规划 资源 资源说明 成本说明 OBS DLI需要绑定OBS作为日志桶。 OBS的使用涉及以下几项费用： 存储费用：静态网站文件存储在OBS中产生的存储费用。 请求费用：用户访问OBS中存储的静态网站文件时产生的请求费用。 流量费用：用户使用自定义域名通过公网访问OBS时产生的流量费用。 实际产生的费用与存储的文件大小、用户访问所产生的请求次数和流量大小有关，请根据自己的业务进行预估。 DLI 本例使用弹性资源池创建SQL作业。 参考DLI弹性资源池的计费说明。 VPCEP 用来打通FineBI与DLI的网络连接。 参考VPCEP的计费说明。 ELB ELB是将访问流量根据分配策略分发到后端多台服务器的流量分发控制服务。 参考ELB的计费说明。 EIP 提供独立的公网IP资源，包括公网IP地址与公网出口带宽服务 参考EIP的计费说明。

约束限制 Trino引擎队列仅支持HTTPS协议的连接方式。 使用Trino引擎时，所创建的SQL队列不支持扩缩容。 如果需要调整队列CU的大小，需要先在弹性资源池下先删除队列后在弹性资源池下创建CU大小合适的Trino引擎的队列。 DLI Trino引擎处于公测阶段，如果有需要请联系客服申请开通。 支持DLI Trino引擎的区域：华北-北京四、华东-上海一、中国-香港、亚太-曼谷、亚太-新加坡、非洲-约翰内斯堡 BI对接暂只支持使用Hive语法创建的外表。

步骤3：PowerBI安装及驱动安装 安装PowerBI desktop版本 在PowerBI官网选择对应的desktop版本进行下载。 安装openlookeng odbc驱动 安装本驱动前请确认当前具有管理员权限。 双击msi安装包，出现安装的欢迎界面，单击“Next”。 第二页为用户协议，勾选接受后单击“Next”。 第三页选择安装方式，建议选择“Complete”完整安装。 第四页选择安装路径，配置后单击“Next”。 完成上述安装设置后在最后一页单击“Install”开始安装。 安装过程中会弹出cmd命令行窗口，为安装Driver组件的过程，待其完成后会自动关闭。至此完成了openLooKeng ODBC驱动的全部安装过程。 完成后出现弹出窗口，如果以前配置过旧版本驱动的用户DSN可以勾选使DSN用于新安装的版本，单击“Finish”完成安装。 图13 openlookeng odbc驱动

计费说明 安全云脑 的计费项由服务版本、ECS主机配额和增值包（安全大屏、智能分析、安全编排）费用组成。具体内容如表1所示。 表1 安全云脑计费项 计费项 计费项说明 适用的计费模式 计费公式 服务版本+ECS主机配额（必选） 计费因子：服务版本+ECS主机配额，不同版本提供不同的功能。 包年/包月、按需计费 包年/包月：服务版本+主机配额 * 购买时长 按需：服务版本+主机配额单价 * 计费时长 增值包（可选） 安全大屏 如有现场讲解汇报、实时监控等场景，希望获得更好的演示效果，需要将安全云脑服务的分析结果展示在大型屏幕上的需求，可以额外单独购买安全大屏。 计费因子：安全大屏。 包年/包月、按需计费 包年/包月：安全大屏单价 * 购买时长 按需：安全大屏单价 * 计费时长 智能分析 如有数据采集、分析和存储的需求，可以额外单独购买智能分析配额。 计费因子：日志数据分析量。 包年/包月、按需计费 包年/包月：日志数据分析量/天 * 购买时长 按需：按实际使用日志数据分析量大小计费 安全编排 如有自动化处置及事件调查的需求，可以额外单独购买安全编排功能。 计费因子：剧本执行时，流程节点（包括开始、结束节点，不包括判断节点）的执行次数。 包年/包月、按需计费 包年/包月：智能分析 安全编排分析次数/天 * 购买时长 按需：剧本执行时，流程节点（包括开始、结束节点，不包括判断节点）的执行次数 舆情监测 如果有需要掌握舆情动态，对潜在的各类舆情风险点进行监测和综合研判，或有需要对突发事件、日常舆情等进行监测形成分析报告的需求时，可以单独购买舆情监测功能。 计费因子：报告份数 按需计费 按需：根据报告份数（一份报告仅包含一个监测主题）按次进行收费 其中，增值包中的功能在购买、使用时的其他说明如表2所示。 表2 增值包说明 场景 说明 购买 增值包（安全大屏、智能分析、安全编排）为标准版和专业版额外选购付费项目，不支持单独购买，如需使用，请先购买标准版或专业版。 计费 服务版本+ECS主机配额计费跟增值包计费间没有联系，单独计费，且互不影响。 赠送 增值包中的智能分析、安全编排含有赠送配额/次数可以免费使用，赠送情况如下： 智能分析：标准版 60MB/ECS/天、专业版 120MB/ECS/天 安全编排：标准版 500次/ECS/天、专业版 10000次/ECS/天 如果赠送配额/次数不足，无法满足业务需求，请单独开通增值包（智能分析、安全编排）功能。 使用 仅包年/包月智能分析、安全编排有如下使用说明： 智能分析：按实际使用日志数据分析量计费。如果当日使用量大于当日购买量，则当日无法再继续使用智能分析功能，第二天00:00才可以继续使用。 安全编排：按实际安全编排剧本执行次数计费。如果当日使用次数大于购买量，则当日无法再继续使用安全编排功能，第二天00:00才可以继续使用。 例如：您购买的是1 GB/天为期1个月的智能分析功能，购买当天22:00前使用了1GB，则在22:00 ~ 24:00间将无法使用智能分析功能。

计费示例 假设您在2023/06/30 15:50:04购买了1个主机配额包年/包月专业版安全云脑（版本：专业版，主机配额：1），还购买了增值包中的安全大屏、智能分析配额（1 GB/天）、安全编排（1万次/天）功能，计费资源包括专业版、主机配额、增值包。购买时长为一个月，并在到期前手动续费1个月，则： 第一个计费周期为：2023/06/30 15:50:04 ~ 2023/07/30 23:59:59 第二个计费周期为：2023/07/30 23:59:59 ~ 2023/08/30 23:59:59 图1给出了上述示例配置的费用计算过程。 图中价格仅供参考，请以最终订单的价格为准，具体可参见安全云脑价格详情。 图1 包年/包月安全云脑费用计算示例 按需计费模式下，各计费项的计费示例请参见计费示例。

计费模式概述 安全云脑提供包年/包月、按需计费两种计费模式，以满足不同场景下的用户需求。 包年/包月：一种预付费模式，即先付费再使用，按照订单的购买周期进行结算。购买周期越长，享受的折扣越大。 按需计费：一种后付费模式，即先使用再付费，按照实际使用时长计费，秒级计费，按小时结算。按需计费模式允许您根据实际业务需求灵活地调整资源使用，无需提前预置资源，从而降低预置过多或不足的风险。 表1列出了两种计费模式的区别。 表1 计费模式 计费模式 包年/包月 按需计费 付费方式 预付费 按照订单的购买周期结算。 后付费 按照实际使用时长计费。 计费周期 按订单的购买周期计费。 秒级计费，按小时结算。 适用计费项 服务版本+ECS主机配额 增值包（安全大屏、智能分析、安全编排） 服务版本（仅专业版）+ECS主机配额 增值包（安全大屏、智能分析、安全编排） 舆情监测 变更规格 支持变更服务版本规格+增加ECS主机配额。 支持增加ECS主机配额。 适用场景 适用于可预估资源使用周期的场景，价格比按需计费模式更优惠。对于长期使用者，推荐该方式。 适用于资源需求波动的场景，可以随时开通，随时删除。 说明： 增值包无法单独购买，需已购买标准版或专业版基础上才可以购买。但是，服务版本+ECS主机配额计费跟增值包计费间没有联系，单独计费，且互不影响。 父主题： 计费模式

适用计费项 以下计费项支持按需计费： 表1 适用计费项 计费项 说明 服务版本+ECS主机配额 购买的服务版本+ECS主机配额，仅专业版支持按需购买。 安全大屏 随按需计费安全云脑版本的基础上额外购买的增值包-安全大屏功能，其计费模式也为按需计费。 智能分析 随按需计费安全云脑版本的基础上额外购买的增值包-智能分析功能，其计费模式也为按需计费。 安全编排 随按需计费安全云脑版本的基础上额外购买的增值包-安全编排功能，其计费模式也为按需计费。 舆情监测 根据报告份数（一份报告仅包含一个监测主题）按次进行收费。 假设您计划购买1个主机配额的专业版安全云脑，并同时购买了安全大屏、智能分析和安全编排，且选择按需计费。在购买安全云脑页面底部，您将看到所需费用的明细，如下图所示： 图1 配置费用示例 配置费用将包括以下部分： 专业版：根据所选版本和设置主机配额计算的费用。 安全大屏：购买安全大屏的费用。 智能分析：基于实际使用的日志数据分析量计算的费用。 安全编排：基于实际剧本执行次数计算的费用。

计费周期 按需计费SecMaster资源按秒计费，每一个小时整点结算一次费用（以UTC+8时间为准），结算完毕后进入新的计费周期。计费的起点以安全云脑购买成功的时间点为准，终点以实例取消按需计费成功的时间点为准。 例如，您在8:45:30购买了1个主机配额的专业版安全云脑（未购买增值包），然后在8:55:00将其取消，则计费周期为8:00:00 ~ 9:00:00，在8:45:30 ~ 8:55:30间产生费用，该计费周期内的计费时长为600秒。

计费示例 假设您在2023/06/08 9:59:30购买了一个主机配额按需计费的专业版安全云脑（版本：专业版，主机配额：1），增值包购买了安全大屏、智能分析、安全编排，然后在2023/06/08 10:45:46将其删除。计费周期内使用智能分析了1GB日志，进行了500次安全编排，服务版本+主机配额和安全大屏的计费周期如下： 第一个计费周期为9:00:00 ~ 10:00:00，在9:59:30 ~ 10:00:00间产生费用，该计费周期内的计费时长为30秒。 第二个计费周期为10:00:00 ~ 11:00:00，在10:00:00 ~ 10:45:46间产生费用，该计费周期内的计费时长为2746秒。 您需要为每个计费周期付费，各项资源单独计费，计费公式如表2所示。产品价格详情中标出了资源的每小时价格，您需要将每小时价格除以3600，得到每秒价格。 表2 计费公式 资源类型 计费公式 服务版本+ECS主机配额 服务版本+ECS主机配额单价 * 计费时长 安全大屏 安全大屏单价 * 计费时长 智能分析 按实际日志数据分析量大小计费 安全编排 按实际剧本执行时，流程节点（包括开始、结束节点，不包括判断节点）的执行次数 图2给出了上述示例配置的费用计算过程。 图中价格仅供参考，请以最终订单的价格为准，具体可参见安全云脑价格详情。 图2 按需计费安全云脑费用计算示例

变更配置后对计费的影响 如果您在购买按需计费实例后变更了主机配额，会产生一个新订单并开始按新配置的价格计费，旧订单自动失效。 如果您在一个小时内变更了主机配额，将会产生多条计费信息。每条计费信息的开始时间和结束时间对应不同配置在该小时内的生效时间。 例如，您在9:00:00购买了1个主机配额的专业版安全云脑，并在9:30:00增加为2个主机配额，那么在9:00:00 ~ 10:00:00间会产生两条计费信息。 第一条对应9:00:00 ~ 9:30:00，按照1个主机配额的专业版计费。 第二条对应9:30:00 ~ 10:00:00，按照2个主机配额的专业版计费。

核心代码 1 2 3 4 5 // 向MPC发送取消独立加密任务的请求 DeleteEncryptTaskRequest req = new DeleteEncryptTaskRequest().withTaskId("3223179"); DeleteEncryptTaskResponse rsp = initMpcClient().deleteEncryptTask(req); // 打印返回消息 System.out.println("rsp=" + JsonUtils.toJSON(rsp));

复合查询 1 2 3 4 5 //复合查询 ListThumbnailsTaskRequest req = new ListThumbnailsTaskRequest().withPage(1).withSize(4) .withStartTime("20201220131400") .withEndTime("20201220131400") .withStatus(ListThumbnailsTaskRequest.StatusEnum.FAILED);