检测到您已登录华为云国际站账号,为了您更更好的体验,建议您访问国际站服务⽹网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
未实名认证
已实名认证
MapReduce Service为客户提供Hudi、ClickHouse、Spark、Flink、Kafka、HBase等Hadoop生态的高性能大数据组件,支持数据湖、数据仓库、BI、AI融合等能力。
云原生数据湖MRS(MapReduce Service)为客户提供Hudi、ClickHouse、Spark、Flink、Kafka、HBase等Hadoop生态的高性能大数据组件,支持数据湖、数据仓库、BI、AI融合等能力。
如果您没有购买集群,请上传程序和数据到对象存储服务(OBS)中;如果您已经购买了集群,请上传程序和数据到HDFS。
进入MapReduce管理控制台,单击“购买集群”并配置相关参数。用户可以指定集群类型用于离线数据分析和流处理任务,指定集群中预置的弹性云服务器实例规格、实例数量、数据盘类型(普通IO、高 IO、超高 IO)、要安装的组件(Hadoop、Spark、HBase、Hive、Kafka、Storm等)。用户可以使用引导操作在集群启动前(或后)在指定的节点上执行脚本,安装其他第三方软件或修改集群运行环境等自定义操作。
您可以通过MRS控制台界面提交作业,也可以通过MRS集群节点使用命令提交作业。
您可以在每个集群的“作业管理”页签查看作业运行记录和查询结果,也可下载分析结果。您也可以将结果转储到用户OBS上,转储成功后,使用OBS工具下载文件,查看结果。
指导用户在华为云上创建、配置、访问MapReduce服务,并基于MapReduce服务提供的HDFS实现单词统计
通过MRS服务Spark组件分析统计指定时间内,车主急加速、急刹车、空挡滑行、超速等违法行为的次数
体验其如何实现多数据源的跨源跨域分析能力
MRS集群操作指导
08:59
MRS修改服务配置参数指导
04:01
MRS二次开发配置和导入样例工程指导
07:13