MapReduce服务 MRS

MapReduce服务(MapReduce Service)提供租户完全可控的企业级大数据集群云服务,轻松运行Hadoop、Spark、HBase、Kafka、Storm等大数据组件

买10个月 送2个月 了解详情

企业级

基于华为FusionInsight大数据企业级平台能力,历经行业数万节点部署量的考验,提供企业级调度实现不同作业之间的资源隔离,提供多级用户SLA保障

易运维

用户无需关注硬件的购买和维护,专门研发的企业级集群管理系统,可让用户更好的监控和管理大数据平台,并可通过短信/邮件的方式,提醒用户平台异常

高安全

经由华为专业的安全团队和德国PSA安全认证测试,提供云上高安全的大数据服务。基于Kerberos认证,实现了基于角色的安全控制以及完善的审计功能

低成本

基于多样化的云基础设施,提供了丰富的计算、存储设施的选择,MRS集群可以用时再创建、用时再扩容,用完就可以销毁、缩容,确保成本最优

应用场景

  • 海量数据分析

  • 海量数据存储

  • 低时延流式处理

海量数据分析

环保行业

天气数据存储在OBS,定期转储到HDFS中进行批量分析,在1小时内完成10T的天气数据分析

优势

  • 低成本

    利用OBS实现低成本存储

  • 海量数据分析

    利用Hive实现TB/PB级的数据分析

  • 可视化的导入导出工具

    通过可视化导入导出工具Loader,将数据导出到RDS,完成BI分析

海量数据存储

车联网行业

某车企将数据储存在HBase中,以支持PB级别的数据存储和秒级的数据详单查询

优势

  • 实时

    利用Kafka实现海量汽车的消息实时接入

  • 海量数据存储

    利用HBase实现海量数据存储,并实现毫秒级数据查询

  • 分布式数据查询

    利用Spark实现海量数据的分析查询

低时延流式处理

梯联网行业

智能电梯的数据,实时传入到MRS的流式集群中进行实时告警

优势

  • 实时数据采集

    利用Flume实现实时数据采集,并提供丰富的采集和存储连接方式

  • 海量的数据源接入

    利用Kafka实现万级别的电梯数据的实时接入

新特性

2016/08/25
新上线,支持Hadoop、Spark、Hbase和Hive
2017/03/25
支持包年包月付费
2017/06/23
支持Kafka、Storm、Hue、CarbonData组件
2017/06/23
支持Kerberos认证
2017/08/18
支持Flume和Loader组件,Spark升级到2.1.0
2017/09/27
支持通过OBS收集集群创建日志
2017/10/24
多Region部署,华东区上线
2017/11/29
支持通用型II代(s2)和磁盘增强型II代(d2)虚拟机

功能描述

弹性创建按量计费

按照实际需要创建,不使用不计费

  • 灵活配置节点与磁盘规格

  • 灵活配置集群规模

  • 灵活配置大数据软件及版本

  • 支持集群按需扩容

  • 支持临时集群,作业运行完自动销毁

企业级的大数据发行版

安全、可靠、高效、高可用

  • 高可用部署,所有管理节点均实现HA

  • 支持Kerberos安全认证与RBAC

  • 多级租户管理

  • 支持文件系统和数据表加密

  • 强大的服务健康与性能管理

  • 支持高性能本地盘

兼容性

兼容开源生态,应用无缝迁移

  • 无缝对接对象存储

  • 支持CarbonData高性能文件存储格式

  • 支持MapReduce、Spark/Spark SQL、Hive、Storm等多种开源计算框架

  • Spark SQL完美兼容Hive SQL语法

视频

创建MRS集群

提交MapReduce作业

执行Spark SQL语句

终止MRS集群

查看更多>

立即注册