-
主机管理页面 - MapReduce服务 MRS
主机管理页面 查看主机列表 查看主机概览 查看主机进程及资源 父主题: 主机
-
获取MRS应用开发样例工程 - MapReduce服务 MRS
下载样例工程的Maven工程源码和配置文件,请参见样例工程获取地址。 配置华为云镜像站中SDK的Maven镜像仓库,请参见配置华为开源镜像仓。 根据用户自身需求,构建完整的Maven工程并进行编译开发。 样例工程获取地址 华为云MRS服务1.8之前版本的样例工程下载地址为:http://mapreduceservice
-
系统设置 - MapReduce服务 MRS
系统设置 权限设置 对接设置 导入证书 OMS管理 查看部件包 父主题: Manager操作指导(适用于3.x版本)
-
产品优势 - MapReduce服务 MRS
并提供可视化、便捷的集群管理监控告警功能;支持一键式系统运行健康度巡检和审计,保障系统的正常运行,降低系统运维成本。 MRS联合消息通知服务(SMN),在配置消息通知后,可以实时给用户发送MRS集群健康状态,用户可以通过手机短信或邮箱实时接收到MRS集群变更及组件告警信息,帮助用户轻松运维,实时监控,实时发送告警。
-
管理客户端 - MapReduce服务 MRS
FusionInsight Manager支持统一管理集群的客户端安装信息,用户下载并安装客户端后,界面可自动记录已安装(注册)客户端的信息,方便查询管理。同时系统支持手动添加、修改未自动注册的客户端信息(如历史版本已安装的客户端)。 操作步骤 查看客户端信息 登录FusionInsight Manager。
-
配置跨Manager集群互信 - MapReduce服务 MRS
配置跨Manager集群互信 操作场景 当不同的两个Manager系统下安全模式的集群需要互相访问对方的资源时,系统管理员可以设置互信的系统,使外部系统的用户可以在本系统中使用。 每个系统用户安全使用的范围定义为“域”,不同的Manager系统需要定义唯一的域名。跨Manager访问实际上就是用户跨域使用。
-
MRS作业简介 - MapReduce服务 MRS
用户创建作业前需要将本地数据上传至OBS系统,MRS使用OBS中的数据进行计算分析。当然MRS也支持将OBS中的数据导入至HDFS中,使用HDFS中的数据进行计算分析。数据完成处理和分析后,您可以将数据存储在HDFS中,也可以将集群中的数据导出至OBS系统。需要注意,HDFS和OBS也支
-
下载用户认证文件 - MapReduce服务 MRS
操作步骤 访问MRS Manager,详细操作请参见访问MRS Manager(MRS 2.x及之前版本)。 在MRS Manager,单击“系统设置”。 在“权限配置”区域,单击“用户管理”。 在需导出keytab文件用户所在的行,选择“更多 > 下载认证凭据”下载认证文件,待文件
-
访问FlinkServer WebUI界面 - MapReduce服务 MRS
nk的WebUI,在图形化界面进行集群连接、数据连接、流表管理和作业管理等。 该任务指导用户在MRS集群中访问Flink WebUI。 对系统的影响 第一次访问Manager和Flink WebUI,需要在浏览器中添加站点信任以继续访问Flink WebUI。 操作步骤 使用具有
-
修改系统内部用户密码 - MapReduce服务 MRS
修改系统内部用户密码 修改Kerberos管理员密码 修改OMS Kerberos管理员密码 修改LDAP管理员和LDAP用户密码(含OMS LDAP) 修改LDAP管理账户密码 修改组件运行用户密码 父主题: 账户管理
-
macOS使用浏览器访问MRS Manager - MapReduce服务 MRS
RS Manager页面,请继续操作后续步骤。 查找证书。 单击浏览器左上角,单击“证书无效”所在行的。 获取证书。 选中该证书拖动到电脑桌面,即可获得证书。 在Mac应用中选择钥匙串访问。 “钥匙串”选择“登录”,“种类”选择“证书”。 将步骤3获得的证书拖动到钥匙串列表中。
-
集群状态消息通知 - MapReduce服务 MRS
地收到告警通知。MRS联合消息通知服务(SMN),可以将以上信息主动地通知到用户的手机及邮箱,让维护更加省心省力。 客户价值 配置消息通知后,可以实时给用户发送MRS集群健康状态,用户可以通过手机短信或邮箱实时接收到MRS集群变更及组件告警信息。MRS可以帮助用户轻松运维,实时监
-
数据迁移方案介绍 - MapReduce服务 MRS
数据迁移方案介绍 准备工作 元数据导出 数据拷贝 数据恢复 父主题: 数据迁移
-
从零开始使用Spark SQL - MapReduce服务 MRS
上传数据至OBS。 登录OBS控制台。 单击“并行文件系统 > 创建并行文件系统”,创建一个名称为sparksql的文件系统。 sparksql仅为示例,文件系统名称必须全局唯一,否则会创建并行文件系统失败。 单击sparksql文件系统名称,并选择“文件”。 单击“新建文件夹”,创建input文件夹。
-
ALM-12066 节点间互信失效 - MapReduce服务 MRS
告警解释 系统每一个小时检查一次主OMS节点和其他Agent节点间的互信是否正常,如果存在互信失效的节点,则发送告警。待问题修复,该告警会自动清除。 告警属性 告警ID 告警级别 是否自动清除 12066 重要 是 告警参数 参数名称 参数含义 来源 产生告警的集群或系统名称。 服务名
-
修改Manager系统域名 - MapReduce服务 MRS
修改Manager系统域名 操作场景 每个系统用户安全使用的范围定义为“域”,不同的系统需要定义唯一的域名。FusionInsight Manager的域名在安装过程中生成,如果需要修改为特定域名,系统管理员可通过FusionInsight Manager进行配置。 修改系统域名为高危操
-
ALM-12040 系统熵值不足(2.x及以前版本) - MapReduce服务 MRS
ALM-12040 系统熵值不足(2.x及以前版本) 告警解释 每天零点系统检查熵值,每次检查都连续检查五次,首先检查是否启用并正确配置了rng-tools工具,如果没有配置,则继续检查当前熵值,如果五次均小于500,则上报故障告警。 当检查到真随机数方式已经配置或者伪随机数方式
-
解锁用户 - MapReduce服务 MRS
Manager为锁定的用户解锁。仅支持解锁使用FusionInsight Manager创建的用户。 操作步骤 登录FusionInsight Manager。 选择“系统 > 权限 > 用户”。 在要解锁用户所在行,单击“解锁”。 在弹出的窗口勾选“我已阅读此信息并了解其影响。”,单击“确定”完成解锁操作。
-
Flink对接OBS文件系统 - MapReduce服务 MRS
obs://并行文件系统名称/tmp/flinkjob/test -output obs://并行文件系统名称/tmp/flinkjob/output 由于Flink作业是On Yarn运行,在配置Flink对接OBS文件系统之前需要确保Yarn对接OBS文件系统功能是正常的。 父主题:
-
Hudi对接OBS文件系统 - MapReduce服务 MRS
Hudi对接OBS文件系统 使用安装客户端用户登录客户端安装节点。 配置环境变量。 source 客户端安装目录/bigdata_env source 客户端安装目录/Hudi/component_env 修改配置文件: vim 客户端安装目录/Hudi/hudi/conf/hdfs-site