MapReduce服务 MRS-使用Hive客户端:使用Hive客户端(MRS 3.x之前版本)

时间:2023-11-01 16:25:03

使用Hive客户端(MRS 3.x之前版本)

  1. 安装客户端,具体请参考安装客户端章节。
  2. 以客户端安装用户,登录安装客户端的节点。
  3. 执行以下命令,切换到客户端安装目录。

    cd /opt/hadoopclient

  4. 执行以下命令配置环境变量。

    source bigdata_env

  5. 根据集群认证模式,完成Hive客户端登录。

    • 安全模式,则执行以下命令,完成用户认证并登录Hive客户端。

      kinit 组件业务用户

      beeline

    • 普通模式,则执行以下命令,登录Hive客户端,如果不指定组件业务用户,则会以当前操作系统用户登录。

      beeline -n 组件业务用户

    进行beeline连接后,可以编写并提交HQL语句执行相关任务。如需执行Catalog客户端命令,需要先执行!q命令退出beeline环境。

  6. 使用以下命令,执行HCatalog的客户端命令。

    hcat -e "cmd"

    其中"cmd"必须为Hive DDL语句,如hcat -e "show tables"

    • 若要使用HCatalog客户端,必须从“组件管理”页面单击“下载客户端”,下载全部服务的客户端。Beeline客户端不受此限制。
    • 由于权限模型不兼容,使用HCatalog客户端创建的表,在HiveServer客户端中不能访问,但可以使用WebHCat客户端访问。
    • 在普通模式下使用HCatalog客户端,系统将以当前登录操作系统用户来执行DDL命令。
    • 退出beeline客户端时请使用!q命令,不要使用“Ctrl + c”。否则会导致连接生成的临时文件无法删除,长期会累积产生大量的垃圾文件。
    • 在使用beeline客户端时,如果需要在一行中输入多条语句,语句之间以“;”分隔,需要将“entireLineAsCommand”的值设置为“false”

      设置方法:如果未启动beeline,则执行beeline --entireLineAsCommand=false命令;如果已启动beeline,则在beeline中执行!set entireLineAsCommand false命令。

      设置完成后,如果语句中含有不是表示语句结束的“;”,需要进行转义,例如select concat_ws('\;', collect_set(col1)) from tbl

support.huaweicloud.com/usermanual-mrs/mrs_01_24189.html