云服务器内容精选

  • 安装程序及依赖驱动清单 以下内容为本次安装部署中安装程序及依赖驱动的清单列表,当需要使用到主数据数据集成中的实时数据处理功能时,需根据实际需求安装对应服务器及驱动。 安装程序清单 表1 安装程序清单 安装程序名称 支持的操作系统 说明 esendatagovernanceV2.5.1.war Linux/windows 程序war包 edi-RTPS-el7.zip Linux/windows 实时处理服务程序 edi-RTPS-kylin.zip 银河麒麟4.0 实时处理服务程序 edi-edgenodeagent-linux.zip Linux 边缘节点程序 edi-edgenodeagent-win.zip Windows 边缘节点程序 edataexchange-mq-linux.zip Linux 文件传输代理数据源依赖的mq服务 edataexchange-mq-windows.zip Windows 文件传输代理数据源依赖的mq服务 依赖驱动清单 表2 依赖驱动清单 安装程序名称 放置路径 说明 edataexchange-hadoop依赖的jar包.zip 工作目录lib\edi\cdh_hadoop 大数据组件依赖驱动 hadoop依赖.zip 工作目录lib\edi\hadoop HDFS数据源依赖jar包 jdbc-petabase6.0.zip 外挂驱动:服务器任意目录 内置驱动:war包\lib Petabase数据库依赖的驱动,未防止jar包冲突建议采用外挂驱动的方式 hbase所需依赖.rar 缘采集节点flume\lib 边缘采集需要的hbase依赖 hdfs所需依赖.rar 缘采集节点flume\lib 边缘采集需要的hdfs依赖 hive&impala.zip 外挂驱动:服务器任意目录 内置驱动:war包\lib 数据质量使用hive、impala分析库,未防止jar包冲突建议采用外挂驱动的方式 星环驱动.zip 外挂驱动:服务器任意目录 内置驱动:war包\lib 数据质量使用星环分析库,未防止jar包冲突建议采用外挂驱动的方式 *外挂驱动方式:在数据源连接池的扩展属性中添加参数driverFiles,如driverFiles=/opt/hive_jdbc 父主题: 睿治数据治理平台
  • 依赖jar包 使用不同的Flume组件需要额外添加相关的Jar包,详情见第二章依赖驱动清单。 如果系统已经安装Hadoop并配置了“HADOOP_HOME”环境变量就不需要再添加这些jar包。 可以直接将压缩包中的jar放到flume/lib目录下。建议用flume官方文档中拓展第三方插件的方式,在flume 安装目录下创建\plugins.d目录,jar包放到libext目录下,例如: 图4 依赖jar包
  • Windows环境部署 下载edi-edgenodeagent-win.zip文件,放在windows服务器某个文件夹中,解压压缩,注意解压文件后可能没有权限需要重新执行chmod命令赋予权限,文件中包含jdk,jar包,flume、canal、run.bat。 修改run.bat文件中的端口(默认8686)、内存大小,然后执行run.bat启动,注意端口不要被占用,如图。 图2 Windows环境部署