对象存储服务 OBS-Flink对接OBS:注意事项

时间:2024-05-13 09:29:13

注意事项

  • flink-obs-fs-hadoop目前仅支持OBS并行文件系统。
  • 为了减少日志输出,在/opt/flink-1.12.1/conf/log4j.properties文件中增加配置:
    logger.obs.name=com.obs
    logger.obs.level=ERROR
  • flink-obs-fs-hadoop的实现基于flink的plugin加载机制(flink从1.9开始引入),flink-obs-fs-hadoop必须通过flink的plugin机制进行加载,即将flink-obs-fs-hadoop放入/opt/flink-1.12.1/plugins/obs-fs-hadoop目录下。
support.huaweicloud.com/bestpractice-obs/obs_05_1516.html