数据湖探索 DLI-查询Spark作业日志:使用须知

时间:2025-06-13 10:54:10

使用须知

  • 请勿将该 DLI 作业桶绑定的OBS桶用作其它用途,避免出现作业结果混乱等问题。
  • DLI作业要由用户主账户统一设置及修改,子用户无权限。
  • 不配置DLI作业桶无法查看作业日志。
  • 您可以通过配置桶的生命周期规则,定时删除桶中的对象或者定时转换对象的存储类别。
  • DLI的作业桶设置后请谨慎修改,否则可能会造成历史数据无法查找。
  • Spark日志分割规则:
    • 按大小分割:默认情况下,每个日志文件最大为128MB。
    • 按时间分割:每过一小时自动创建新的日志文件。
support.huaweicloud.com/usermanual-dli/dli_01_0379.html