云日志服务 LTS-日志转储至DLI:日志转储至DLI

时间:2025-03-10 11:33:15

日志转储至 DLI

  1. 登录 云日志 服务控制台,在左侧导航栏中选择“日志转储 ”。
  2. 在“日志转储”页面中,单击右上角“配置转储”。
  3. 在“配置转储”页面中,选择转储对象“DLI集群”,并配置各参数信息。

    表1 配置转储参数说明

    参数名称

    说明

    示例

    是否开启转储

    选择是否开启转储。

    开启

    转储对象

    选择转储的云服务。

    DLI集群

    日志组名称

    选择已创建的日志组。

    -

    企业项目

    选择已创建的企业项目。

    • 如果当前账号未开通企业项目则不显示该参数。
    • 如果当前账号已开通企业项目,则存在以下情况:
      • 当转储当前账号日志时,下拉框显示当前账号的全部企业项目。
      • 当转储其他账号日志时,若委托账号未开通企业项目,则默认显示“default”。
      • 当转储其他账号日志时,若委托账号已开通企业项目,则显示委托账号的全部企业项目。

    default

    日志流名称

    选择已创建的日志流。

    已配置过DLI集群转储的日志流不能重复配置。

    -

    DLI-数据库

    需要转储的目标DLI数据库名称。更多信息请参见DLI库表管理

    test

    DLI-数据表

    需要转储的目标DLI数据库表名称。更多信息请参见DLI库表管理

    -

    表普通列映射

    将内置字段以及日志中配置的结构化字段和类型,映射到数据库表字段。转储类型支持转储所有字段和自定义转储字段。

    表普通列映射和表分区列映射添加表字段的总数为创建表的总列数。

    内置字段有13个,分别是hostIP、 hostId、hostName、pathFile、collectTime、clusterName、clusterId、 podName、containerName、regionName、projectId、logGroupName和logStreamName。

    • 选择“转储所有字段”是转储日志下所有的日志流标签字段。

    • 选择“自定义转储字段”是手动配置用户日志字段。
      • 单击“自动配置”,云日志服务会根据采集时预览数据中的第一条日志字段、结构化字段、常见内置保留字段(例如hostIP、hostName、pathFile)自动生成内容,您可以根据自己的需要添加或者删除字段。
      • 单击“添加”,在日志字段和表字段的下拉框中,选择您需要转储的字段。
      • 单击操作列下的,删除不需要转储的字段。

    -

    表分区列映射

    存储时根据设置的字段值进行分区。将内置字段以及日志中配置的结构化字段和类型,映射到数据库表字段。

    内置字段有13个,分别是hostIP、 hostId、hostName、pathFile、collectTime、clusterName、clusterId、 podName、containerName、regionName、projectId、logGroupName和logStreamName

    • 单击,在分区字段和表字段的下拉框中,选择您需要转储的字段。能添加一个表字段。
    • 单击操作列下的,删除不需要的转储字段。

    -

  4. 完成后单击“确定”。

    创建转储任务成功后,支持查看、修改、删除转储任务。

    • 转储任务一旦删除将不再对日志进行转储,请谨慎操作。
    • 删除转储任务后,之前已经转储日志将会继续保存在DLI。

support.huaweicloud.com/usermanual-lts/lts_06_0005.html
提示

您即将访问非华为云网站,请注意账号财产安全