数据湖探索 DLI-Format概述

时间：2024-04-18 20:33:03

数据湖探索 DLI

Format概述

Flink 提供了一套与表连接器（table connector）一起使用的表格式（table format）。表格式是一种存储格式，定义了如何把二进制数据映射到表的列上。

Flink 支持以下格式：

表1 Flink支持格式
Formats	支持的Connectors
CSV	Kafka, Upsert Kafka, FileSystem
JSON	Kafka, Upsert Kafka, FileSystem, Elasticsearch
Avro	Kafka, Upsert Kafka, FileSystem
Confluent Avro	Kafka, Upsert Kafka
Debezium	Kafka, FileSystem
Canal	Kafka, FileSystem
Maxwell	Kafka, FileSystem
Ogg	Kafka, FileSystem
Orc	FileSystem
Parquet	FileSystem
Raw	Kafka, Upsert Kafka, FileSystem