表格存储服务 CLOUDTABLE-Stream Load:基本原理

时间：2024-01-12 11:23:31

表格存储服务 CLOUDTABLE 批量数据导入

基本原理

下图展示了Stream load的主要流程，省略了一些导入细节。

  ^      +
                         |      |
                         |      | 1A. User submit load to FE
                         |      |
                         |   +--v-----------+
                         |   | FE           |
5. Return result to user |   +--+-----------+
                         |      |
                         |      | 2. Redirect to BE
                         |      |
                         |   +--v-----------+
                         +---+Coordinator BE| 1B. User submit load to BE
                             +-+-----+----+-+
                               |     |    |
                         +-----+     |    +-----+
                         |           |          | 3. Distrbute data
                         |           |          |
                       +-v-+       +-v-+      +-v-+
                       |BE |       |BE |      |BE |
                       +---+       +---+      +---+

Stream load中，Doris会选定一个节点作为Coordinator节点。该节点负责接数据并分发数据到其他数据节点。您可以通过HTTP协议提交导入命令。如果提交到FE，则FE会通过HTTP redirect指令将请求转发给某一个BE。用户也可以直接提交导入命令给某一指定BE。导入的最终结果由Coordinator BE返回给用户。

上一篇：表格存储服务 CLOUDTABLE-最佳实践:关于Partition和Bucket的数量和数据量的建议

下一篇：表格存储服务 CLOUDTABLE-JDBC通过ssl方式连接doris(验证证书)