华为云计算 云知识 Flink是什么

Flink是什么

【热门云产品免费试用活动】| 【最新活动】| 【企业应用优惠】

免费试用专区

Flink简介

Flink是一个批处理和流处理结合的统一计算框架,其核心是一个提供了数据分发以及并行化计算的流数据处理引擎。它的最大亮点是流处理,是业界最顶级的开源流处理引擎。

Flink最适合的应用场景是低时延的数据处理(Data Processing)场景:高并发pipeline处理数据,时延毫秒级,且兼具可靠性。

Flink技术栈如图1所示。

图1 Flink技术栈

Flink是什么1

Flink结构

Flink结构如图2所示。

图2 Flink结构

Flink是什么2

Flink整个系统包含三个部分:

Client

Flink Client主要给用户提供向Flink系统提交用户任务(流式作业)的能力。

TaskManager

Flink系统的业务执行节点,执行具体的用户任务。TaskManager可以有多个,各个TaskManager都平等。

JobManager

Flink系统的管理节点,管理所有的TaskManager,并决策用户任务在哪些Taskmanager执行。JobManager在HA模式下可以有多个,但只有一个主JobManager。

 

更多相关文章:

1. 域名建站专场

2. 商标特惠专场

3. 云速邮箱

4. 网站建设专场

5. SSL证书专场

6. 全球云服务专场

7. 云服务器免费试用

8. 企业免费试用专区

9. 个人免费试用专区

10. 图片文字识别OCR

11. 网站建设自助建站

12. 企业应用专场

13. 域名注册申请

14. 商标注册优惠

15. 服务器和网关的关系是什么?网关的作用有哪些

16. 域名解析a记录是什么意思

17. 网址域名ip查询方式有哪些?域名和ip地址的区别是什么?

18. 域名和url的区别与联系是什么?

19. 域名和ip地址有什么关系?二者的含义是什么?

20. com域名和cn域名是什么意思?com和cn域名哪个好?

上一篇:常见的性能优化工作的场景有哪些 下一篇:Gremlin

数据湖探索 DLI

数据湖探索(Data Lake Insight,简称DLI)是完全兼容Apache Spark和Apache Flink生态, 实现批流一体的Serverless大数据计算分析服务。DLI支持多模引擎,企业仅需使用SQL或程序就可轻松完成异构数据源的批处理、流处理、内存计算、机器学习等,挖掘和探索数据价值

按需付费,CU单价 ¥0.35/小时

进入控制台立即购买帮助文档DLI开发者社区1对1咨询                
               

           
 

图解数据湖探索||https://support.huaweicloud.com/productdesc-dli/dli_07_0013.html,最新动态||https://support.huaweicloud.com/wtsnew-dli/index.html,地理转换函数||https://support.huaweicloud.com/devg-dli/dli_09_0046.html,地理处理函数||https://support.huaweicloud.com/devg-dli/dli_09_0050.html,对接Mongo||https://support.huaweicloud.com/devg-dli/dli_09_0113.html

https://www.huaweicloud.com/product/dli.html