Apache Flink 1.9 重大特性提前解读

1,482 阅读2分钟
原文链接: mp.weixin.qq.com

今天在 Apache Flink meetup ·北京站 进行 Flink 1.9 重大新特性进行了讲解,两位讲师分别是 戴资力/杨克特,zhisheng 我也从看完了整个 1.9 特性解读的直播,预计 Flink 1.9 版本正式发布时间大概是 7 月底 8 月初左右正式发布,下面一起来看看直播内容:

架构改动

Table/SQL API

使用两种 Runner 可以加快 Blink 代码 merge 进 Flink

上面这些都是 Flink 和 Blink 都有的,但是下面的是 Blink Runner 专有的特性:

数据结构完全基于二进制数据,没有反序列化的消耗,可以提升 Job 处理性能

电商常用的场景,计算 TonN 的商品或者店铺

Runtime

新增 State Processing API

新增 Python Table API,基于 Java 的 Table API

官方文档的翻译

未来计划

Flink 实战

1、《从0到1学习Flink》—— Apache Flink 介绍 2、《从0到1学习Flink》—— Mac 上搭建 Flink 1.6.0 环境并构建运行简单程序入门 3、《从0到1学习Flink》—— Flink 配置文件详解 4、《从0到1学习Flink》—— Data Source 介绍 5、《从0到1学习Flink》—— 如何自定义 Data Source ? 6、《从0到1学习Flink》—— Data Sink 介绍 7、《从0到1学习Flink》—— 如何自定义 Data Sink ? 8、《从0到1学习Flink》—— Flink Data transformation(转换) 9、《从0到1学习Flink》—— 介绍 Flink 中的 Stream Windows 10、《从0到1学习Flink》—— Flink 中的几种 Time 详解 11、《从0到1学习Flink》—— Flink 读取 Kafka 数据写入到 ElasticSearch 12、《从0到1学习Flink》—— Flink 项目如何运行? 13、《从0到1学习Flink》—— Flink 读取 Kafka 数据写入到 Kafka 14、《从0到1学习Flink》—— Flink JobManager 高可用性配置 15、《从0到1学习Flink》—— Flink parallelism 和 Slot 介绍 16、《从0到1学习Flink》—— Flink 读取 Kafka 数据批量写入到 MySQL 17、《从0到1学习Flink》—— Flink 读取 Kafka 数据写入到 RabbitMQ 18、《从0到1学习Flink》—— 你上传的 jar 包藏到哪里去了 19、大数据“重磅炸弹”——实时计算框架 Flink 20、 《Flink 源码解析》—— 源码编译运行 21、为什么说流处理即未来? 22、 OPPO数据中台之基石:基于Flink SQL构建实数据仓库 23、 流计算框架 Flink 与 Storm 的性能对比 24、 Flink状态管理和容错机制介绍 25、 原理解析 | Apache Flink 结合 Kafka 构建端到端的 Exactly-Once 处理 26、 Apache Flink 是如何管理好内存的? 27、 从0到1学习Flink》—— Flink 中这样管理配置,你知道? 28、 从0到1学习Flink》—— Flink 不可以连续 Split(分流)? 29、 Flink 从0到1学习—— 分享四本 Flink 的书和二十多篇 Paper 论文 30、 360深度实践:Flink与Storm协议级对比

Flink 源码解析

知识星球里面可以看到下面文章