头图

Apache Flink 社区 2022 年度报告:Evolution, Diversity, Connection

2022 年悄然落幕,Apache Flink 社区又迎来了蓬勃发展的一年。社区共发布了 2 个 Flink 主版本,孵化出了新的流批一体表格存储项目,举办了 13 场线上线下活动,包括分别面向亚洲(北京)和欧美(旧金山)的 2 次 Flink Forward 大会,并向开发者推送了 100+技术文章,围绕实时湖仓、实时风控、数据集成、流批一体等核心场景进行了深度技术解读和最佳实践的传递,呈现出了一个不断繁荣的开源、开放的开发者社区。期待在 2023 年能与全球开发者共同努力,一起推动 Flink 社区在全球化生态市场中获得更大的成功。

接下来,我们将通过 Evolution、Diversity、Connection 三个关键词,从年度最佳实践、核心技术演进、开源技术生态等多维度盘点过去一年的成果,与各位开发者一同见证社区成长。

业界年度奖项

我们一同见证了 Flink 开源项目的技术创新与高速发展。Flink 连续两年蝉联 Apache 软件基金会财年报告最活跃项目,用户交流程度、开发活跃度、影响力等多项指标,在整个 Apache 软件基金会的社区中名列前茅。在工信部电子标准院开源项目成熟度评估中获得“优秀一级”评级,并收获了 Segmentfault 思否、CSDN、IT168 等行业媒体赞誉。 感谢各位开发者、用户、行业媒体、权威机构的支持和认可,相信 2023 年 Flink 社区将会取得更大的成绩!

社区精华内容

2022 年发版回顾

官宣|Apache Flink 1.16 发布公告

Apache Flink Table Store 0.2.0 发布

Flink CDC 2.3 发布,持续优化性能,更多连接器支持增量快照,新增 Db2 支持

Apache Flink ML 2.1.0 发布公告

年度最佳实践

美团基于 Flink 的实时数仓平台建设新进展

钱大妈基于 Flink 的实时风控实践

流批一体在京东的探索与实践

Flink 在米哈游的落地实践

基于 Flink 构建大规模实时风控系统在阿里巴巴的落地

核心技术演进

FFA 2022 主会场 Keynote:Flink Towards Streaming Data Warehouse

Flink 1.15 新功能架构解析:高效稳定的通用增量 Checkpoint

Flink 1.16:Hive SQL 如何平迁到 Flink SQL

Flink 大规模作业调度性能优化

基于 Flink CDC 实现海量数据的实时同步和转换

基于 Apache Flink Table Store 的全增量一体实时入湖

Flink ML API,为实时机器学习设计的算法接口与迭代引擎

开源技术生态

Apache Flink 不止于计算,数仓架构或兴起新一轮变革

“后 Hadoop 时代”,大数据从业者如何应对新技术趋势带来的挑战?

投入上百人、经历多次双 11,Flink 已经足够强大了吗?

5 大类应用场景,26 个大厂真实生产案例分享,2022 年度 Apache Flink 案例集发布

关于 Apache Flink 和实时计算的最新动态、未来方向,你想知道的都在这里


更多内容


活动推荐

阿里云基于 Apache Flink 构建的企业级产品-实时计算Flink版现开启活动:
99 元试用 实时计算Flink版(包年包月、10CU)即有机会获得 Flink 独家定制卫衣;另包 3 个月及以上还有 85 折优惠!
了解活动详情:https://www.aliyun.com/produc...

image.png

885 声望
1k 粉丝
0 条评论
推荐阅读
快手 Flink 的稳定性和功能性扩展
摘要:本文整理自快手技术专家刘建刚,在 Flink Forward Asia 2022 生产实践专场的分享。本篇内容主要分为四个部分:快手 Flink 平台稳定性保障和智能运维复杂场景下的功能扩展批处理的定制优化

ApacheFlink阅读 184

封面图
国产 ETL 工具 etl-engine 流批一体数据交换系统 轻量级 跨平台 引擎
产品概述我们不仅仅是数据的搬运工,还是数据搬运过程中加工处理的工厂。我们不仅仅适用关系型数据库中,还适配当下流行的时序数据库、消息中间件、Hadoop生态中,支持多种类型数据库之间的融合查询及流式计算。e...

weigeonlyyou阅读 1k

封面图
数字企业办公安全“新范式” | 沙龙精粹(附PPT)
2023年3月,亿格云携手阿里云共同举办的零信任SASE办公安全专场沙龙圆满结束,在线上沙龙中,来自亿格云、数云和阿里云的三位行业专家,结合企业在数字化转型下面临的办公安全挑战和企业实践进行了详细的解读。

阿里云开发者阅读 947

Flink SQL 的数据脱敏解决方案
Flink SQL 的数据脱敏解决方案,支持面向用户级别的数据脱敏访问控制,即特定用户只能访问到脱敏后的数据。此方案是实时领域Flink的解决思路,类似于离线数仓 Hive 中 Ranger Column Masking 方案。

ApacheFlink1阅读 446

在毫秒量级上做到“更快”!DataTester 助力飞书提升页面秒开率
对飞书而言,用户体验旅程从打开产品页面的一瞬间就已开始,这里有一个十分重要的指标——页面秒开率,秒开率是指页面在一秒之内打开的比率。为了能够持续吸引用户,一款产品则至少需要在 1000 毫秒以内呈现出交互...

字节跳动数据平台阅读 933

封面图
【Hudi】Filnk Sink 端链路源码解读(Insert、Update、Upsert)
数据文件:parquet(列存)和 arvo(行存)格式,COW(Copy On Write)表的话每次写的时候做合并,只存在 parquet,MOR(Merge On Read)则会有 base file(parquet)和增量 log file(arvo),本文里我们主要聊...

Mulavar阅读 840

Flink 运行时组件的高可用
高清大图 : [链接]如感兴趣,点赞加关注,非常感谢!!!

journey阅读 821

885 声望
1k 粉丝
宣传栏