360 政企安全集团基于 Flink 的 PB 级数据即席查询实践
360 政企安全集团基于 Flink 的 PB 级数据即席查询实践

本文整理自360 政企安全集团的大数据工程师苏军以及刘佳在 Flink Forward Asia 2020 分享的议题《基于 Flink 的 PB 级数据即席查询实践》,文章内容为:首先做一个简单的个人以及团队介绍。我们来自 360 政企安全集团,目前主要从事 360 安全大脑的 “威胁狩猎“ 项目的开发工作。我们团队接触 Flink 的时间比较早,在此期间,我们基于 Flink 开发出了多款产品,并在 2017 年和 2019 年参加了于柏林举办的 Flink Forward 大会,分别介绍了我们的 “UEBA” 以及 “AutoML” 两款产品。

2021-07-19
Pravega Flink connector 的过去、现在和未来
Pravega Flink connector 的过去、现在和未来

本文整理自戴尔科技集团软件工程师周煜敏在 Flink Forward Asia 2020 分享的议题《Pravega Flink Connector 的过去、现在和未来》,文章内容为:Pravega 项目的名字来源于梵语,意思是 good speed。项目起源于 2016 年,基于 Apache V2 协议在 Github 上开源,并且于 2020 年 11 月加入了 CNCF 的大家庭,成为了 CNCF 的 sandbox 项目。

2021-07-15
Flink 1.12 资源管理新特性
Flink 1.12 资源管理新特性

本文由社区志愿者陈政羽整理,Apache Flink Committer、阿里巴巴技术专家宋辛童,Apache Flink Contributor、阿里巴巴高级开发工程师郭旸泽分享,主要介绍 Flink 1.12 资源管理的一些特性。内容主要分为 4 部分:

2021-07-14
Flink + Iceberg + 对象存储,构建数据湖方案
Flink + Iceberg + 对象存储,构建数据湖方案

本文整理自 Dell 科技集团高级软件研发经理孙伟在 4 月 17 日 上海站 Flink Meetup 分享的《Iceberg 和对象存储构建数据湖方案》,文章内容为:如上图所示,对于一个成熟的数据湖生态而言:

2021-07-08
Flink + Iceberg,百亿级实时数据入湖实战
Flink + Iceberg,百亿级实时数据入湖实战

本文整理自腾讯数据湖研发高级工程师陈俊杰在 4 月 17 日 上海站 Flink Meetup 分享的《百亿级实时数据入湖实战》,文章内容为:从上图可以看出来,整个平台比较大,包括了数据接入、上层的分析、中间的管理 (如任务管理,分析管理和引擎管理),再到最下层的 Table Format。

2021-07-02
Flink 1.13,state backend 优化及生产实践分享
Flink 1.13,state backend 优化及生产实践分享

本文由社区志愿者佳伟整理,唐云(茶干) 在 5 月 22 日北京站 Flink Meetup 分享的 《State Backend Flink – 1.13 优化及生产实践分享》。内容包括:首先,Flink 1.13 中引入了 State 访问的性能监控,即 latency trackig state。

2021-06-30
Flink 1.13,面向流批一体的运行时与 DataStream API 优化
Flink 1.13,面向流批一体的运行时与 DataStream API 优化

本文由社区志愿者苗文婷整理,内容来源自阿里巴巴技术专家高赟(云骞) 在 5 月 22 日北京站 Flink Meetup 分享的《面向流批一体的 Flink 运行时与 DataStream API 优化》。文章主要分为 4 个部分:

2021-06-29
深入解读 Flink SQL 1.13
深入解读 Flink SQL 1.13

本文由社区志愿者陈政羽整理,Apache Flink 社区在 5 月份发布了 1.13 版本,带来了很多新的变化。文章整理自徐榜江(雪尽) 5 月 22 日在北京的 Flink Meetup 分享的《深入解读 Flink SQL 1.13》,内容包括:

2021-06-23
最新公告
8月7 日
Apache Flink Meetup 深圳站

8月7日,深圳站 Meetup 敬请期待~

5月19 日
Apache Flink 1.13 正式发布

Flink 1.13.0 版本让流处理应用的使用像普通一样自然,并且让用户可以更好地理解流计算的性能

Why learning Apache Flink™
Apache Flink 为用户提供了更强大的计算能力和更易用的编程接口
批流统一批流统一Runtime 和 SQL 层批流统一,提供强大的 SQL 支持。
生态兼容生态兼容与 Yarn / Mesos / Kubernetes 集成,支持单机模式运行。
性能卓越性能卓越提供高吞吐、低时延的批处理与流处理支持。
规模计算规模计算水平扩展架构、支持超大状态与增量检查点机制。
  • 关注
    • qr_code

      微信公众号

      最新前沿最热资讯

    • qr_code

      技术支持钉钉群

      时时刻刻得到帮助

  • TOP