关于 Apache Pulsar

Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等。

导语

各位小伙伴们,Pulsar 社区周报来啦!

本次 Pulsar 社区周报,为大家呈现 Pulsar transaction、broker、metrics、client 等方面内容,帮助社区小伙伴们掌握 Pulsar 项目及社区进展,也方便大家更好地参与到 Pulsar 社区中来!

感谢本周以下小伙伴为 Apache Pulsar 添砖加瓦(排名不分先后,看看你有没有上榜 ??):

@gaoran10、@315157973、@zhanghaou、@hangc0276、@Technoboy-、@equanz、@srkukarni、@codelipenghui、@MarvinCai、@aloyszhang、@kellyfj、@zymap、@wolfstudy、@jerrypeng、@cimura、@tuteng、@jianyun8023、@Jennifer88huang、@RobertIndie、@BewareMyPower、@massakam、 @Bklyn

接下来,一起看看 08-22 ~ 09-04 有哪些值得你关注的进展吧!

重要特性

因为 PR 较多,仅列举较大 PR 进展,不包括本周全部动态
以下 PR 均已 Merge 进 Pulsar 主分支

? Transaction: 处理事务中的消息确认。

PR 地址:https://github.com/apache/pul...
贡献者: @gaoran10

? Transaction: 支持对分区事务的异常终止。

PR 地址:https://github.com/apache/pul...
贡献者:@gaoran10

? Transaction: 优化消费事务型消息的逻辑。

PR 地址:https://github.com/apache/pul...

贡献者:@gaoran10

? Topic Policy: 支持在 Topic 级别设置、获取和移除 inactiveTopicPolicies。

PR 地址:https://github.com/apache/pul...
贡献者:@315157973

? Topic Policy: 支持在 Topic 级别设置卸载策略。

PR 地址:https://github.com/apache/pul...
贡献者:@315157973

? Topic Policy: 支持在 Topic 级别设置、获取和移除 maxProducers。

PR 地址:https://github.com/apache/pul...
贡献者:@zhanghaou

? Topic Policy: 支持在 Topic 级别设置、获取和移除压缩阈值。

PR 地址:https://github.com/apache/pul...
贡献者: @hangc0276

? Broker: Pulsar Functions 的消费者/生产者属性支持主机名。

PR 地址:https://github.com/apache/pul...
贡献者:@jerrypeng

? Broker: Pulsar primitive schema 支持 Java 8 日期和时间类型。

PR 地址:https://github.com/apache/pul...
贡献者:@jianyun8023

? Broker: BatchPushSource 支持异步通知错误。

PR 地址:https://github.com/apache/pul...
贡献者:@jerrypeng

? Broker: 支持在 Topic 级别上设置消息发送速率的流控。

PR 地址:https://github.com/apache/pul...

贡献者:@hangc0276

重要 Bug 修复

因修复内容较多,仅列举较重要修复内容,不包括本周全部动态

下面修复均已 Merge 进 Pulsar 主分支

? Broker: 修复 broker 端确认消息时出现的 NPE(空指针异常)问题。

PR 地址:https://github.com/apache/pul...
贡献者:@Technoboy-

? Broker: 在 Key_Shared 订阅模式下,当消费者无法消费消息造成临时跳过消息时,暂停发布消息。

PR 地址:https://github.com/apache/pul...
贡献者:@equanz

? Metrics: 修复提供错误信息的 Pulsar metrics。

PR 地址:https://github.com/apache/pul...
贡献者:@315157973

? CPP Client: 确保 BatchAcknowledgementTracker 和 UnAckedMessageTrackerEnabled 的 clear() 方法线程安全。

PR 地址:https://github.com/apache/pul...
贡献者:@BewareMyPower

? Broker: 通过 Ledger ID 划分消息范围,并将其存储在 individualDeletedMessages 中。

PR 地址:https://github.com/apache/pul...
贡献者:@massakam

? Broker: 修复添加消费者时发生的死锁问题。

PR 地址:https://github.com/apache/pul...
贡献者:@massakam

? CPP Client: 异常处理中,抛出 std::exception 类来代替 char*。

PR 地址:https://github.com/apache/pul...
贡献者:@Bklyn

活动和新闻

? TGIP每周直播:Pulsar 及其生态系统
往期视频参考:https://streamnative.io/resou...

? StreamNative 在线研讨会 - "Managing Real-Time Data Teams"
主讲人:Jesse Anderson,Big Data Institute 大数据专家。

PPT 链接:https://www.slideshare.net/Je...

研讨会回放链接:https://www.youtube.com/watch...

? 活动预告

➡️ Pulsar Summit Asia 2020 官网上线,正式开始演讲征集,大会官网链接:https://pulsar-summit.org/zh/...

? 推荐阅读

➡️ Apache Pulsar 2.6.1 版本更新,详情阅读博客:https://streamnative.io/blog/...
➡️ Apache Pulsar 社区贡献者人数突破 300 位:https://streamnative.io/blog/...
➡️ 《The role of Apache BookKeeper in Apache Pulsar - part 1》文章链接:https://www.waitingforcode.co...
➡️ 《10 Reasons for Choosing Apache Pulsar over Apache Kafka》文章链接:https://maximilianmichels.com...


作为全球性开源项目,截至 2020 年 9 月 4 日,Apache Pulsar 已拥有超出 300 名贡献者、6.5K+ Star 、1.6K+ Fork 。正是由于分布在全球各地的社区开发者的贡献,才使得 Apache Pulsar 项目不断发展与前进。

让我们期待下一周的 Apache Pulsar 周报!

如果你也想为 Apache Pulsar 项目出一份力、成为我们的 contributor,参考下面链接,来加入我们吧:


ApachePulsar
192 声望939 粉丝

Apache软件基金会顶级项目,下一代云原生分布式消息系统


引用和评论

0 条评论