技术干货:Apache Pulsar 在移动云上的应用

2020-11-12
阅读 9 分钟
1.9k
业务背景随着移动云的快速发展,越来越多的客户对云原生消息中间件提出了更多需求,从而可以将主要的精力聚焦在应用程序上,大致有以下方面:快速弹性伸缩,计算和存储资源能够按需扩展,以满足不同流量峰值和存储规格的要求,并且在线扩展时不需要均衡数据提供较高的安全防护,拥有身份认证和授权机制,确保数据的安全...

[Pulsar 社区周报] 2020-10-31 ~ 2020-11-06

2020-11-12
阅读 3 分钟
940
Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。

Pulsar Summit Asia 2020 | 场景案例论坛(上):多行业,多场景

2020-11-12
阅读 4 分钟
1.8k
Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。

祝贺 StreamNative 团队成员 Jennifer 当选 Apache Pulsar PMC 成员

2020-11-11
阅读 2 分钟
1.2k
Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。

Pulsar Summit Asia 2020 | 主题演讲:大咖呈现,紧扣社区

2020-11-10
阅读 4 分钟
1.3k
Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。

Pulsar Summit Asia 2020 中文专场议题出炉!

2020-11-10
阅读 2 分钟
1k
Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。

Apache Pulsar 社区周报:09-26 ~ 10-09

2020-10-15
阅读 5 分钟
1.2k
Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。

对比测试:Apache Pulsar 与 Kafka 在金融场景下的性能分析

2020-10-04
阅读 4 分钟
1.7k
Apache Pulsar 是下一代分布式消息流平台,采用计算存储分层架构,具备多租户、高一致、高性能、百万 topic、数据平滑迁移等诸多优势。越来越多的企业正在使用 Pulsar 或者尝试将 Pulsar 应用到生产环境中。

Apache Pulsar 9月月报:Pulsar Summit 亚洲站正式启动

2020-10-04
阅读 6 分钟
1.5k
本月看点速览产品动态新增功能Bug 修复社区动态海内外社区动态技术干货关于 Apache PulsarApache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低...

StreamNative 宣布开源 MoP:Apache Pulsar 支持原生 MQTT 协议

2020-09-29
阅读 3 分钟
4.2k
我们很高兴地宣布 StreamNative 开源了 “MoP”(MQTT on Pulsar)。MoP 将 MQTT 协议处理插件引入 Pulsar broker。这样一来,Apache Pulsar 就可以支持原生 MQTT 协议。

揭秘 Apache Pulsar 如何挑战 Kafka!

2020-09-27
阅读 7 分钟
2.2k
本专访对 StreamNative 联合创始人兼CTO、Apache Pulsar PMC 翟佳的采访内容。在本采访中,主要介绍了 Apache Pulsar 作为云原生流数据工具在消息处理领域的优势特性、与 Kafka 的一些对比概要以及 StreamNative 公司的介绍和发展方向。

Pulsar Summit Asia 2020 正式启动,演讲议题征集中!

2020-09-24
阅读 2 分钟
1.8k
Pulsar Summit 是 Apache Pulsar 社区年度盛会,它将分布在世界各地的 Apache Pulsar 项目 Contributor、Commiter 和各企业 CTO/CIO、开发者、架构师、数据科学家,以及消息和流计算社区的精英召集在一起。于此盛会,大家分享实践经验、交流想法、探讨关于 Pulsar 项目和社区的知识,切磋互动。

Apache Pulsar 社区周报|09-12~09-18

2020-09-23
阅读 2 分钟
1k
Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。

译文|简明指南:Apache Pulsar 的分层存储

2020-09-23
阅读 2 分钟
2.4k
在一些流数据用例场景中,用户希望将数据长时间存储在流中。虽然 Apache Pulsar 对 topic backlog 的大小没有限制,但将所有数据存储在 Pulsar 中较长时间,存储成本比较大。

译文|如何将 Pulsar 用作消息队列

2020-09-22
阅读 4 分钟
6.3k
数据处理管道会发生各种故障,数据 consumer 可能会受到延迟或完全不能工作,网络分区可能会暂时切断整个 consumer 组与数据管道的连接等。

年度开源盛会 ApacheCon 来临,Apache Pulsar 专场大咖齐聚

2020-09-22
阅读 1 分钟
1k
ApacheCon 是 Apache 软件基金会举办的年度社区盛会,汇聚众多 Apache 项目与社区成员,交流思想、共话协作,大会议题从大数据到机器学习、Web 框架等都有覆盖,是了解和熟悉未来科技发展趋势的绝佳窗口。

Apache Pulsar 社区周报|09-05 ~ 09-11

2020-09-17
阅读 3 分钟
989
Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等。

Apache Pulsar 在腾讯 Angel PowerFL 联邦学习平台上的实践

2020-09-15
阅读 9 分钟
3.4k
腾讯 Angel PowerFL 联邦学习平台构建在 Angel 机器学习平台上,利用 Angel-­PS 支持万亿级模型训练的能力,将很多在 Worker 上的计算提升到 PS(参数服务器) 端;Angel PowerFL 为联邦学习算法提供了计算、加密、存储、状态同步等基本操作接口,通过流程调度模块协调参与方任务执行状态,而通信模块完成了任务训练过程...

Pulsar Flink Connector 2.5.0 正式发布

2020-09-11
阅读 3 分钟
1.5k
经过不断地努力,社区成功发布 Pulsar Flink Connector 2.5.0 版本。Pulsar Flink Connector 集成了 Apache Pulsar 和 Apache Flink(数据处理引擎),允许 Apache Flink 向 Apache Pulsar 读写数据。

Apache Pulsar 社区周报|08-22~ 09-04

2020-09-11
阅读 3 分钟
1.3k
Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等。

中国移动张浩:AMQP on Pulsar 的设计与应用一览

2020-09-11
阅读 5 分钟
3.4k
本期 TGIP-CN 直播,我们邀请到了来自中国移动云能力中心的张浩,他在 AMQP on Pulsar 项目中参与了很多,也一起协助推进了项目的开发与更新,接下来的内容主要基于此次直播中关于 AoP 的一些介绍和细节干货。

开源流数据公司 StreamNative 正式加入 CNCF,积极推动云原生策略发展

2020-09-09
阅读 2 分钟
2.2k
近日,开源流数据公司 StreamNative 宣布正式加入云原生计算基金会 CNCF(全称:Cloud Native Computing Foundation ),成为 CNCF 共建云原生社区的重要合作伙伴。

Apache Pulsar 8 月月报:大放异彩,里程碑一个接一个

2020-09-04
阅读 5 分钟
1.4k
本月看点速览产品动态新增 PIP新增功能Bug 修复社区动态海内外社区动态技术干货关于 Apache PulsarApache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高...

最佳实践:Pulsar 为批流处理提供融合存储

2020-09-02
阅读 8 分钟
2.8k
非常荣幸有机会和大家分享一下 Apache Pulsar 怎样为批流处理提供融合的存储。希望今天的分享对做大数据处理的同学能有帮助和启发。这次分享,主要分为四个部分:介绍与其他消息系统相比, Apache Pulsar 的独特优势分析批流处理中的存储需求讲述 Apache Pulsar 如何完美匹配批流处理中的存储需求介绍怎样使用 Apache Pu...

Apache Pulsar 2.6.1 版本正式发布:2.6.0 功能增强版,新增 OAuth2 支持

2020-08-27
阅读 8 分钟
1.6k
在 Apache Pulsar 2.6.0 版本发布后的 2 个月,2020 年 8 月 21 日,Apache Pulsar 2.6.1 版本正式发布!

Apache Pulsar 社区周报:08-15 ~ 08-21

2020-08-27
阅读 2 分钟
1.5k
Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。

开源流数据公司 StreamNative 推出 Pulsar 云服务,推进企业“流优先”进程

2020-08-25
阅读 2 分钟
2.6k
Apache 顶级项目 Pulsar 背后的开源流数据公司 StreamNative 宣布,推出基于 Apache Pulsar 的云端服务产品——StreamNative Cloud。该产品的发布,让 Pulsar®-as-a-Service(PaaS)成为现实 ,加速 Pulsar 推广与落地,助力企业推进“流优先”策略。

Apache 软件基金会顶级项目 Pulsar 达成新里程碑:全球贡献者超 300 位!

2020-08-24
阅读 3 分钟
2k
今天我们高兴地宣布Pulsar 达成新里程碑,全球贡献者超 300 位! 距离 Pulsar 实现 200 位贡献者里程碑,仅仅间隔 8 个月!

Apache Pulsar 在 BIGO 的性能调优实战(上)

2020-08-20
阅读 14 分钟
4.1k
在人工智能技术的支持下,BIGO 基于视频的产品和服务受到广泛欢迎,在 150 多个国家/地区拥有用户,其中包括 Bigo Live(直播)和 Likee(短视频)。Bigo Live 在 150 多个国家/地区兴起,Likee 有 1 亿多用户,并在 Z 世代中很受欢迎。

Pulsar 社区周报:08-08 ~ 08-14

2020-08-19
阅读 3 分钟
1.4k
Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。