【腾讯云中间件】2023年热门文章集锦

2023-12-29
阅读 5 分钟
304
光阴似箭,日月如梭,仿佛冬奥会的盛况还在眼前,新的一年却即将到来。在过去的一年里,我们见证了腾讯云中间件在产品升级与创新方面的显著进步,包括消息队列TDMQ品牌全新升级和新产品发布,微服务引擎升级与异地多活单元化能力发布等。

关于MQ,你了解多少?(干货分享之二)

2023-12-20
阅读 9 分钟
299
本文梳理笔者 MQ 知识,从消息中间件的基础知识讲起,在有了基础知识后,对市面上各主流的消息中间件进行详细的解析,包括 RabbitMQ、RocketMQ、Kafka、Pulsar,最后再横向对比这几款主流的消息中间件。本篇是系列文章第二篇。

云原生消息流系统 Apache Pulsar 在腾讯云的大规模生产实践

2023-12-20
阅读 9 分钟
283
由 InfoQ 主办的 Qcon 全球软件开发者大会北京站上周已精彩落幕,腾讯云中间件团队的冉小龙参与了《云原生机构设计与音视频技术应用》专题,带来了以《云原生消息流系统 Apache Pulsar 在腾讯云的大规模生产实践》为主题的精彩演讲,在本篇内容中,将重点围绕腾讯云近期在 Apache Pulsar 稳定性和性能方面优化的工作展开...

关于MQ,你了解多少?(干货分享之一)

2023-12-20
阅读 5 分钟
182
本文梳理笔者 MQ 知识,从消息中间件的基础知识讲起,在有了基础知识后,对市面上各主流的消息中间件进行详细的解析,包括 RabbitMQ、RocketMQ、Kafka、Pulsar,最后再横向对比这几款主流的消息中间件。

小鹅通基于 TSE 云原生 API 网关的落地实践

2023-12-20
阅读 4 分钟
375
本篇文章针对这场演讲做了详细的解读。主要介绍小鹅通在 TSE 云原生 API 网关上的一些建设和经验,以及在这个过程中遇到了哪些问题和挑战,基于 TSE 的解决方案又是如何在小鹅通进行落地的,以及如何利用云原生网关实现降本增效的经验分享。

Apache Pulsar 技术系列 - PulsarClient 实现解析

2023-12-20
阅读 7 分钟
286
Apache Pulsar 是一个多租户、高性能的服务间消息传输解决方案,支持多租户、低延时、读写分离、跨地域复制(GEO replication)、快速扩容、灵活容错等特性。同时为了达到高性能,低延时、高可用,Pulsar 在客户端也做了很多的优化,本文主要讲述 PulsarClient 基本原理和实现。

腾讯云消息队列11月产品月报 | RocketMQ 5.x 国际站上线

2023-12-19
阅读 3 分钟
285
2023年 11月动态消息队列 RocketMQ 版1、5.x 形态国际站上线国际站上线 5.x 集群全系列,第一批先开放新加坡和硅谷地域。控制台链接:[链接]2、 无感迁移能力支持用户白屏化操作,将自建的 RocketMQ 集群迁移到 RocketMQ 5.x 集群上,迁移全过程可视化操作,并且支持迁移中的状态回滚。官网链接:[链接]3、控制台整合和...

腾讯云微服务11月产品月报 | TSE 云原生 API 网关支持 WAF 对象接入

2023-12-19
阅读 3 分钟
113
2023年 11月动态TSE 云原生 API 网关1、支持使用私有 DNS 解析服务来源支持私有 DNS 解析器,用户可以添加自己的 DNS 解析器地址进行私有域名解析,适用于服务配置了私有域名的用户。2、支持 WAF 对象接入云原生 API 网关对接 Web 安全防火墙(WAF)新增对象防护方式,可一键开启 WAF 防护,访问网关的所有请求都会进行...

Kafka 分级存储在腾讯云的实践与演进

2023-12-19
阅读 7 分钟
285
腾讯云消息队列 Kafka 内核负责人鲁仕林为大家带来了《Kafka 分级存储在腾讯云的实践与演进》的精彩分享,从 Kafka 架构遇到的问题与挑战、Kafka 弹性架构方案类比、Kafka 分级存储架构及原理以及腾讯云的落地与实践四个方面详细分享了 Kafka 分级存储在腾讯云的实践与演进。

Apache RocketMQ 5.0 腾讯云落地实践

2023-12-18
阅读 8 分钟
772
RocketMQ 最早诞生于淘宝的在线电商交易场景,经过了历年双十一大促流量洪峰的打磨,2016年捐献给 Apache 社区,成为 Apache 社区的顶级项目,并在国内外电商,金融,互联网等各行各业的广大客户落地验证,得到广泛认可。

RocketMQ 5.X PopAck 源码拆解

2023-12-15
阅读 13 分钟
241
目录一、RocketMQ 5.X 架构RocketMQ 5.X 架构RocketMQ 5.X 为什么发明 Pop二、 Pop流程Pop 流程锁 Consumer Queue计算 Pop Offset读取消息添加 Check Point释放 Consumer Queue 锁Pop 关键数据结构介绍Pop OffsetCheck PointReceiptHandleStartOffsetInfoMsgOffsetInfoOrderCountInfo三、Ack流程Proxy 提交 Ack 请求内存...

CKafka 一站式搭建数据流转链路,助力长城车联网平台降低运维成本

2023-12-01
阅读 3 分钟
285
长城汽车是一家全球化智能科技公司,业务包括汽车及零部件设计、研发、生产、销售和服务,旗下拥有魏牌、哈弗、坦克、欧拉及长城皮卡。2022年,长城汽车全年销售1,067,523辆,连续7年销量超100万辆。长城汽车面向全球用户提供智能、绿色出行服务,加速向全球化智能科技公司进阶,智能化车型渗透率达86.17%,车联网作为智...

Apache Pulsar 技术系列 - 基于 Pulsar 的海量 DB 数据采集和分拣

2023-11-15
阅读 10 分钟
326
Apache Pulsar 是一个多租户、高性能的服务间消息传输解决方案,支持多租户、低延时、读写分离、跨地域复制、快速扩容、灵活容错等特性。本文是 Pulsar 技术系列中的一篇,主要介绍 Pulsar 在海量DB Binlog 增量数据采集、分拣场景下的应用。

CKafka 一站式搭建数据流转链路,助力长城车联网平台降低运维成本

2023-11-07
阅读 3 分钟
308
长城汽车是一家全球化智能科技公司,业务包括汽车及零部件设计、研发、生产、销售和服务,旗下拥有哈弗、魏牌、欧拉、坦克及长城皮卡。2022年,长城汽车全年销售1,067,523辆,连续7年销量超100万辆。长城汽车面向全球用户提供智能、绿色出行服务,加速向全球化智能科技公司进阶,智能化车型渗透率达86.17%,车联网作为智...

Apache Pulsar 在腾讯云上的最佳实践

2023-11-02
阅读 8 分钟
313
由 StreamNative 主办的 Pulsar Meetup Beijing 2023 在2023年10月14日完美落幕,本次活动大咖云集,来自腾讯、滴滴、华为、智联招聘、RisingWave 和 StreamNative 的行业专家们一起,深入探讨 Pulsar 在生产环境中的最佳应用实践,共享 Pulsar 社区的最新发展和动态。

腾讯云微服务平台 TSF 异地多活单元化能力重磅升级

2023-09-19
阅读 5 分钟
652
微服务与消息队列专场,腾讯云微服务平台 TSF 产品经理张桢带来了《腾讯云微服务平台 TSF 异地多活单元化能力重磅升级》的精彩演讲。本篇文章详细回顾了腾讯云微服务单元化最佳实践。

腾讯云消息队列 RocketMQ 5.x 系列产品发布

2023-09-13
阅读 4 分钟
430
TDMQ RocketMQ 版是一款分布式高可用的消息队列服务,兼容 Apache RocketMQ 的各个组件与概念,支持开源客户端零改造接入,同时具备计算存储分离,灵活扩缩容的底层优势。由于其优秀的单机吞吐量,非常适合对于可靠性要求较高的大规模在线业务场景。

微服务高可用容灾架构设计

2023-09-11
阅读 5 分钟
674
相对于过去单体或 SOA 架构,建设微服务架构所依赖的组件发生了改变,因此分析与设计高可用容灾架构方案的思路也随之改变,本文对微服务架构落地过程中的几种常见容灾高可用方案展开分析。

Apache pulsar 技术系列-- 消息重推的几种方式

2023-07-26
阅读 4 分钟
531
Apache Pulsar 是一个多租户、高性能的服务间消息传输解决方案,支持多租户、低延时、读写分离、跨地域复制(GEO replication)、快速扩容、灵活容错等特性。在很多场景下,用户需要通过 MQ 实现消息的重新推送能力,比如超时重推、处理异常时重推等,本文介绍 Apache Pulsar 提供的几种消息重推方案。

Apache Pulsar 技术系列 - GEO replication 中订阅状态的同步原理

2023-07-25
阅读 3 分钟
434
Apache Pulsar 是一个多租户、高性能的服务间消息传输解决方案,支持多租户、低延时、读写分离、跨地域复制(GEO Replication)、快速扩容、灵活容错等特性,GEO Replication 可以原生支持数据和订阅状态在多个集群之间进行复制,GEO 目前在 Apache InLong 内部已经有长期稳定的实践,本文主要讲述 GEO 中的订阅状态的同...

消息队列 CKafka 跨洋数据同步性能优化

2023-07-21
阅读 7 分钟
411
导语本文主要介绍了 CKafka 在跨洋场景中遇到的一个地域间数据同步延时大的问题,跨地域延时问题比较典型,所以详细记录下来做个总结。一. 背景为了满足客户跨地域容灾、冷备的诉求,消息队列 CKafka 通过连接器功能,提供了跨地域数据同步的能力,支持跨地域秒级准实时数据同步。整体的架构图:如上图所示,CKafka 跨地...

微服务优雅上下线的实践方法

2023-07-12
阅读 9 分钟
636
本文介绍了微服务优雅上下线的实践方法及原理,包括适用于 Spring 应用的优雅上下线逻辑和服务预热,以及使用 Docker 实现无损下线的 Demo。同时,本文还总结了优雅上下线的价值和挑战。

基于 DTS 同步 MySQL 全增量数据至 CKafka,构建实时数仓的最佳实践

2023-06-28
阅读 5 分钟
550
随着 IT 技术与大数据的不断发展,越来越多的企业开始意识到数据的价值,通过大数据分析,可以帮助企业更深入地了解用户需求、更好地洞察市场趋势。目前大数据分析在每个业务运营中都发挥着重要作用,成为企业提升市场竞争力的关键举措之一。通常企业会构建数据湖仓,将多个数据源通过数据集成技术,汇集一起进行数据分...

业务高速增长,如祺出行如何用腾讯云消息队列 RocketMQ 应对挑战

2023-06-01
阅读 4 分钟
385
作为广汽集团旗下的智慧出行平台,如祺出行上线四年时间,用户规模和订单量保持高速增长。在过去的2022年,如祺出行平台累计注册用户突破1800万,同比增长64%,年度订单总量超7000万,同比增长52%。

重新理解RocketMQ Commit Log存储协议

2023-05-18
阅读 4 分钟
523
最近突然感觉:很多软件、硬件在设计上是有root reason的,不是by desgin如此,而是解决了那时、那个场景的那个需求。一旦了解后,就会感觉在和设计者对话,了解他们的思路,学习他们的方法,思维同屏:活到老学到老。

跨数据中心下的 Kafka 高可用架构分析

2023-04-26
阅读 10 分钟
1.2k
本文介绍了 Kafka 跨数据中心的两种部署方式,简要分析两种方式下的不同架构以及优缺点,对这些架构可能碰到的问题也提供了一些解决思路;同时也说明了 Kafka 跨数据中心部署的社区解决方案和商业化解决方案。

解决异构系统集成难题,富融银行这样做

2023-03-29
阅读 4 分钟
485
富融银⾏是⼀家⽴⾜于⾹港,⾯向全球业务的虚拟银⾏,创立以来先后斩获 2021年-杰出虚拟银行服务大奖、2022年-[领航9+2粤港澳大湾区奖项]粤港澳大湾区最佳银行 等荣誉。

Apache Pulsar 技术系列 - Pulsar 总览

2023-03-24
阅读 6 分钟
530
Apache Pulsar 是一个多租户、高性能的服务间消息传输解决方案,数据持久化依赖 Apache BookKeeper 实现,支持多租户、低延时、读写分离、跨地域复制、快速扩容、灵活容错等特性。本文将从以下几个方面为大家介绍 Apache Pulsar的设计原理和特性。

解决创新业务的三大架构难题,央广购物用对了这个关键策略

2023-03-21
阅读 3 分钟
486
央广购物系广电总局批准核发的,依托于中央广播电视总台的全国性电视购物公司。央广购物以电视直播和网络直播为基础,持续构建内容电商生态和服务能力。

面向异构技术栈和基础设施的服务治理标准化

2023-02-28
阅读 6 分钟
803
在已落幕的 QCon 全球软件开发大会·北京站《云原生微服务架构新趋势》专场,业界大佬们针对以基础设施和业务分离为核心目标,多运行时 /Dapr 等概念/项目被提出已有 2 年有余,它们是否真正解决了我们面临的问题?业务的反馈如何?是一个明确的新趋势吗?另一边,微服务治理标准化是否可行? Proxyless 是正确的路线吗? ...