Apache Kafka:下一代分布式消息系统

作者 Abhishek Sharma ,译者 梅雪松
简介

Apache Kafka是分布式发布-订阅消息系统。它最初由LinkedIn公司开发,之后成为Ap…

3分钟带你快速入门消息队列!

01、消息队列由来
可能在你没了解消息队列之前,已经听过很多概念了,例如 JMS,AMQP,ActiveMQ,RabbitMQ,RocketMQ,Kafka …

消息队列之 MetaQ 和 Kafka 哪个更香!

本篇文章首先介绍MetaQ消息队列,然后介绍了作者对MetaQ和Kafka这两个消息队列的理解。
消息队列
消息队列是一个用于接收消息、存储消息并且转发消息的…

实战总结|记一次消息队列堆积的问题排查

本文记录了一次问题的排查过程,从中可以学到不少共性的方法论和经验教训,所以做了提炼归纳。(文末有活动)
一、背景

本次问题涉及的系统链路如上图,各系统的基本…

一文总结 MetaQ/RocketMQ 原理


本文介绍的 MetaQ/RocketMQ 是侧重于维持消息一致性和高可靠性的消息队列中间件,帮助大家对队列设计的理解。
简介—— 消息队列中间件 Meta…

图解 kafka 架构与工作原理

一、认识kafka

Kafka到底是个啥?用来干嘛的?
官方定义如下:

Kafka is used for building real-time data …

线上百万MQ消息积压的快速处理方案

在我们日常的生产环境上,由于某些原因(如消费者代码中bug、消费者端使用的中间件存在性能问题)导致消费者不能处理消息或者消费者处理速度极慢进而导致了线上出现百万…

SpringBoot 整合 Kafka 实现千万级数据异步处理,实战讲解!

一、介绍

在上篇文章中,我们详细的介绍了 kafka 的架构模型,在集群环境中,kafka 可以通过设置分区数来加快数据的消费速度。
光知道理论还不行,我们得…

Kafka Stream+WebSocket+Redis实现实时数据大屏

在我们的日常电商大促中,商家需要看到自己所卖的商品的成交量情况、当前的爆品信息、目前的成交额等实时的信息,如下图所示实时大屏

实时数据大屏功能的实现有很多的方…

Linux安装Kafka以及避坑整理

1、什么是kafka
Kafka 是由Linkedin 公司开发的一个分布式、支持多分区、多副本,基于 Zookeeper的分布式消息流平台(高版本已经不再依赖…

一文吃透生产者和消费者模型!

01、背景介绍
在 Java 多线程编程中,还有一个非常重要的设计模式,它就是:生产者和消费者模型。
这种模型可以充分发挥 cpu 的多线程特性,通过一些平衡…

RocketMQ事务消息分析:TCC、客户端流程、服务端流程、万字长文细细聊 …

导语
事务消息是RocketMQ提供的高级特性之一,它为分布式系统事务最终一致性提供了一种解决方案。
相较于传统的XA分布式事务解决方案,事务消息性能更高,使…

太强 !RocketMQ与Kafka深度对比:可靠性、实时性、吞吐量、存储机制等


在分布式系统中,消息队列作为解耦、缓冲和异步通信的关键组件,其选择对于系统的性能和稳定性至关重要。RocketMQ和Kafka作为两款流行的开源消息中间件…

MQ选型:一文详解Kafka与RocketMQ区别

引言
在做MQ技术选型的时候,Kafka和RocketMQ是常用的两个消息队列中间件,今天就从架构设计、性能分析、使用场景来比较一下两者的区别,到底该使用哪个…

阿里一面:说说如何解决RocketMq消息积压?为什么Kafka性能比RocketMq高?它们区别是什么?

本文归于合集:吊打面试官系列
面试题预览:

请说说Kafka和RocketMQ的区别在哪里,为什么 KafKa的性能比RocketMQ高?
说说看如何解决Ro…

这些年背过的面试题——Kafka篇

阿里妹导读
本文是技术人面试系列Kafka篇,面试中关于Kafka都需要了解哪些基础?一文带你详细了解,欢迎收藏!
Why kafka
消息队列的作用:异步、…

Kafka竟然不支持读写分离!今天才知道!

作者:朱小厮的博客
公众号:朱小厮的博客(ID:hiddenkafka)
在 Kafka 中,生产者写入消息、消费者读取消息的操作都是与 leader 副本进行…

完了!生产事故!几百万消息在消息队列里积压了几个小时!

作者:中华石杉
来源:toutiao.com/i6644809472239763971
一、面试题
如何解决消息队列的延时以及过期失效问题?消息队列满了以后该怎…

消息队列在RTOS的应用

传说互联网应用有两大利器,一个是缓存,另一个就是消息队列。 一直相对消息队列做一下梳理,希望早日另有成文。 一叶知秋,实际上消息队列在嵌入式系统中同样有着广泛的…

Kafka设计解析(二)- Kafka High Availability (上)

原创文章,转载请务必将下面这段话置于文章开头处。
本文转发自技术世界,原文链接:
http://www.jasongj.com/2015/04/24/Kafka…