https://luoyuxia.github.io/categories/%E6%B6%88%E6%81%AF%E9%98%9F%E5%88%97/ Recent content in 消息队列 on Yuxia's Blog Hugo zh Sat, 27 Sep 2025 12:51:27 +0800 https://luoyuxia.github.io/posts/redpanda-%E5%92%8C-kafka-%E6%80%A7%E8%83%BD%E5%88%B0%E5%BA%95%E5%A6%82%E4%BD%95---%E6%9D%A5%E8%87%AA-redpanda-%E7%9A%84%E5%AE%98%E6%96%B9%E8%AF%84%E6%B5%8B%E5%92%8C-kafka-%E7%9A%84%E9%9D%9E%E5%AE%98%E6%96%B9%E5%9B%9E%E5%BA%94/ Sat, 27 Sep 2025 12:51:27 +0800 https://luoyuxia.github.io/posts/redpanda-%E5%92%8C-kafka-%E6%80%A7%E8%83%BD%E5%88%B0%E5%BA%95%E5%A6%82%E4%BD%95---%E6%9D%A5%E8%87%AA-redpanda-%E7%9A%84%E5%AE%98%E6%96%B9%E8%AF%84%E6%B5%8B%E5%92%8C-kafka-%E7%9A%84%E9%9D%9E%E5%AE%98%E6%96%B9%E5%9B%9E%E5%BA%94/ RedPanda宣称性能优于Kafka，但其基准测试存在争议，Kafka在多种场景下表现更优，实际性能需结合具体工作负载验证。 https://luoyuxia.github.io/posts/kip-1150-%E6%B5%85%E6%B5%85%E8%A7%A3%E8%AF%BB%E8%81%8A%E4%B8%80%E8%81%8A-kafka%E7%A4%BE%E5%8C%BA%E7%9A%84%E5%AD%98%E7%AE%97%E5%88%86%E7%A6%BB%E6%8F%90%E6%A1%88/ Fri, 15 Aug 2025 09:35:09 +0800 https://luoyuxia.github.io/posts/kip-1150-%E6%B5%85%E6%B5%85%E8%A7%A3%E8%AF%BB%E8%81%8A%E4%B8%80%E8%81%8A-kafka%E7%A4%BE%E5%8C%BA%E7%9A%84%E5%AD%98%E7%AE%97%E5%88%86%E7%A6%BB%E6%8F%90%E6%A1%88/ KIP-1150提出Kafka存算分离架构，通过将数据存储至远程对象存储（如S3）并采用无Leader设计，降低跨可用区复制成本，提升可扩展性与成本效率。 https://luoyuxia.github.io/posts/automq-%E5%A6%82%E4%BD%95%E5%AE%9E%E7%8E%B0%E5%AD%98%E7%AE%97%E5%88%86%E7%A6%BB%E7%9A%84-kafka/ Tue, 25 Feb 2025 16:04:12 +0800 https://luoyuxia.github.io/posts/automq-%E5%A6%82%E4%BD%95%E5%AE%9E%E7%8E%B0%E5%AD%98%E7%AE%97%E5%88%86%E7%A6%BB%E7%9A%84-kafka/ AutoMQ是一款开源的，存算分离架构的Kafka发行版，目前在Github上有4.2kstar。AutoMQ是基于Kafka代码改的，只改了底层存储的代码，所以也天然兼容Kafka协议。AutoMQ的核心亮点就是存算分离，本文也主要介绍AutoMQ存算分离的实现。 https://luoyuxia.github.io/posts/kafka-%E5%A4%8D%E5%88%B6%E5%8D%8F%E8%AE%AE%E4%B8%8D%E5%8F%AF%E4%B8%8D%E7%9F%A5%E7%9A%84%E6%8A%80%E6%9C%AF%E5%86%85%E5%B9%95---%E5%85%B3%E4%BA%8E-kafka-%E8%B8%A9%E8%BF%87%E7%9A%84%E5%9D%91/ Sun, 19 Jan 2025 21:32:52 +0800 https://luoyuxia.github.io/posts/kafka-%E5%A4%8D%E5%88%B6%E5%8D%8F%E8%AE%AE%E4%B8%8D%E5%8F%AF%E4%B8%8D%E7%9F%A5%E7%9A%84%E6%8A%80%E6%9C%AF%E5%86%85%E5%B9%95---%E5%85%B3%E4%BA%8E-kafka-%E8%B8%A9%E8%BF%87%E7%9A%84%E5%9D%91/ Kafka通过主从复制的协议对消息进行备份以实现高可靠的分布式系统，但是在如何正确地实现复制的协议中，Kafka作为一款公认的稳定可靠的分布式消息队列，也踩了不少坑。本文首先深入介绍了Kafka的复制协议，然后引出了Kafka在这套复制协议上踩的若干坑和修复方案。通过理解Kafka踩的坑和解决这些问题的思路和方案，希望可以对读者的在分布式系统设计上有所借鉴和启发。