AutoMQ 如何实现存算分离的 Kafka

AutoMQ是一款开源的,存算分离架构的Kafka发行版,目前在Github上有4.2kstar。AutoMQ是基于Kafka代码改的,只改了底层存储的代码,所以也天然兼容Kafka协议。AutoMQ的核心亮点就是存算分离,本文也主要介绍AutoMQ存算分离的实现。

2025年2月25日 · 2 分钟 · Yuxia Luo

Kafka 复制协议不可不知的技术内幕 - 关于 Kafka 踩过的坑

Kafka通过主从复制的协议对消息进行备份以实现高可靠的分布式系统,但是在如何正确地实现复制的协议中,Kafka作为一款公认的稳定可靠的分布式消息队列,也踩了不少坑。本文首先深入介绍了Kafka的复制协议,然后引出了Kafka在这套复制协议上踩的若干坑和修复方案。通过理解Kafka踩的坑和解决这些问题的思路和方案,希望可以对读者的在分布式系统设计上有所借鉴和启发。

2025年1月19日 · 12 分钟 · Yuxia Luo

Flink Forward Asia 2024 参会总结

Apache Flink在诞生10周年之际,回顾了其从实验项目到流计算标准的历程,并介绍了Flink 2.0的新特性如存算分离、流批一体及AI集成,同时发布了Paimon 1.0 和Fluss 0.5,旨在提升实时数据分析的效率和灵活性。

2024年12月9日 · 3 分钟 · Yuxia Luo

你好,世界

博客的第一篇文章,简单介绍一下自己和这个博客。

2024年12月1日 · 1 分钟 · Yuxia Luo