kafka

用于流处理、实时分析、LLM 管道与 RAG 的 Python ETL 框架。

Data Engineering Zoomcamp 是一个为期 9 周的免费课程，教导构建可投入生产的数据管道。下一期课程于 2026 年 1 月开始。点击此处加入课程 👇🏼

Apache Kafka - 分布式事件流平台

一个涵盖六个专栏：Spring Boot 2.X、Spring Cloud、Spring Cloud Alibaba、Dubbo、分布式消息队列、分布式事务的仓库。希望胖友小手一抖，右上角来个 Star，感恩 1024

用于收集、处理、聚合和写入指标、日志及其他任意数据的代理程序

大数据入门指南 ★

flink 学习博客。http://www.54tianzhisheng.cn/ 含 Flink 入门、概念、原理、实战、性能调优、源码解析等内容。涉及 Flink Connector、Metrics、Library、DataStream API、Table API & SQL 等内容的学习案例，还有 Flink 落地应用的大型项目案例（PVUV、日志存储、百亿数据实时去重、监控告警）分享。欢迎大家支持我的专栏《大数据实时计算引擎 Flink 实战与性能优化》

【大厂面试专栏】一份 Java 程序员需要的技术指南，包含面试题、系统架构、职场锦囊、主流中间件等，让你成为更牛的自己！

C++ 平行计算与异步网络框架

支持多种数据库的变更数据捕获。请于 https://github.com/debezium/dbz/issues 回报问题。

Sarama 是用于 Apache Kafka 的 Go 库

Redpanda 是开发者的流数据平台，兼容 Kafka API，速度提升 10 倍，无需 ZooKeeper，无 JVM！

Apache Kafka 管理的开源 Web UI

无磁盘 Kafka® 部署于 S3。成本降低 10 倍，无跨可用区流量费用，秒级自动扩缩，单位毫秒延迟，多可用区高可用

用 Go 以简易方式构建事件驱动应用程序

针对代理式 AI 的事件流平台，持续实时、大规模地摄取、转换与提供事件流

Fancy stream processing made operationally mundane

Go 语言的 Kafka 函数库

1200+ DevOps Bash 脚本 - AWS、GCP、Kubernetes、Docker、CI/CD、API、SQL、PostgreSQL、MySQL、Hive、Impala、Kafka、Hadoop、Jenkins、GitHub、GitLab、BitBucket、Azure DevOps、TeamCity、Spotify、MP3、LDAP、代码/构建 Linting、Linux、Mac、Python、Perl、Ruby、NodeJS、Golang、进阶 dotfiles：.bashrc、.vimrc、.gitconfig、.screenrc、tmux..

免费且开源的日志管理系统

一站式云原生实时流数据平台，通过零侵入、插件化构建企业级 Kafka 服务，极大降低操作、存储与管理实时流数据的门槛

基于最终一致性的微服务分布式事务解决方案，同时提供具 Outbox 模式的事件总线

Python 流程处理

Flink CDC 是一个流式数据集成工具

为应用与 AI 代理提供实时数据层。仅使用 SQL，即可创建秒级视图。

Apache Camel 是一个开源集成框架，提供 350+ 连接器。可使用 Java、YAML 或 XML 编写路由，支持 Spring Boot、Quarkus 或独立运行。Apache License 2.0。

Kafka Web UI

📌 异步线程池框架，支持线程池动态变更、监控与报警，无需修改代码即可轻松引入。Asynchronous thread pool framework, support Thread Pool Dynamic Change & monitoring & Alarm, no need to modify the code easily introduced.

在 Kubernetes 上运行的 Apache Kafka®

Apache Kafka 的 Python 客户端