Kafka是啥？用Kafka官方的话来说就是： Kafka is used for building real-time data pipelines and streaming apps. It is horizont…

在高并发业务场景下，典型的阿里双11秒杀等业务，消息队列中间件在流量削峰、解耦上有不可替代的作用。 Mike前面分享了MQ消息队列的设计、核心原理、以及与RPC远程调用的区别等内容。今天我们一起来探讨： 全量的消息队列究…

为什么需要消息队列 周末无聊刷着手机，某宝网APP突然蹦出来一条消息“为了回馈老客户，女朋友买一送一，活动仅限今天！”。买一送一还有这种好事，那我可不能错过！忍不住立马点了去。于是选了两个最新款，下单、支付一气呵成！满足…

前提 假设你了解过 SpringBoot 和 Kafka。 1、SpringBoot 如果对 SpringBoot 不了解的话，建议去看看 DD 大佬 和 纯洁的微笑 的系列博客。 2、Kafka Kafka 的话可以看…

原文地址RabbitMQ vs Kafka Part 1 – Two Different Takes on Messaging 在本文中，我们将介绍RabbitMQ和Kafka是什么，如何实现消息队列。两者在…

今天主要讲在大规模数据情况下，Kafka如何解决实时的数据集成问题。主要有以下四个方面： 1. Traditional ETL 2. Data Integration 3. Kafka Connect 4. Group …

概述 大数据平台每天会产生大量的日志，处理这些日志需要特定的日志系统。 一般而言，这些系统需要具有以下特征： 构建应用系统和分析系统的桥梁，并将它们之间的关联解耦； 支持近实时的在线分析系统和类似于Hadoop之类的离线…

为获得更好的阅读体验，建议您访问原文地址： 传送门 ) 前言：在之前的文章里面已经了解到了「消息队列」是怎么样的一种存在（ 传送门），Kafka 作为当下流行的一种中间件，我们现在开始学习它！ 一、Kafka 简介 Ka…

此文已由作者丁伟伟授权网易云社区发布。 欢迎访问网易云社区，了解更多网易技术产品运营经验。 前提 本文的分析基于kafka 0.9版本的client, 0.10.1.0中已经修改心跳线程为后台线程，并支持设置max.po…

上周六在深圳分享了《Flink SQL 1.9.0 技术内幕和最佳实践》，会后许多小伙伴对最后演示环节的 Demo 代码非常感兴趣，迫不及待地想尝试下，所以写了这篇文章分享下这份代码。希望对于 Flink SQL 的初学…

小编精心收集：为金三银四准备，以下面试题先过一遍，为即将到了的面试做好准备，也过一遍基础知识点。 一、RabbitMQ 1.rabbitmq 的使用场景有哪些？ 2.rabbitmq 有哪些重要的角色？ 3.rabbit…

Apache Kafka 最早是由 LinkedIn 开源出来的分布式消息系统，现在是 Apache 旗下的一个子项目，并且已经成为开源领域应用最广泛的消息系统之一。 Kafka 社区非常活跃，从 0.9 版本开始，Ka…

本文简单的介绍下kafka，主要包含以下部分： 什么是Kafka Kafka的基本概念 Kafka分布式架构 配置单机版Kafka 实验一：kafka-python实现生产者消费者 实验二：消费组实现容错性机制 实验三：…

此文稿来源于太阁实验室每周三晚上的weekly tech show，活动注册链接：https://attendee.gotowebinar.com/register/1150708559813755649 下期活动为：S…

Kafka简介 Apache Kafka是分布式发布-订阅消息系统，在 kafka官网上对 kafka 的定义：一个分布式发布-订阅消息传递系统。 它最初由LinkedIn公司开发，Linkedin于2010年贡献给了A…