kafka
-
kafka集群和Filebeat+Kafka+ELK
一、Kafka 概述 1.1 为什么需要消息队列(MQ) 主要原因是由于在高并发环境下,同步请求来不及处理,请求往往会发生阻塞。比如大量的请求并发访问数据库,导致行锁表锁,最后请求…
-
kafka下载安装部署
Apache kafka 是一个分布式的基于push-subscribe的消息系统,它具备快速、可扩展、可持久化的特点。它现在是Apache旗下的一个开源系统,作为hadoop生态…
-
微服务同时接入多个Kafka
最近在做微服务的迁移改造工作,其中有一个服务需要订阅多个Kafka,如果使用spring kafka自动配置的话只能配置一个Kafka,不符合需求,该文总结了如何配置多个Kafka…
-
探究Kafka原理-1.初识Kafka
👏作者简介:大家好,我是爱吃芝士的土豆倪,24届校招生Java选手,很高兴认识大家 📕系列专栏:Spring源码、JUC源码、Kafka原理 &#x…
-
ELK日志收集平台部署(kafka)
正文:ELK日志收集平台部署 Kafka和zookeeper简介 Kafka: 数据缓冲队列。作为消息队列解耦合处理过程,同时提高了可扩展性。具有峰值处理能力,使用消息队列能够使关…
-
主流MQ [Kafka、RabbitMQ、ZeroMQ、RocketMQ 和 ActiveMQ]
主流MQ [Kafka、RabbitMQ、ZeroMQ、RocketMQ 和 ActiveMQ] 一,MQ对比图 下面是 Kafka、RabbitMQ、ZeroMQ、RocketM…
-
部署Filebeat+Kafka+ELK 集群
目录 Kafka 概述 为什么需要消息队列(MQ) 使用消息队列的好处 消息队列的两种模式 Kafka 定义 Kafka 简介 Kafka 的特性 Kafka 系统架构 在zook…
-
Kafka 的未来:为何我们要抛弃 ZooKeeper?
一、ZooKeeper 的核心功能 ZooKeeper 是一个广泛使用的开源分布式协调服务框架,它在确保数据一致性方面表现出色,同时也可以作为一个轻量级的分布式存储系统。它特别适合…
-
Zookeeper集群 + Kafka集群,Filebeat+Kafka+ELK
目录 什么是Zookeeper? Zookeeper 工作机制 Zookeeper 特点 Zookeeper 数据结构 Zookeeper 选举机制 实验 部署 Zookeeper…
-
云服务部署kafka 报错:“docker run“ requires at least 1 argument.
创建kafka我们需要分两步走: 前沿:请大家注意在云服务器上部署任何新的服务一定要注意在对应云安全配置上开放此端口号 1、使用docker 先拉取 zookeeper,因为k…
-
数据库信息速递 — 别把kafka 当做你的第二个数据库 (翻译)
开头还是介绍一下群,如果感兴趣PolarDB ,MongoDB ,MySQL ,PostgreSQL ,Redis, Oceanbase, Sql Server等有问题,有需求都可…
-
【大数据】Kafka 数据存储
Kafka 数据存储 1.文件目录2.日志分段3.日志索引3.1 偏移量索引3.2 时间戳索引4.日志清理4.1 日志删除4.1.1 基于时间4.1.2 基于日志大小4.1.3 基…
-
kafka相关知识
消息队列 生产者产生消息,将消息放到MQ中,消费者从MQ中获取消息进行消费 消息队列的作用 异步处理 将一些耗时的操作请求传输给MQ,直接给用户返回成功的结果。其他系统可以消费MQ…
-
Cassandra 与 Kafka 集成:实时数据处理和分析
1.背景介绍 随着数据的增长,实时数据处理和分析变得越来越重要。这篇文章将介绍如何将 Cassandra 与 Kafka 集成,以实现实时数据处理和分析。Cassandra 是一个…
-
59、Flink CEP – Flink的复杂事件处理介绍及示例(3)- 模式选取及超时处理
Flink 系列文章 一、Flink 专栏 Flink 专栏系统介绍某一知识点,并辅以具体的示例进行说明。 1、Flink 部署系列 本部分介绍Flink的部署、配置相关基础内容。…
