分布式
-
Hadoop(01) Hadoop3.3.6安装教程，单机/伪分布式配置
在安装 Hadoop 3.3.6 前，需要满足以下前置条件： Java Development Kit (JDK)：Hadoop 是用 Java 编写的，因此需要安装并配置适当版本…
-
Hadoop HA部署过程中出现主备namenode或datanode挂掉的问题
在部署Hadoop HA的过程时，当进行到hdfs namenode -format格式化这一步骤时显示 org.apache.hadoop.hdfs.qjournal.clien…
-
Kafka与Zookeeper版本对应关系
文章目录 了解 版本对应 Kafka安装包 Kafka源码包 了解 比如： kafka_2.11-1.1.1.jar包 其中2.11表示的是Scala的版本，因为Kafka服务器端…
-
Kafka某Topic的部分partition无法消费问题
今天同事反馈有个topic出现积压。于是上kfk管理平台查看该topic对应的group。发现6个分区中有2个不消费，另外4个消费也较慢，总体lag在增长。查看服务器日志，日志中有…
-
kafka服务端允许生产者发送最大消息体大小
1、kafka config服务端配置文件server.properties server.properties中加上的message.max.bytes配置，我目…
-
RabbitMQ之死信交换机
前言 消息队列是分布式系统中常用的组件，用于异步通信、解耦和提高系统可靠性。然而，在实际应用中，难免会遇到一些异常情况，例如消息处理失败、超时等。为了更好地处理这些异常情况，死信交…
-
Zookeeper详解（最详细的zookeeper解析+项目实例）
Zookeeper 在学习Zookeeper之前，我们还是先了解它的概念： 一、什么是zookeeper? 1、简介 zooKeeper 是一个开放源码的分布式协调服务，主要为了解…
-
RabbitMQ中死信交换机的应用，工作原理，实现案例
目录 一、介绍 1. 概述 2. 应用场景 3. 工作原理 二、应用 1. 讲述 2. 运用 三、案例 1. 实践 2. 代码整合 每篇一获 一、介绍 1. 概述 死信交换机是用…
-
RabbitMQ Streams 详解
RabbitMQ Streams是一种持久复制数据结构，可以完成与队列相同的任务：它们缓冲来自生产者的消息，这些消息由消费者读取。然而，流与队列的区别在于两个重要方面：消息的存储和…
-
RabbitMQ快速入门（简单收发消息）
文章目录 前言 一、数据隔离 1.用户管理 2.virtual host 二、控制台收发 1.交换机 2.队列 3.绑定 三、编程式收发 1.依赖和配置 2.收发信息 总结 前言 …
-
zookeeper与kafka
zookeeper与kafka Zookeeper Zookeeper设计目的 Zookeeper做了什么？ 命名服务 配置管理 集群管理 分布式锁 队列管理 Zookeeper中…
-
Kafka Connect详解及应用实践
Kafka Connect详解及应用实践 一、简介 二、配置 三、开发API介绍 3.1 工作原理 3.2 常用的Connector类型（Source Connector、Sink…
-
RabbitMQ交换机
目录 交换机类型 直连交换机：Direct exchange 主题交换机：Topic exchange 扇形交换机：Fanout exchange 首部交换机：Headers…
-
RabbitMQ-网页使用消息队列
1.使用消息队列 几种模式 从最简单的开始 添加完新的虚拟机可以看到，当前admin用户的主机访问权限中新增的刚添加的环境 1.1查看交换机 交换机列表中自动新增了刚创建好的虚拟主…
-
Kafka的重要组件，谈谈流处理引擎Kafka Stream
系列文章目录 上手第一关，手把手教你安装kafka与可视化工具kafka-eagle Kafka是什么，以及如何使用SpringBoot对接Kafka 架构必备能力——kafka的…
