分布式
-
“深入理解RabbitMQ交换机的原理与应用“
深入理解RabbitMQ交换机的原理与应用 引言 1. RabbitMQ交换机简介介绍 1.1 什么是RabbitMQ? 1.1.1 消息中间件的作用 1.1.2 RabbitMQ…
-
PySpark实战指南:大数据处理与分析的终极指南【上进小菜猪大数据】
上进小菜猪,沈工大软件工程专业,爱好敲代码,持续输出干货。 大数据处理与分析是当今信息时代的核心任务之一。本文将介绍如何使用PySpark(Python的Spark API)进行大…
-
rabbitMQ入门指南:管理页面全面指南及实战操作
文章目录 1. 引言 2. RabbitMQ 管理页面的概览 3. 探索 RabbitMQ 管理页面的主要功能 3.1 连接 3.2 通道 3.3 交换机 3.4 队列 3.5 生…
-
RabbitMQ交换机(3)-Topic
1.Topic模式 RabbitMQ的Topic模式是一种基于主题的消息传递模式。它允许发送者向一个特定的主题(topic)发布消息,同时,订阅者也可以针对自己感兴趣的主题进行订阅…
-
【Redis】Redis分布式锁有什么缺陷
🍎个人博客:个人主页 🏆个人专栏:Redis ⛳️ 功不唐捐,玉汝于成 目录 前言 正文 非阻塞式获取锁: 死锁问题: 锁过期问…
-
zookeeper之集群搭建
1. 集群角色 zookeeper集群下,有3种角色,分别是领导者(Leader)、跟随着(Follower)、观察者(Observer)。接下来我们分别看一下这三…
-
HBase与ApacheFlink集成
1.背景介绍 HBase与ApacheFlink集成是一种高性能、可扩展的大数据处理解决方案。在本文中,我们将深入了解HBase和ApacheFlink的核心概念、联系、算法原理、…
-
Zookeeper 和 naocs的区别
Nacos 和 ZooKeeper 都是服务发现和配置管理的工具,它们的主要区别如下: 功能特性:Nacos 比 ZooKeeper 更加强大,Nacos 支持服务发现、动态配置、…
-
kafka3.X集群安装(不使用zookeeper)
一、kafka集群实例角色规划 在本专栏的之前的一篇文章《kafka3种zk的替代方案》已经为大家介绍过在kafka3.0种已经可以将zookeeper去掉。 上图中黑色代表bro…
-
揭秘 Kafka 高性能之谜:一文读懂背后的设计精粹与技术实现
目录 一、顺序写入磁盘与I/O优化 1.1 数据在kafka中是如何存储的 二、批量处理 三、页缓存技术 四、零拷贝技术 4.1 D…
-
kafka权限认证 topic权限认证 权限动态认证-亲测成功
kafka权限认证 topic权限认证 权限动态认证-亲测成功 kafka动态认证 自定义认证 安全认证-亲测成功 MacBook Linux安装Kafka Linux解压安装Ka…
-
rabbitmq开启后台管理页面、创建用户及授权
开启后台管理页面 要在浏览器中访问 RabbitMQ,需要使用 RabbitMQ 的 Web 界面插件。可以按照以下步骤安装和配置: 1. 安装 RabbitMQ Web 插件: …
-
大数据技术之Hadoop(HDFS)——超详细
第1章 HDFS概述 1.1 HDFS产出背景及定义 1)HDFS产生背景 先给大家介绍一下什么叫HDFS,我们生活在信息爆炸的时代,随着数据量越来越大,在一个操作系统存不下所有的…
-
Hadoop3.x完全分布式模式下slaveDataNode节点未启动调整
目录 前言 一、问题重现 1、查询Hadoop版本 2、集群启动Hadoop 二、问题分析 三、Hadoop3.x的集群配置 1、停止Hadoop服务 2、配置workers 3…
-
基于地震数据的Spark数据处理与分析
1.题目要求 针对全球重大地震数据进行分析,采用Python为编程语言,采用Hadoop存储数据,采用Spark对数据进行处理分析,并对结果进行数据可视化。 2.需求分析 本项目将…
