分布式
-
Spark-3.2.4 高可用集群安装部署详细图文教程
目录 一、Spark 环境搭建-Local 1.1 服务器环境 1.2 基本原理 1.2.1 Local 下的角色分布 1.3 搭建 1.3.1 安装 Anaconda 1…
-
RabbitMQ-如何保证消息不丢失
RabbitMQ常用于 异步发送,mysql,redis,es之间的数据同步 ,分布式事务,削峰填谷等….. 在微服务中,rabbitmq是我们经常用到的消息中间件。它…
-
(二十五)大数据实战——kafka集群及Kafka-Eagle控制台安装与部署
前言 本节内容我们主要介绍一下搭建kafka集群以及kafka集群的一个web客户端组件Kafka-Eagle的部署安装,使用的kafka版本是kafka_2.12-3.0.0。在…
-
行业应用: Spark在各行业中的应用与案例
1.背景介绍 Spark是一个开源的大数据处理框架,它可以处理大量数据并提供高性能、高可扩展性和高可靠性的数据处理能力。Spark已经被广泛应用于各个行业,包括金融、电商、医疗、制…
-
java:Kafka生产者推送数据与消费者接收数据(参数配置以及案例)
1.生产者推送数据 常用参数 bootstrap.servers:Kafka集群中的Broker列表,格式为host1:port1,host2:port2,…。生产者会从这些Bro…
-
kafka原理五之springboot 集成批量消费
目录 前言 一、新建一个maven工程,添加kafka依赖 二、yaml配置文件 三、消息消费 手动提交非批量消费 String 类型接入 使用注解方式获取消息头、消息体 手动…
-
rabbitmq 开启 virtual host
由于我的rabbitmq架设在测试服务期。 导致我本地测试的mq消息,经常被服务器消费掉。 所以通过添加v-host,可以创建专属v-host域下的消息进行生产和消费。 一 新增用…
-
RabbitMQ系列之交换机的使用
🎉🎉欢迎来到我的CSDN主页!🎉🎉 🏅我是君易–鑨,一个在CSDN分享笔记的博主。&#…
-
kafka删除topic消息的三种方式
kafka删除topic消息的三种方式 方法一:快速配置删除法(确保topic数据不要了) 1.kafka启动之前,在server.properties配置delete.topic…
-
zookeeper常用命令
zkClient 简介 zkClient是简易的客户端程序 进入zkClient 在bin目录下输入zkCli.sh 节点命令 增 create 路径 数据 …
-
大数据开发之Hadoop(完整版+练习)
第 1 章:Hadoop概述 1.1 Hadoop是什么 1、Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 2、主要解决,海量数据的存储和海量数据的分析计算问…
-
基于zookeeper实现服务节点HA主备自动切换
文章目录 前言 一、架构图和流程图 二、流程说明 1.服务启动初始化ZK、注册所有服务节点信息-MasterRegister 2.创建、运行服务节点,并管理服务节点-LeaderS…
-
SpringCloud入门教程(全集)
文章目录 一、SpringCloud介绍 二、SpringCloud子项目 三、Spring Cloud实战教程 1.搭建Springboot父子项目 2.Feign/Ribbon…
-
Windows 10 也能安装Kafka?这篇教程让你轻松掌握!
🎉🎉欢迎来到我的CSDN主页!🎉🎉 🏅我是尘缘,一个在CSDN分享笔记的博主。📚&#…
-
Kafka的启动、关闭及相关命令
Kafka是一个分布式流处理平台,用于构建可扩展的、高吞吐量的实时数据流应用程序。在使用Kafka时,我们需要了解如何启动和关闭Kafka服务以及相关的命令。本文将详细介绍Kafk…
