分布式
-
【RabbitMQ】RabbitMQ详解(一)
RabbitMQ详解 RabbitMQ介绍 四大核心概念 RabbitMQ 入门案例 Hello RabbitMQ 生产者 消费者 Work Queues 轮询消费 RabbitM…
-
【Spark系列3】RDD源码解析实战
本文主要讲 1、什么是RDD 2、RDD是如何从数据中构建 一、什么是RDD？ RDD：弹性分布式数据集，Resillient Distributed Dataset的缩写。 个人…
-
【kafka实战】03 SpringBoot使用kafka生产者和消费者示例
本节主要介绍用SpringBoot进行开发时，使用kafka进行生产和消费 一、引入依赖 org.springframework.kafka spring-kafka org.sp…
-
分布式 – 消息队列Kafka：Kafka生产者发送消息的方式
文章目录 1. Kafka 生产者 2. kafaka 命令行操作 3. kafka 生产者发送消息流程 4. Kafka 生产者的创建 5. Kafka 生产者发送消息 1. 发…
-
kafka可视化工具-kafkamap
kafka可视化工具-kafkamap 安装openjdk11 kafka-map 依赖openjdk11 下载链接 https://learn.microsoft.com/zh-…
-
2024最新Spark核心知识点总结
Spark 有哪些核心组件 master&worker：（spark独立部署模式里的概念）： master是一个进程，主要负责资源的调度和分配，进行集群的监控，类似于yar…
-
HBase的数据库与Apache Ranger的集成
1.背景介绍 HBase是一个分布式、可扩展、高性能的列式存储系统，基于Google的Bigtable设计。它是Hadoop生态系统的一部分，可以与HDFS、Hive、Pig、Zo…
-
Ubuntu搭建Hadoop3.X分布式和高可用集群，一步步深入
目录 1. 介绍 2. 基础环境 2.1 关闭防火墙 2.2 修改主机名和主机映射 2.3 免密登录 2.4 安装jdk 3. 搭建hadoop3.x完全分布式 3.1 下载包地址…
-
基本操作：如何在HBase中进行基本的CRUD操作
1.背景介绍 在HBase中进行基本的CRUD操作是一项重要的技能。在本文中，我们将深入了解HBase的核心概念和算法原理，并通过具体的代码实例来展示如何进行基本的CRUD操作。 …
-
Zookeeper与Apache HBase集成与优化
1.背景介绍 Zookeeper和Apache HBase都是Apache基金会开发的开源项目，它们在大数据领域中发挥着重要作用。Zookeeper是一个分布式协调服务，用于解决分…
-
热销上线，阿里出品Kafka从实战到源码手册，限时抢购
在当前的招聘季节中，我收到了许多关于Kafka的问题，可以看出Kafka在近两年的市场需求中呈现出水涨船高的趋势。 Kafka是由Apache软件基金会开发的一个开源流处理平台，由…
-
【rabbitmq】发布确认（五）
一、概念 RabbitMQ消息确认机制指的是在消息传递过程中，发送方发送消息后，接收方需要对消息进行确认，以确保消息被正确地接收和处理。 1、生产者确认机制：生产者发送消息后，需要…
-
Kafka入门，手动提交offset，同步提交，异步提交，指定 Offset 消费（二十三）
手动提交offset 虽然offset十分遍历，但是由于其是基于时间提交的，开发人员难以把握offset提交的实际。因此Kafka还提供了手动提交offset的API 手动提交of…
-
Spark与ApacheSqoop集成
1.背景介绍 在大数据时代，数据处理和分析的需求日益增长。为了更高效地处理和分析大量数据，Apache Spark和Apache Sqoop这两种技术得到了广泛应用。本文将从以下几…
-
分布式搜索引擎
分布式搜索引擎03 0.学习目标 1.数据聚合 **聚合（aggregations）**可以让我们极其方便的实现对数据的统计、分析、运算。例如： 什么品牌的手机最受欢迎？ 这些手机…
