分布式
-
HBase的数据索引与分区策略
1.背景介绍 HBase是一个分布式、可扩展、高性能的列式存储系统,基于Google的Bigtable设计。HBase提供了自动分区、数据复制、数据备份等功能,适用于存储海量数据。…
-
hadoop面试题
0. 思维导图 1. HDFS 1. HDFS的架构♥♥ HDFS主要包括三个部分,namenode,datanode以及secondary namenode。这里主要讲一下他…
-
Hadoop下载安装(物理机)
1、下载Hadoop安装包## http://archive.apache.org/dist/hadoop/common 2、解压安装Hadoop 将hadoop-2-7.4.ta…
-
「 分布式技术 」一致性哈希算法(Hash)详解
「 分布式技术 」一致性哈希算法(Hash)详解 参考&鸣谢 一致性 Hash 算法原理总结 kylinkzhang,腾讯 CSIG 后台开发工程师 什么是一致性哈希? x…
-
RocksDB是如何实现存算分离的
核心参考文献: Dong, S., P, S. S., Pan, S., Ananthabhotla, A., Ekambaram, D., Sharma, A., Dayal, …
-
Spring Boot 整合 分布式搜索引擎 Elastic Search 实现 我附近的、酒店竞排
文章目录 ⛄引言 一、我附近的酒店 ⛅需求分析 ⚡源码编写 二、酒店竞价排名 ⌚需求分析 ⏰修改搜索业务 ✅效果图 ⛵小结 ⛄引言 本文参考黑马 分布式Elastic search…
-
kafka个人笔记
大部分内容源于https://segmentfault.com/a/1190000038173886, 本人手敲一边加强印象方便复习 消息系统的作用 解耦 冗余 扩展性 灵活性(峰…
-
RabbitMQ与SpringBoot整合
1.背景介绍 1. 背景介绍 RabbitMQ是一种开源的消息中间件,它提供了一种可靠的、高性能的消息传递机制。Spring Boot是一种用于构建微服务应用程序的框架。在现代软件…
-
kafka之集群工作机制理解
回想一下,我们搭建kafka集群是如何搭建?修改kafka得配置文件,多个Kafka服务注册到同一个zookeeper集群上的节点,会自动组成集群。 …
-
用了这么久rabbitmq,你还不知道它的目录结构吗?
文章目录 1. 配置目录 2.数据目录 3.日志文件 4.脚本目录 1. 配置目录 rabbitmq配置目录:/etc/rabbitmq/ 常见配置文件有: (1)配置文件 r…
-
Kafka – 消费进度监控(Consumer Lag)
所谓滞后程度,就是指消费者当前落后于生产者的程度。 Lag 应该算是最最重要的监控指标了。它直接反映了一个消费者的运行情况。一个正常工作的消费者,它的 Lag 值应该很小,甚至是接…
-
集成ApacheFlink:HBase与ApacheFlink的集成和应用
1.背景介绍 1. 背景介绍 Apache Flink 是一个流处理框架,用于实时数据处理和分析。HBase 是一个分布式、可扩展、高性能的列式存储系统,基于 Google Big…
-
Kafka 消费者如何实现消费者组内分区平衡,Kafka常见问题
1、简介 一个消费者组中有多个consumer组成,一个topic有多个partition组成,现在的问题是,到底由哪个consumer来消费哪个partition…
-
kafka实战-消费者offset重置问题
kafka实战-消费者offset重置问题 背景 问题现象 分析原因 问题解决 附-常见的消费者配置描述和调优方案 1. max.poll.records 2. fetch.max…
-
RabbitMQ–消息模型
可参考RabbitMQ官网:RabbitMQ: easy to use, flexible messaging and streaming — RabbitMQ 1、简单队列模式…
