分布式
-
使用RabbitMQ控制台查看和发送消息
控制台发消息 点击queues –> Publish message 发送消息 Headers 设置contentType application/json Pa…
-
分布式一致性算法——Paxos 和 Raft 算法
写在前面 本文隶属于专栏《100个问题搞定大数据理论体系》,该专栏为笔者原创,引用请注明来源,不足和错误之处请在评论区帮忙指出,谢谢! 本专栏目录结构和参考文献请见100个问题搞定…
-
rabbitmq问题汇总
1、rabbitmq连不上,Connection reset原因: rabbitmq开启了ssl,但是客户端的rabbitmq配置没有开启ssl。 2、看rabbit…
-
任务调度框架-如何实现定时任务+RabbitMQ事务+手动ACK
任务调度框架 Java中如何实现定时任务? 比如: 1.每天早上6点定时执行 2.每月最后一个工作日,考勤统计 3.每个月25号信用卡还款 4.会员生日祝福 5.每隔3秒,自动提醒…
-
Curator实现分布式锁(可重入 不可重入 读写 联锁 信号量 栅栏 计数器)
文章目录 前言 代码实践 1. 配置 2. 可重入锁InterProcessMutex 3. 不可重入锁InterProcessSemaphoreMutex 4. 可重入读写锁In…
-
大数据平台环境搭建—- Hbase组件配置
前置环境 Hadoop集群必须部署完成,如果还没有搭建请先前往>>大数据平台环境搭建—- Hadoop组件配置 Zookeeper集群必须部署完成且未启动,…
-
Kafka 监听器详解
Kafka 监听器详解 Kafka Assistant 是一款 Kafka GUI 管理工具——管理Broker,Topic,Group、查看消费详情、监控服务器状态、支持多种消息…
-
Rabbitmq消息大量堆积,我慌了!
背景 记得有次公司搞促销活动,流量增加,但是系统一直很平稳(我们开发的系统真牛),大家很开心的去聚餐,谈笑风声,气氛融洽,突然电话响起… 运维:小李,你们系统使用的rabbitmq…
-
RabbitMQ不公平分发问题分析及问题解决
1.不公平分发 1.1 不公平分发策略是什么? 在 RabbitMQ 中,不公平分发(Unfair Dispatch)是指当多个消费者(Consumers)同时订阅同一个队列(Qu…
-
RabbitMQ的基本消息属性与持久化
1.背景介绍 RabbitMQ是一款开源的消息中间件,它使用AMQP(Advanced Message Queuing Protocol)协议来提供高性能、可靠的消息传递功能。在分…
-
Spark的内核调度
目录 概述 RDD的依赖 DAG和Stage DAG执行流程图形成和Stage划分 Stage内部流程 Spark Shuffle Spark中shuffle的发展历程 优化…
-
zookeeper未授权漏洞复现及处理
一、漏洞详情 Zookeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式…
-
数据查询与扫描:HBase数据的查询与扫描
1.背景介绍 在大数据时代,HBase作为一个高性能、可扩展的列式存储系统,已经成为了许多企业和组织的核心数据存储和管理解决方案。HBase的查询和扫描功能是其核心特性之一,它们为…
-
向爬虫而生—Redis 拓宽篇6<redis分布式锁 —ZooKeeper>
前言: 用到scrapy-redis的时候,很多时候,那个锁是关键!!! 那么怎么用锁呢?当然,redis也有自己自带的,但它自己都承认说不是很好,那果断就用这个api……
-
Kafka 简介
目录 1、概念介绍 Kafka 由来 ZooKeeper Kafka 特性 Kafka 使用场景 Kafka 复制备份 2、Kafka 架构 Broker Topic Produ…
