分布式

大家好，我是小❤，一个漂泊江湖多年的 985 非科班程序员，曾混迹于国企、互联网大厂和创业公司的后台开发攻城狮。 1. 引言 上篇文章（应对流量高峰的利器——消息中间件）中，我们已…

RDD的持久化 RDD缓存 当RDD被重复使用，或者计算该RDD比较容易出错，而且需要消耗比较多的资源和时间的时候，我们就可以将该RDD缓存起来。 主要作用: 提升Spark程序的…

一、背景         Hive中的数据需要同步到pg供在线使用，通常sqoop具有数据同步的功能，但是sqoop具有一定的问题，比如对数据的切分碰到数据字段存在异常的情况下，数…

0. 引言 之前我们讲解过主流的分布式定时任务框架xxl-job，随着技术的迭代更新，更多的定时任务框架也开始出现，今天我们来看一看新一代的定时任务框架PowerJob 1. Po…

摆烂了整整一年。 工作的事情，真的影响心情。 目录 NCCL 相关系列 简述 背景 集合通讯 P2P，点对点通信 CC, 集合通信 Broadcast, 广播 Scatter，单发…

前言：大家好，我是小威，24届毕业生，在一家满意的公司实习。本篇文章将详细介绍Sentinel的概念，优点，与Hystrix的对比以及微服务中整合Sentinel，后续文章将详细介…

http://t.csdn.cn/3xMJk      使用rabbitmq发送邮件。 接着上文使用rabbitmq发送邮件，本篇文章就讲讲，当发送消息失败，我们该怎么确认是那个环…

上面已经阅读并观察了节点确定自己的身份后会做些什么，大致就是比对双方信息然后完成同步。 本篇阅读， FOLLOWER收到了需要LEADER执行的命令后，怎么同步给LEADER的，并…

文章目录 一、springcloudalibaba介绍 微服务简介 微服务架构的优点包括 微服务架构也存在一些挑战 SpringCloudAlibaba 为什么要使用SpringC…

一 MQ 的基本概念 1 MQ概述 MQ全称 Message Queue（消息队列），是在消息的传输过程中保存消息的容器。多用于分布式系统之间进行通信。消息队列就是所谓的存放消息的…

目录 引言 1.RabbitMQ死信 1.1 什么是死信队列？ 1.2 死信队列的应用场景 1.3 死信消息的处理与重试机制 2. RabbitMQ延迟队列深度剖析 2.1 延迟队…

Hadoop框架         分布式文件存储 – HDFS 即Hadoop内提供分布式数据存储的文件系统         分布式计算框架 – MapRe…