hadoop
-
一文快速学会Hadoop伪分布式环境搭建，很详细
文章目录 一、准备工作 二、配置ssh免密登录 三、修改hadoop的配置文件 四、格式化namenode节点，启动hdfs，启动yarn 一、准备工作 配置hadoop模板虚拟机…
-
数据仓库命名规范详解
一、数仓中为什么要在数据开发过程中强调遵守数仓开发命名规范呢？ 养成良好的编程习惯 写出清楚、易懂、易维护的程序代码 提高代码质量与沟通效率 减少编码中的不必要的错误 二、数仓开发…
-
Hive之lead函数详解
例如如下语句： drop table if exists temp03; create table temp03 as select card_no, deal_date, dea…
-
一百八十八、Hive——HiveSQL查询表中的日期是星期几（亲测，附截图）
一、目的 指标需要查询以工作日和周末维度的数据统计，因此需要根据数据的日期判断这一天属于星期几，周一到周五为工作日，周六到周日为周末 二、SQL查询 （一）SQL语句 select…
-
Hadoop与Spark横向比较【大数据扫盲】
大数据场景下的数据库有很多种，每种数据库根据其数据模型、查询语言、一致性模型和分布式架构等特性，都有其特定的使用场景。以下是一些常见的大数据数据库： 1. **NoSQL 数据库*…
-
Hadoop和Hbase版本对应关系(参考官网)
Hadoop和Hbase版本对应关系(参考官网)
-
Hadoop之MapReduce 详细教程
MapReduce仅作了解，生产上很少使用该计算程序 1、MapReduce介绍 MapReduce 思想在生活中处处可见。或多或少都曾接触过这种思想。MapReduce的思想核心…
-
基于Hadoop平台的音乐推荐系统的设计与实现
收藏关注不迷路 文章目录 摘要 一、 相关技术和基本理论 2.1相关技术 2.1.1Hadoop集群 2.1.2Spring Boot框架 2.1.3Vue框架 2.2开发环境和技…
-
Hive实战：学生信息排序
文章目录 一、实战概述 二、提出任务 三、完成任务 （一）准备数据 1、在虚拟机上创建文本文件 2、上传文件到HDFS指定目录 （二）实现步骤 1、启动Hive Metastore…
-
Hive 的日志和监控工具
1.简介 在大数据领域中，Hive 是一个非常常用的数据仓库解决方案。在实际生产环境中，为了保障 Hive 的稳定运行和及时发现问题，日志和监控工具是必不可少的组成部分。本章节将详…
-
解决java: 程序包org.apache.hadoop.conf不存在的一种冷门思路
我们在用idea编译Hadoop项目时，明明已经导入了相关的jre依赖包，但是编译时提示包不存在 原因是我们还没在项目的 pom.xml 文件中配置相关的变量 找到它 打开之后长这…
-
Hadoop 存储占用分析命令，查看 Hdfs 文件夹占用大小
兼职公司 Hadoop 运维之后，经常要解决 Hdfs 空间占用的问题，不知道哪天谁又在集群上留下一大堆缓存文件也不清掉，Hadoop 本身默认就是三副本，人一多每个人留一点结果占…
-
计算机毕业设计 基于Hadoop的物品租赁系统的设计与实现 Java实战项目 附源码+文档+视频讲解
博主介绍：✌从事软件开发10年之余，专注于Java技术领域、Python人工智能及数据挖掘、小程序项目开发和Android项目开发等。CSDN、掘金、华为云、InfoQ、阿里云等平…
-
Flink 状态管理与容错机制(CheckPoint & SavePoint)的关系
一、什么是状态 无状态计算的例子： 例如一个加法算子，第一次输入2+3=5那么以后我多次数据2+3的时候得到的结果都是5。得出的结论就是，相同的输入都会得到相同的结果，与次数无关。…
-
DBeaver连接hive（详细图解）
文章目录 DBeaver 简介 使用DBeaver连接hive （1）配置Maven仓库 （2）配置hive驱动 （3）创建hive连接 （4）连接测试 DBeaver 简介 db…
