hadoop
-
林子雨大数据技术原理与运用期末复习
一、填空题 1.大数据的数据结构类型包括结构化数据、半结构化数据和___非结构化数据____。 2.大数据的4V10是（只填英文）__数据量大__Volume____、_数据类型多…
-
【DBeaver】驱动添加-Hive和星环
驱动 Hive驱动 hive驱动可以直接去官网下载官网地址，填一下个人信息。 如果想直接下载可以去我上次的资源下地址，需要用zip解压。 星环驱动 星环驱动是我第一次接触，是国产的…
-
【大数据】分布式协调系统 Zookeeper
分布式协调系统 Zookeeper 1.Zookeeper 的特点2.Zookeeper 的数据结构3.Zookeeper 的应用场景3.1 统一命名服务3.2 统一配置管理3.3…
-
大数据–分布式存储 Hadoop
一：hadoop简介 Hadoop指Apache这款开源框架，它的核心组件有： HDFS（分布式文件系统）：解决海量数据存储 MAPREDUCE（分布式运算编程框架）：解决海量数据…
-
Hive csv文件导入Hive
一、如何把csv文件导入Hive (1) 在Hive中建立与csv相对应的表 create table if not exists tmp.tmp_wenxin_20231123 …
-
Hadoop3.x源码解析
文章目录 一、RPC通信原理解析 1、概要 2、代码demo 二、NameNode启动源码解析 1、概述 2、启动9870端口服务 3、加载镜像文件和编辑日志 4、初始化NN的RP…
-
Hadoop高可靠集群搭建步骤（手把手教学）【超级详细】
Hadoop高可靠集群搭建步骤（手把手教学） 【超级详细】 文章目录 1 HA集群基础配置 1.1 创建系统为Centos7（Linux）的虚拟机 1.2 基本网络配置 1.3 连…
-
解决集群部署Hadoop 启动后没有ResourceManager问题
解决集群部署Hadoop 启动后没有ResourceManager问题 问题 1. 启动完成后输入jps命令没有看到ResourceManager 2. 查看ResourceMan…
-
Hadoop安装和使用详解
本文主要参考林子雨老师的教程，以下是参考源： 视频慕课：2.3.2 Hadoop的安装与使用详解_哔哩哔哩_bilibili 本文希望通过部署Hadoop为主线，对Hadoop的框…
-
Hive 数仓及数仓设计方案
数仓(Data Warehouse) 数据仓库存在的意义在于对企业的所有数据进行汇总，为企业各个部门提供一个统一、规范的出口。做数仓就是做方案，是用数据治理企业的方案。 数据仓库的…
-
[hadoop全分布部署]安装Hadoop、配置Hadoop 配置文件①
👨🎓👨🎓博主：发量不足 个人简介：耐心，自信来源于你强大的思想和知识基础！！ 📑📑…
-
bash: 未预期的符号 `newline‘ 附近有语法错误——解决方法
大家看了这篇文章，别笑我😭，我的脑子最近真的不好使！ 先放图： 当我在修改Hadoop中core-site.xml配置文件后，想使用source让文件生效，结果出现…
-
基于Hadoop的豆瓣电影的数据抓取、数据清洗、大数据分析（hdfs、flume、hive、mysql等）、大屏可视化
目录 项目介绍 研究背景 国内外研究现状分析 研究目的 研究意义 研究总体设计 数据获取 网络爬虫介绍 豆瓣电影数据的采集 数据预处理 数据导入及环境配置 Flume介绍 Hive…
-
【hive】hive数据类型及数据类型转换的注意事项
提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录 一、hive数据类型 1、数值型数据类型 2、字符型数据类型 3、日期型数据类型 4、其他数据类型 5、…
-
HIVE窗口函数
什么是窗口函数 hive中开窗函数通过over关键字声明；窗口函数，准确地说，函数在窗口中的应用；比如sum函数不仅可在group by后聚合，在可在窗口中应用； hive中gro…
![[hadoop全分布部署]安装Hadoop、配置Hadoop 配置文件①](/img/00/40601187e1b6448db38ea914fc6f4840.png)
