hadoop
-
hadoop集群搭建–启动hdfs时NameNode或DataNode或SecondaryNameNode启动失败解决方法
1、集群HDFS配置情况 node101:NameNode、DataNode node102:DataNode node103:SecondaryNameNode、DataNode…
-
大数据开发必备工具——Hadoop及整体架构介绍
Hadoop是一个由Apache软件基金会开发的开源Java软件框架，专为大数据处理设计，支持在大量计算机组成的集群上进行数据存储和分布式计算。它由几个关键的组件组成，其中最核心的…
-
启动hive报错no hbase in
启动hive报错no hbase in 将hdfs和yarn都启动成功之后，启动hive，如下所示： [atguigu@hadoop102 conf]$ cd /opt/modul…
-
大数据Hadoop、HDFS、Hive、HBASE、Spark、Flume、Kafka、Storm、SparkStreaming这些概念你是否能理清？
1.Hadoop Hadoop是大数据开发的重要框架，是一个由Apache基金会所开发的分布式系统基础架构，其核心是HDFS和MapReduce，HDFS为海量的数据提供了存储，M…
-
Hadoop 安装教程 (Mac m1/m2版)
安装JDK1.8 这里最好是安装1.8版本的jdk 1. 进入官网Java Downloads | Oracle Hong Kong SAR, PRC,下滑到中间区域找到JDK8 …
-
HDFS常用命令汇总
HDFS常用命令汇总 一、前言信息 二、帮助信息查看 1、查看帮助信息 2、帮助文档（附带命令的详细说明） 三、常用命令 1、创建目录 2、查看目录下的内容 3、上传文件 4、上传…
-
大数据毕业设计基于Hadoop的微博网络舆情分析系统
收藏关注不迷路，源码文章末 文章目录 一、项目介绍 二、开发环境 三、功能介绍 2.3 系统功能分析 2.3.1 功能性分析 2.4 系统用例分析 四、核心代码 五、效果图 六、文…
-
Hadoop增加新节点环境配置（自用）
完成Hadoop集群增添一个新的节点配置（文中命名为）Hadoop106，没有进行继续为该节点分配身份职能的步骤 1.在VMware中安装CentOS 7 新建虚拟机 1.⾸先我们…
-
【hive-design】hive架构详解：描述了hive架构，hive主要组件的作用、hsql在hive执行过程中的底层细节、hive各组件作用
文章目录 一. Hive Architecture 二. Metastore 1. Metastore Architecture 2. Metastore Interface 三….
-
2023.11.16-hive sql高阶函数lateral view,与行转列,列转行
目录 0.lateral view简介 1.行转列 需求1: 需求2: 2.列转行 解题思路: 0.lateral view简介 hive函数 lateral view 主要…
-
hadoop面试题（大数据）（附答案）
hadoop Hadoop 中常问的就三块，第一：分布式存储(HDFS)；第二：分布式计算框架(MapReduce)；第三：资源调度框架(YARN)。 一，什么是Hadoop及其组…
-
【Hive
1、 计算资源配置 1.1 Yarn资源配置 1.2 MapReduce资源配置 2、 Explain查看执行计划（重点） 2.1 Explain执行计划概述 2.2 基本语法 2…
-
[hive] 在hive sql中定义变量
在Hive SQL中，可以使用SET命令来定义变量。 变量可以用于存储和引用常量或表达式的值，以便在查询中重复使用。 下面是定义和使用变量的示例： — 定义一个变量 SET my…
-
hive查看数据库出现org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
FAILED: HiveException java,lang.RuntimeException: Unable to instantiate org.apache.hadoop….
-
hadoop(学习笔记) 4—-怎么把文件放到hdfs上?
学习笔记 1.namenode的存储机制 2.datanode的存储机制 3.修改namenode,datanode的存放位置 (1)根据官网 获得配置代码 (2)nodepad+…
