hadoop
-
Hadoop的基础操作
Hadoop的基础操作 HDFS是Hadoop的分布式文件框架,它的实际目标是能够在普通的硬件上运行,并且能够处理大量的数据。 HDFS采用主从架构,其中由一个NameNode和多…
-
Hadoop YARN Cgroups 资源隔离讲解
文章目录 一、概述 二、Hadoop 环境准备 三、内存资源限制 四、CPU 资源限制 1)启用 LCE 2)启用 CGroup 3)配置 Yarn CGroup 目录 3)CPU…
-
基于大数据的音乐推荐系统的设计与实现
基于大数据的音乐推荐系统是为了给听众推荐符合内心喜好的个性化系统。系统提供的功能有,音乐管理:管理员可以添加删除音乐,音乐查找:用户可以在系统中自行查找想要听的歌曲,音乐推荐:系统…
-
hive面试题(精选)(附答案)
一,hive内部表和外部表的区别 未被external修饰的是内部表,被external修饰的为外部表。 区别: 内部表数据由Hive自身管理,外部表数据由HDFS管理; 内部表数…
-
史上最全的大数据开发八股文【自己的吐血总结】
自我介绍 我本硕都是双非计算机专业,从研一下开始学习大数据开发的相关知识,从找实习到秋招,我投递过100+公司,拿到过10+的offer,包括滴滴、字节、蚂蚁、携程、蔚来、去哪儿等…
-
[Hadoop全分布部署]安装JDK、Hadoop
👨🎓👨🎓博主:发量不足 个人简介:耐心,自信来源于你强大的思想和知识基础!! 📑📑…
-
大数据技术之Hadoop(十一)——网站流量日志数据分析系统
目录 素材: 一、模块开发——数据预处理 1、分析预处理的数据 2、实现数据的预处理 (1)创建Maven项目,添加相关依赖 (2)创建JavaBean对象,封装日志记录 (3)创…
-
数据仓库工具Hive
1. 请解释Hive是什么,它的主要用途是什么? Hive是一个基于Hadoop的数据仓库工具,主要用于处理和分析大规模结构化数据。它可以将结构化的数据文件映射为一张数据库表,并提…
-
8-Hive原理与技术
单选题 题目1:按粒度大小的顺序,Hive数据被分为:数据库、数据表、桶和什么 选项: A 元祖 B 栏 C 分区 D 行 答案:C ——̵…
-
Hadoop完全分布式搭建教程(完整版)
分别创建三个节点 master slave1 slave2 在master节点下安装jdk # 解压 [root@master /]# tar -zxvf /opt/softwar…
-
hadoop 拒绝连接
[root@node001 ~]# hadoop fs -ls /path/to/directory ls: Call From node001/192.168.137.155 t…
-
Hive精选10道面试题
1.Hive内部表和外部表的区别? 内部表的数据由Hive管理,外部表的数据不由Hive管理。 在Hive中删除内部表后,不仅会删除元数据还会删除存储数据, 在Hive中删除外部表…
-
Hive-函数总结
目录 查看 分类 分组 数学 取余 字符串 数组 炸裂 explode(array | map) posexplode lateral view 排序 4by order by 全…
-
hadoop集群启动master节点jps后没有namenode解决方案
hadoop集群启动jps后没有namenode 启动集群jps后出现: 1.关闭集群 stop-all.sh 2.切换到hadoop的目录下将logs与tmp文件与内容删除并创建…
-
Hadoop学习笔记(HDP)-Part.14 安装YARN+MR
目录 Part.01 关于HDP Part.02 核心组件原理 Part.03 资源规划 Part.04 基础环境配置 Part.05 Yum源配置 Part.06 安装Oracl…
