hdfs
-
Hadoop的安装和使用，Windows使用shell命令简单操作HDFS
目录 1，Hadoop简介 2，分布式文件系统HDFS 1. HDFS简介 2.HDFS体系结构 3，Hadoop的安装 1.使用WEB管理页面操作HDFS 2.使用命令操作HDF…
-
Hadoop 之 Hbase 配置与使用（四）
Hadoop 之 Hbase 配置与使用 一.Hbase 下载 1.Hbase 下载 二.Hbase 配置 1.单机部署 2.伪集群部署（基于单机配置） 3.集群部署 1.启动 h…
-
Hadoop原理之HDFS
小伙伴们大家好,今天给大家介绍一下HDFS部分的相关知识: 1.HDFS原理–架构 hdfs由三部分组成:分别是 namenode,SecondaryNameNode,…
-
一文让你学明白Hadoop《大数据技术之Hadoop》详细知识总结
思维导图： 一：Hadoop的简介 简介： Hadoop是由Apache基金会所开发的一个开源的分布式存储和处理大数据的框架，可以在计算机集群中进行大规模数据集的的存储和处理，并提…
-
通过Web的方式访问HDFS
要通过web访问HDFS（Hadoop分布式文件系统），你可以使用Hadoop提供的Web界面来管理和监控HDFS。 默认情况下，Hadoop提供了以下两个主要的Web界面： HD…
-
大数据导论期末复习知识汇总
目录 一、大数据概述 （一）数据和信息 （二）数据的组织形式和生命周期： （三）数据转化为信息的过程： （四）数据的价值 （五）大数据的内涵 （六）大数据的5V特性 （七）数据产生…
-
【头歌】大数据从入门到实战 – 第2章 分布式文件系统HDFS
第1关：HDFS的基本操作 任务描述 本关任务：使用 Hadoop 命令来操作分布式文件系统。 编程要求 在右侧命令行中启动 Hadoop ，进行如下操作。 在 HDFS 中创建 …
-
大数据——HDFS(分布式文件系统）
一，分布式系统概述 Hadoop的两大核心组件 HDFS（Hadoop Distributed Filesystem）：是一个易于扩展的分布式文件系统，运行在成百上千台低成本的机…
-
hadoop集群搭建–启动hdfs时NameNode或DataNode或SecondaryNameNode启动失败解决方法
1、集群HDFS配置情况 node101:NameNode、DataNode node102:DataNode node103:SecondaryNameNode、DataNode…
-
HDFS常用命令汇总
HDFS常用命令汇总 一、前言信息 二、帮助信息查看 1、查看帮助信息 2、帮助文档（附带命令的详细说明） 三、常用命令 1、创建目录 2、查看目录下的内容 3、上传文件 4、上传…
-
2.2 如何使用FlinkSQL读取&写入到文件系统(HDFS\Local\Hive)
目录 1、文件系统 SQL 连接器 2、如何指定文件系统类型 3、如何指定文件格式 4、读取文件系统 4.1 开启 目录监控 4.2 可用的 Metadata 5、写出文件系统 …
-
hadoop面试题（大数据）（附答案）
hadoop Hadoop 中常问的就三块，第一：分布式存储(HDFS)；第二：分布式计算框架(MapReduce)；第三：资源调度框架(YARN)。 一，什么是Hadoop及其组…
-
【Hadoop】图解 Hadoop 生态系统及其组件
图解 Hadoop 生态系统及其组件 1.HDFS2.MapReduce3.YARN4.Hive5.Pig6.Mahout7.HBase8.Zookeeper9.Sqoop10.F…
-
一百五十九、Kettle——Kettle9.2通过配置Hadoop clusters连接Hadoop3.1.3（踩坑亲测、附流程截图）
一、目的 由于kettle的任务需要用到Hadoop（HDFS），所以就要连接Hadoop服务。 之前使用的是kettle9.3，由于在kettle新官网以及博客百度等渠道实在找不…
-
一文快速学会Hadoop伪分布式环境搭建，很详细
文章目录 一、准备工作 二、配置ssh免密登录 三、修改hadoop的配置文件 四、格式化namenode节点，启动hdfs，启动yarn 一、准备工作 配置hadoop模板虚拟机…
