hdfs
-
Python 使用Hadoop 3 之HDFS 总结
Hadoop 概述 Hadoop 是一个由Apache 软件基金会开发的分布式基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序，充分利用集群的威力进…
-
2024.1.5 Hadoop阶段,各组件工作原理,八股文,面试题
目录 1 . 简述下分布式和集群的区别 2. Hadoop的三大组件是什么? 3. 请简述hive元数据服务配置的三种模式? 4. 数据库与数据仓库的区别? 5. 简述下数据仓库经…
-
猿创征文｜Hadoop大数据技术
Hadoop大数据技术 Hadoop背景 Hadoop生态圈 Hadoop模式 HDFS 概述 优点 缺点 基本组成 NameNode Secondary NameNode Dat…
-
编译 FastDFS 时报错 fatal error: sf/sf
编译 FastDFS 时，报错如下 gcc -Wall -D_FILE_OFFSET_BITS=64 -D_GNU_SOURCE -g -O1 -DDEBUG_FLAG -c -o…
-
2.2 如何使用FlinkSQL读取&写入到文件系统(HDFS\Local\Hive)
目录 1、文件系统 SQL 连接器 2、如何指定文件系统类型 3、如何指定文件格式 4、读取文件系统 4.1 开启 目录监控 4.2 可用的 Metadata 5、写出文件系统 …
-
HDFS集群部署成功但网页无法打开如何解决（显示配置通过浏览器访问hdfs的端口）
在学习黑马2023大数据教程过程中，首先依照视频完成了如下配置：【必须】 【黑马2023大数据实战教程】大数据集群环境准备过程记录（3台虚拟机） 黑马2023大数据实战教程】VMW…
-
Hadoop的安装和使用，Windows使用shell命令简单操作HDFS
目录 1，Hadoop简介 2，分布式文件系统HDFS 1. HDFS简介 2.HDFS体系结构 3，Hadoop的安装 1.使用WEB管理页面操作HDFS 2.使用命令操作HDF…
-
Hadoop 之 Hbase 配置与使用（四）
Hadoop 之 Hbase 配置与使用 一.Hbase 下载 1.Hbase 下载 二.Hbase 配置 1.单机部署 2.伪集群部署（基于单机配置） 3.集群部署 1.启动 h…
-
Hadoop原理之HDFS
小伙伴们大家好,今天给大家介绍一下HDFS部分的相关知识: 1.HDFS原理–架构 hdfs由三部分组成:分别是 namenode,SecondaryNameNode,…
-
一文让你学明白Hadoop《大数据技术之Hadoop》详细知识总结
思维导图： 一：Hadoop的简介 简介： Hadoop是由Apache基金会所开发的一个开源的分布式存储和处理大数据的框架，可以在计算机集群中进行大规模数据集的的存储和处理，并提…
-
通过Web的方式访问HDFS
要通过web访问HDFS（Hadoop分布式文件系统），你可以使用Hadoop提供的Web界面来管理和监控HDFS。 默认情况下，Hadoop提供了以下两个主要的Web界面： HD…
-
大数据导论期末复习知识汇总
目录 一、大数据概述 （一）数据和信息 （二）数据的组织形式和生命周期： （三）数据转化为信息的过程： （四）数据的价值 （五）大数据的内涵 （六）大数据的5V特性 （七）数据产生…
-
【头歌】大数据从入门到实战 – 第2章 分布式文件系统HDFS
第1关：HDFS的基本操作 任务描述 本关任务：使用 Hadoop 命令来操作分布式文件系统。 编程要求 在右侧命令行中启动 Hadoop ，进行如下操作。 在 HDFS 中创建 …
-
大数据——HDFS(分布式文件系统）
一，分布式系统概述 Hadoop的两大核心组件 HDFS（Hadoop Distributed Filesystem）：是一个易于扩展的分布式文件系统，运行在成百上千台低成本的机…
-
hadoop集群搭建–启动hdfs时NameNode或DataNode或SecondaryNameNode启动失败解决方法
1、集群HDFS配置情况 node101:NameNode、DataNode node102:DataNode node103:SecondaryNameNode、DataNode…
