hdfs
-
HDFS读写流程详细过程
HDFS读写流程详细过程 HDFS的定义 一、组成架构 二、优缺点 三、读流程 四、NameNode和SeconderyNameNode 五、写流程 HDFS的定义 HDFS（Ha…
-
【大数据】HBase 中的列和列族
😊 如果您觉得这篇文章有用 ✔️ 的话，请给博主一个一键三连 🚀🚀🚀 吧 （点赞 🧡、关注 …
-
基于华为MRS3.2.0实时Flink消费Kafka落盘至HDFS的Hive外部表的调度方案
文章目录 1 Kafka 1.1 Kerberos安全模式的认证与环境准备 1.2 创建一个测试主题 1.3 消费主题的接收测试 2 Flink 1.1 Kerberos安全模式的…
-
Hadoop
参考资料 1. HDFS中的常用压缩算法及区别_大数据_王知无_InfoQ写作社区 2. orc格式和parquet格式对比-阿里云开发者社区 3.Hadoop 压缩格式 gzi…
-
解决集群部署Hadoop 启动后没有ResourceManager问题
解决集群部署Hadoop 启动后没有ResourceManager问题 问题 1. 启动完成后输入jps命令没有看到ResourceManager 2. 查看ResourceMan…
-
bash: 未预期的符号 `newline‘ 附近有语法错误——解决方法
大家看了这篇文章，别笑我😭，我的脑子最近真的不好使！ 先放图： 当我在修改Hadoop中core-site.xml配置文件后，想使用source让文件生效，结果出现…
-
基于Hadoop的豆瓣电影的数据抓取、数据清洗、大数据分析（hdfs、flume、hive、mysql等）、大屏可视化
目录 项目介绍 研究背景 国内外研究现状分析 研究目的 研究意义 研究总体设计 数据获取 网络爬虫介绍 豆瓣电影数据的采集 数据预处理 数据导入及环境配置 Flume介绍 Hive…
-
【Ambari】HDFS基于Ambari的常规运维
🦄 个人主页——🎐开着拖拉机回家_大数据运维-CSDN博客 🎐✨🍁 🪁🍁Ǻ…
-
学完了Hadoop，我总结了这些重点
文章目录 一、Hadoop 组成 Hadoop1.x 、2.x 、3.x 的区别 HDFS架构概述 MapReduce架构概述 YARN架构概述 二、常用端口号 三、常用的配置文件…
-
大数据开发之Hadoop（完整版+练习）
第 1 章：Hadoop概述 1.1 Hadoop是什么 1、Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 2、主要解决，海量数据的存储和海量数据的分析计算问…
-
HDFS的基本操作（创建目录或文件、查看目录或文件、上传和拷贝文件到HDFS上、追加数据到HDFS上、从HDFS上下载文件到Linux本地、合并HDFS文件）
文章目录 前言 一、HDFS的相关命令 1、在HDFS创建目录 2、查看当前目录 3、查看目录与子目录 4、查看文件的内容 5、创建文件 6、上传和拷贝文件 7、追加数据到HDFS…
-
hadoop-hdfs简介及常用命令详解（超详细）
文章目录 前言 一、HDFS概述 1. HDFS简介 2. HDFS架构 3. HDFS文件操作 二、HDFS命令介绍 1. hdfs命令简介 2. HDFS命令的基本语法 3. …
-
【Hadoop】高可用集群搭建
知识目录 一、写在前面💕 二、Zookeeper安装✨ 三、Hadoop配置✨ 四、Hadoop HA自动模式✨ 五、HA脚本分享✨ 七、结语💕 一…
-
从零开始了解大数据(七)：总结
系列文章目录 从零开始了解大数据(一)：数据分析入门篇-CSDN博客 从零开始了解大数据(二)：Hadoop篇-CSDN博客 从零开始了解大数据(三)：HDFS分布式文件系统篇-C…
-
【Hadoop】HDFS API 操作大全
🍁 博主 “开着拖拉机回家”带您 Go to New World.✨🍁 🦄 个人主页——🎐开…
