hive
-
Hive3 on Spark3配置
1、软件环境 1.1 大数据组件环境 大数据组件 版本 Hive 3.1.2 Spark spark-3.0.0-bin-hadoop3.2 1.2 操作系统环境 OS 版本 Ma…
-
hivesql 将json格式字符串转为数组
hivesql 将json格式字符串转为数组 完整过程SQL在文末 json 格式字符串 本案例 json 字符串参考格式，请勿使用本数据 { “data”: [ { “provi…
-
大数据技术之Hive（三）hive常用函数
hive有大量内置函数，大致可分为：单行函数、聚合函数、炸裂函数、窗口函数。 查看内置函数 show functions; 查看内置函数用法 desc function upper…
-
hive中struct相关函数总结
目录 hive官方函数解释 示例 实战 hive官方函数解释 hive官网函数大全地址：添加链接描述 Return Type Name Description struct str…
-
CDH大数据平台 16Cloudera Manager Console之Sentry权限配置和测试(markdown新版)
?个人主页：@与自己作战 ?作者简介：大数据领域优质创作者、CSDN@内容合伙人、阿里云专家博主 ?希望大佬们多多支持，携手共进 ? 如果文章对你有帮助的话，欢迎评论?点赞?收藏?…
-
任务15：使用Hive进行全国气象数据分析
任务描述 知识点： 使用Hive进行数据分析 重 点： 掌握Hive基本语句 熟练使用Hive对天气数据进行分析 内 容： 使用Hive创建外部表 使用Hive对数据进行统计分…
-
Spark内容分享(二十六)：Hive SQL 迁移 Spark SQL 在网易传媒的实践
目录 引言 迁移背景 迁移方案设计 迁移成果 总结 引言 把基于mapreduce的离线hiveSQL任务迁移到sparkSQL，不但能大幅缩短任务运行时间，还能节省不少计算资源。…
-
Java实现Hive UDF详细步骤 (Hive 3.x版本，IDEA开发）
这里写目录标题 前言 1. 新建项目 2.配置maven依赖 3.编写代码 4.打jar包 5.上传服务器 6.代码中引用 前言 老版本编写UDF时，需要继承 org.apache…
-
Hive09
HIVE函数 系统内置函数 1）查看系统自带的函数 hive> show functions; 2）显示自带的函数的用法 hive> desc function upp…
-
Hive中的炸裂、窗口函数及示例
一、炸裂函数 针对一行数据，输出多行数据，主要用于map，array这种的 根据一个例子来看： friends 是一个array数组 students 是一个map address…
-
【hive】hive修复分区或修复表 以及msck命令的使用
【hive】hive修复分区或修复表 以及msck命令的使用 文章目录 【hive】hive修复分区或修复表 以及msck命令的使用 问题原因： 解决方法： msck命令解析： 例…
-
Hive3.1.3版本安装部署
前言 Hive作为大数据生态中的一员，曾经也是一个热门的组件，特别是在数据仓库类的项目中，扮演着一个重要的角色，比如版本管理、历史数据追溯等，今年来随着实时要求的增多，该组件的热度…
-
[AIGC 大数据基础]hive浅谈
在当今大数据时代，随着数据量的不断增大，如何高效地处理和分析海量数据已经成为一个重要的挑战。为了满足这一需求，Hive应运而生。 Hive作为一个基于Hadoop的数据仓库基础设施…
-
如何使用 Hive 进行自然语言处理
1.背景介绍 自然语言处理(NLP，Natural Language Processing)是人工智能领域的一个重要分支，其主要目标是让计算机能够理解、生成和翻译人类语言。自然语言…
-
Hadoop 高可用集群完全分布式安装教程一篇就够用（zookeeper、spark、hbase、mysql、hive)
Hadoop 高可用集群完全分布式安装教程一篇就够用（zookeeper、spark、hbase、mysql、hive） 写在之前，Hadoop完全分布式集群资源配置规划情况 一、…
