hive
-
hive查看数据库出现org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
FAILED: HiveException java,lang.RuntimeException: Unable to instantiate org.apache.hadoop….
-
Hive创建分区表并插入数据
业务中经常会遇到这种需求:数据每天全量更新,但是要求月底将数据单独保存一份以供后期查询某月节点的信息。这时就要考虑用到Hive的分区表实现,即按照月份创建分区表,相当于新的月份数据…
-
【dbeaver】win环境的kerberos认证和Clouders/cdh集群中Kerberos认证使用Dbeaver连接Hive、Impala和Phoenix
一、配置Mit kerberos 1.1 下载安装MIT KERBEROS客户端 MIT KERBEROS 下载较新的版本即可。 下载之后一路默认安装即可。注意:不要修改软件安装位…
-
[hive] 窗口函数 ROW
文章目录 `ROW_NUMBER() ` 示例 窗口函数 ROW_NUMBER() 在 Hive SQL 中,ROW_NUMBER()是一个用于生成行号的窗口函数。 它可以为查询结…
-
三种SQL实现聚合字段合并(presto、hive、mysql)
需求:按照项目名,以逗号合并参与人 presto select item_name ,array_join(array_agg(name),’,’) as group_name f…
-
数仓工具—Hive进阶之StorageHandler(23)
Storage Handler 引入Storage Handler,Hive用户使用SQL的方式读写外部数据源, 例如ElasticSearch、 Kafka、HBase等数据源的…
-
基于hadoop+hive的全国天气大数据可视化平台
【大数据分析毕设之S2023102基于Hadoop+hive的全国天气大数据分析可视化平台(hive+sqoop+hdfs+E chart)】 https://www.bilibi…
-
Hive01
Hive的安装 上传安装包 解压 tar zxvf apache-hive-3.1.2-bin.tar.gz mv apache-hive-3.1.2-bin hive 解决Hiv…
-
5. Hive的三种去重方法
文章目录 Hive的三种去重方法 1. distinct 2. group by 3. row_number() 4. 三者的效率对比 参考链接 Hive的三种去重方法 1. di…
-
Presto的介绍、使用和原理架构
文章目录 简介 介绍 优缺点 Presto和hive的对比 Presto、Impala性能比较 原理 架构 整体架构 sql执行步骤 具体分析 资源和调度 查询调度 **资源管理*…
-
【Hadoop】图解 Hadoop 生态系统及其组件
图解 Hadoop 生态系统及其组件 1.HDFS2.MapReduce3.YARN4.Hive5.Pig6.Mahout7.HBase8.Zookeeper9.Sqoop10.F…
-
Hive 的权限管理
目录 编辑 一、Hive权限简介 1.1 hive中的用户与组 1.1.1 用户 1.1.2 组 1.1.3 角色 1.2 使用场景 1.2.1 hive cli 1.2.2 h…
-
解决Hive在DataGrip 中注释乱码问题
注释属于元数据的一部分,同样存储在mysql的metastore库中,如果metastore库的字符集不支持中文,就会导致中文显示乱码。 不建议修改Hive元数据库的编码,此处我们…
-
Hive解析Json数组超全讲解
Hive解析Json数组超全讲解 在Hive中会有很多数据是用Json格式来存储的,如开发人员对APP上的页面进行埋点时,会将多个字段存放在一个json数组中,因此数据平台调用数据…
-
hive lag() 和lead()函数
LAG 和 LEAD函数简介 Hive 中的 LAG 和 LEAD 函数时,通常用于在结果集中获取同一列在前一行(LAG)或后一行(LEAD)的值。这在分析时间序列数据、计算变化率…
