hive
-
数据仓库命名规范详解
一、数仓中为什么要在数据开发过程中强调遵守数仓开发命名规范呢? 养成良好的编程习惯 写出清楚、易懂、易维护的程序代码 提高代码质量与沟通效率 减少编码中的不必要的错误 二、数仓开发…
-
Hive之set参数大全-1
A 控制是否允许在需要时按需加载用户定义函数(UDF) hive.allow.udf.load.on.demand 是 Apache Hive 中的一个配置属性,用于控制是否允许在…
-
使用Sqoop将Hive数据导出到TiDB
关系型数据库与大数据平台之间的数据传输之前写过一些 使用Sqoop将数据在HDFS与MySQL互导 使用Sqoop将SQL Server视图中数据导入Hive 使用DataX将Hi…
-
Hive实战 — 电子商务消费行为分析
目录 数据结构 Customer表 Transaction表 Store表 Review表 上传数据 创建目录用于存放数据 把本地文件上传到HDFS上 创建外部表 创建数据库 创…
-
Hive之lead函数详解
例如如下语句: drop table if exists temp03; create table temp03 as select card_no, deal_date, dea…
-
一百八十八、Hive——HiveSQL查询表中的日期是星期几(亲测,附截图)
一、目的 指标需要查询以工作日和周末维度的数据统计,因此需要根据数据的日期判断这一天属于星期几,周一到周五为工作日,周六到周日为周末 二、SQL查询 (一)SQL语句 select…
-
大数据NiFi(二十):实时同步MySQL数据到Hive
文章目录 实时同步MySQL数据到Hive 一、开启MySQL的binlog日志 1、登录mysql查看MySQL是否开启binlog日志
-
Hive实战:学生信息排序
文章目录 一、实战概述 二、提出任务 三、完成任务 (一)准备数据 1、在虚拟机上创建文本文件 2、上传文件到HDFS指定目录 (二)实现步骤 1、启动Hive Metastore…
-
Hive 的日志和监控工具
1.简介 在大数据领域中,Hive 是一个非常常用的数据仓库解决方案。在实际生产环境中,为了保障 Hive 的稳定运行和及时发现问题,日志和监控工具是必不可少的组成部分。本章节将详…
-
DBeaver连接hive(详细图解)
文章目录 DBeaver 简介 使用DBeaver连接hive (1)配置Maven仓库 (2)配置hive驱动 (3)创建hive连接 (4)连接测试 DBeaver 简介 db…
-
Hive数据库:嵌入、本地、远程全攻略(下)
先介绍一下本地模式和远程模式: 当使用本地模式时,Hive将其元数据存储在本地数据库(例如MySQL)中,使其成为一个独立的数据处理系统。在本地模式中,Hive的配置文件(hive…
-
Hive复杂数据类型(array类型、map类型、struct类型)
目录 一、array类型 1.查询array内包含的指定词信息 2.查询array中元素的个数 3.查询array内指定序号信息 …
-
Zookeeper+Hadoop+Spark+Flink+Kafka+Hbase+Hive
说明 Zookeeper+Hadoop+Spark+Flink+Kafka+Hbase+Hive 完全分布式高可用集群搭建 下载 https://archive.apache.or…
-
基于大数据的城市交通数据可视化分析系统
大家可以帮忙点赞、收藏、关注、评论啦 👇🏻👇🏻👇🏻 精彩专栏推荐订阅:在 下方专栏 …
-
SparkSQL和Hive语法差异
SparkSQL和Hive语法差异 1、仅支持Hive SparkSQL关联条件on不支持函数rand() 创建零时表时,Spark不支持直接赋值null Spark无法读取字段类…
