数据仓库
-
Hive实战:学生信息排序
文章目录 一、实战概述 二、提出任务 三、完成任务 (一)准备数据 1、在虚拟机上创建文本文件 2、上传文件到HDFS指定目录 (二)实现步骤 1、启动Hive Metastore…
-
【第十一届泰迪杯数据挖掘挑战赛】A 题:新冠疫情防控数据的分析 思路+代码(持续更新)
【第十一届泰迪杯数据挖掘挑战赛】A 题:新冠疫情防控数据的分析 思路+代码(持续更新) 问题背景 解决问题 代码下载 数据分析 Task1 Task2 Task3 Task4 问题…
-
Hive 的日志和监控工具
1.简介 在大数据领域中,Hive 是一个非常常用的数据仓库解决方案。在实际生产环境中,为了保障 Hive 的稳定运行和及时发现问题,日志和监控工具是必不可少的组成部分。本章节将详…
-
DBeaver连接hive(详细图解)
文章目录 DBeaver 简介 使用DBeaver连接hive (1)配置Maven仓库 (2)配置hive驱动 (3)创建hive连接 (4)连接测试 DBeaver 简介 db…
-
Hive复杂数据类型(array类型、map类型、struct类型)
目录 一、array类型 1.查询array内包含的指定词信息 2.查询array中元素的个数 3.查询array内指定序号信息 …
-
SparkSQL和Hive语法差异
SparkSQL和Hive语法差异 1、仅支持Hive SparkSQL关联条件on不支持函数rand() 创建零时表时,Spark不支持直接赋值null Spark无法读取字段类…
-
Flink+Paimon多流拼接性能优化实战
目录 (零)本文简介 意外收获: (一)背景 (二)探索梳理过程 (三)源码改造 (四)修改效果 1、JOB状态 2、Level5的dataFile总大小 3、数据延迟 4、关联率…
-
hive语法
DDL 1.数据库操作 (1)创建库 create database db_hive1; (2)显示库 show databases; show database like …
-
hive框架与数据类型
hive Hive是一个基于Hadoop的数据仓库工具,它提供了类似于SQL的查询语言HiveQL来查询和分析大规模数据。Hive将结构化的数据文件映射为一张数据库表,并提供了SQ…
-
【数据库原理 | MySQL】 前世今生(入坑篇)
🤵♂️ 个人主页: @计算机魔术师 👨💻 作者简介:CSDN内容合伙人,全栈领域优质创作者。 文章目录 一、Mysql 概述 1…
-
浅谈数据仓库运营
一、背景 企业每天都会产生大量的数据,随着时间增长,数据会呈现几何增长,尤其在系统基建基础好的公司。好的数据仓库需要提前规划和好的运营,才能支持企业的发展,为企业提…
-
数据仓库现代化和迁移解决方案Datametica
Datametica利用自动化将数据/工作负载/ETI/分析迁移到云,从而为企业提供支持。 Datametica是一家通过建立数据湖来帮助企业实现数据平台现代化的公司,该数据湖安全…
-
Hive中left join 中的where 和 on的区别
目录 一、知识点 二、测试验证 三、引申 前言 数仓实际开发中经常会涉及到多表关联,这个时候就会涉及到on与where的使用。因此本篇文章主要阐述on 和 where之间的区…
-
使用navicat创建Oracle新用户
创建表空间 连上数据库之后,在navicat里点击其他,然后选择表空间 然后选择新建表空间 可以参考存在的表空间进行新建。 表空间类型有以下几种: PERMANENT: 永久表空间…
-
【hive-解决】HiveAccessControlException Permission denied: CREATEFUNCTION
文章目录 一.任务描述 二. 解决 一.任务描述 Error while compiling statement: FAILED: HiveAccessControlExcepti…
