大数据
-
微软Power Platform平台低代码
微软Power Platform平台 从我目前的了解的情况来看，资料来源于百度，csdn,掘金，简书，知乎等国内的资料相对于比较少或者说power platform 这个平台的系列…
-
开源大数据集群部署（八）Ranger编译部署
作者：櫰木 在hd1.dtstack.com主机root权限下操作。 1、 编译ranger ranger二进制包编译过程在本次过程中不做详细说明。简单说明如下： 在pom.xml…
-
ElasticSearch面试题整理（持续更新）
1. Elasticsearch 中的倒排索引是什么？ Elasticsearch 使用一种称为倒排索引的结构，ES中的倒排索引其实就是 lucene 的倒排索引，区别于传统的正向…
-
视频号小店和抖音小店相比，新手做哪个比较好？
我是电商珠珠 抖音小店在19年被抖音所发展，在这过程中，抖音小店通过自身的不断完善，从兴趣电商到全域兴趣电商模式，从直播电商到商城的出现，凭借着门槛低流量高的优势，让很多商家尝到了…
-
HDFS 常用命令
HDFS 常用命令 HDFS (Hadoop Distributed File System) 是 Hadoop 分布式文件系统，以下是一些 HDFS 常用命令： 低版本 hado…
-
HDFS系统权限详解
一，HDFS超级用户 启动namenode的用户就是HDFS中的超级用户 如图所示 HDFS中，也是有权限控制的，其控制逻辑和Linux文件系统的完全一致 但是不同的是，两个系统的…
-
OpenAI GPT-4 Turbo发布：开创AI新时代
我的博客即将同步至腾讯云开发者社区，邀请大家一同入驻：https://cloud.tencent.com/developer/support-plan?invite_code=2e…
-
第九届云计算与大数据分析国际会议（ICCCBDA 2024）即将召开！
第九届云计算与大数据分析国际会议（ICCCBDA 2024）将于2024年4月25-27日在中国成都召开。ICCCBDA自创办以来，已经成功召开了八届。此次会议将介绍一些当前和…
-
Pandas DataFrame 转 Spark DataFrame报错：AttributeError
环境说明 pandas==2.0.3 spark==3.1.2 报错内容 在使用 spark 过程中，涉及将 pandas 的 DataFrame 转换为 spark 的 Data…
-
混合云的大数据解决方案：实现企业数据的高效分析与挖掘
1.背景介绍 大数据技术在过去的几年里发展迅速，成为企业竞争力的重要组成部分。随着数据量的增加，传统的数据处理方法已经无法满足企业的需求。因此，大数据技术在企业中的应用越来越广泛。…
-
大数据在智能能源管理中的发展趋势与机遇
1.背景介绍 智能能源管理是一种利用大数据、人工智能和互联网技术来优化能源生产、分发和消费的方法。在全球气候变化和能源短缺的背景下，智能能源管理已经成为各国政府和企业的关注焦点。智…
-
Flink的MySQL集成与应用
1.背景介绍 在大数据时代，数据处理和分析的需求日益增长。为了更高效地处理和分析大量数据，许多大数据处理框架和工具已经诞生。Apache Flink是一种流处理框架，它可以处理实时…
-
HBase的数据批量操作与事务处理
1.背景介绍 HBase是一个分布式、可扩展、高性能的列式存储系统，基于Google的Bigtable设计。它是Hadoop生态系统的一部分，可以与HDFS、MapReduce、Z…
-
记一次模糊查询踩坑 Flink+ES
模糊查询优化 Flink+ES 公司需要对商品名称进行模糊模糊查询，考虑到商品表存量数据千万级，直接数据库模糊查询效率肯定极其低下，所以选择使用ElasticSearch对商品信息…
-
Flink CDC报The connector is trying to read binlog starting at xxx but this is no longer available问题解决
背景 问题是笔者最近在使用FlinkCDC2.3.0捕获MySQL binlog日志时遇到的，MySQL使用的阿里云的RDS，MysqlCDC使用读账号以Initinal模式，任务…
