大数据
-
数据分析毕业设计 大数据招聘岗位数据分析与可视化 – 爬虫 python
# 1 前言 🔥 这两年开始毕业设计和毕业答辩的要求和难度不断提升，传统的毕设题目缺少创新和亮点，往往达不到毕业答辩的要求，这两年不断有学弟学妹告诉学长自己做的项目…
-
Flink 火焰图
方式一 使用 Flink Web UI 的 Flame Graph Flink 自己也支持了 Task 粒度的 Flame Graphs 功能，并且可以细化到 subtask 粒度…
-
大数据集群基础之Yarn的运维
spark中的yarn的作用是什么 在Apache Spark中，YARN（Yet Another Resource Negotiator）是一种用于集群资源管理的开源框架。YAR…
-
Elasticsearch：使用 Open AI 和 Langchain 的 RAG – Retrieval Augmented Generation （一）
最近看了一个同事的几个视频。他总结的很好。在使用 LangChain 时，根据 LangChain 的官方文档 https://integrations.langchain.com…
-
大数据深度学习ResNet深度残差网络详解：网络结构解读与PyTorch实现教程
文章目录 大数据深度学习ResNet深度残差网络详解：网络结构解读与PyTorch实现教程 一、深度残差网络（Deep Residual Networks）简介 深度学习与网络深度…
-
【2023 CCF 大数据与计算智能大赛】基于TPU平台实现超分辨率重建模型部署 基于QuickRNet的TPU超分模型部署
2023 CCF 大数据与计算智能大赛 《赛题名称》 基于QuickRNet的TPU超分模型部署 巴黎欧莱雅 林松 智能应用业务部算法工程师 中信科移动 中国-北京 gpu@163…
-
【Flink-1.17-教程】-【五】Flink 中的时间和窗口（1）窗口（Window）
【Flink-1.17-教程】-【五】Flink 中的时间和窗口（1）窗口（Window） 1）窗口的概念 2）窗口的分类 2.1.按照驱动类型分 2.2.按照窗口分配数据的规则分…
-
Hadoop Hbase Hive 版本对照一览
这里写目录标题 一、Hadoop 与 Hbase 版本对照 二、Hadoop 与 Hive 版本对照 官网内容记录，仅供参考 一、Hadoop 与 Hbase 版本对照 二、Had…
-
elasticsearch目录及配置参数说明
1.elasticsearch目录及其作用 bin 存放ES启动、关闭等脚本文件 存放执行文件，例如启动脚本、密钥工具等 config ES的配置文件所在的目录，其中有三个主要的配…
-
2024.1.4 Spark Core ,RDD ,算子
目录 一 . RDD(弹性分布式数据集) 二 . RDD的五个特性 三 .RDD的五大特点 四 . 算子 五 . 分区算子 ,重分区算子 , 聚合算子 ,关联算子 分…
-
大数据之Spark架构设计与工作流程
Apache Spark 架构设计是其高效、分布式处理能力的基础。Spark 的架构主要包括以下几个核心组件： Driver Program（驱动器） 驱动器程序负责执行用户的主函…
-
003-08-01【Spark-Error】Spark has no access to table， 灵隐寺旁许姓人家女儿大红用GPT 解决了spark 的这个问题.
【Spark-Error】Spark has no access to table ***. Clients can access this table only if they …
-
【极数系列】Flink是什么?（02）
#【Flink 初相识】Flink是什么? 引言 Flink官网：https://flink.apache.org/ Flink版本：https://flink.apache.or…
-
使用 ElasticSearch 作为知识库，存储向量及相似性搜索
一、ElasticSearch 向量存储及相似性搜索 在当今大数据时代，快速有效地搜索和分析海量数据成为了许多企业和组织的重要需求。Elasticsearch 作为一款功能强大的分…
-
elasticsearch7.x 开启安全认证xpack，以及kibana、logstash、filebeat组件连接开启安全认证的es；
文章目录 一、 elasticsearch7.x 开启安全认xpack 1.生成认证文件 2.修改elasticsearch配置文件开启xpack 3.重启各个es节点并设置用户名…
