大数据

《Flink 架构》系列（已完结），共包含以下 6 篇文章： Flink 架构（一）：系统架构 Flink 架构（二）：数据传输 Flink 架构（三）：事件时间处理 Flink …

​“ 大数据团队是成本中心还是价值中心？ 数据资产入表，国家是怎么说的？ 数据平台应具备哪些能力，才能助力企业最大化数据资产价值？” 2022年12月，国务院发文关于发挥数据要素作…

文章目录 大数据前馈神经网络解密：深入理解人工智能的基石 一、前馈神经网络概述 什么是前馈神经网络 前馈神经网络的工作原理 应用场景及优缺点 二、前馈神经网络的基本结构 输入层、隐…

一、Spark是什么 Spark是一种基于内存的快速、通用、可扩展的大数据分析计算引擎。 Spark是基于Scala语言开发的。 整个Spark框架模块包含：Spark Core、…

Flink、Yarn架构，以Flink on Yarn部署原理详解 Flink 架构概览 Apache Flink是一个开源的分布式流处理框架，它可以处理实时数据流和批处理数据。F…

文章目录 0 简介 1 课题简介 2 系统设计实现 2.1 总体设计 2.2 搜索关键流程 2.3 推荐算法 2.4 数据流的实现 3 实现细节 3.1 系统架构 3.2 爬取大量…

系列文章目录 Flink项目实战篇 基于Flink的城市交通监控平台（上） Flink项目实战篇 基于Flink的城市交通监控平台（下） 文章目录 系列文章目录 1. 项目整体介绍…

文章目录 实时任务执行流程 一、准备环境 二、启动Flink代码

0、汇总 ========1.14.0======== 1.有界流支持 Checkpoint； 2.批执行模式支持 DataStream 和 Table/SQL 混合应用； 3.新…

报错场景： 机器 linux-centos7.6，自带的python 2.7 因为spark对环境的要求所以安装了Anaconda，生成的pyspark环境。但是在执行任务时提示如…

一、数据介绍 1.数据链接 https://download.csdn.net/download/skyman30/87432266?spm=1001.2014.3001.5503…

文章目录 问题描述： 原因分析： 解决方案： 方法一： 方法二： 问题描述： 开启 ZooKeeper 之后，准备启动 Kafka 服务，结果出现 ERROR Fatal erro…