残月的技术日志

残月的技术日志

最新文章

GO 语言快速上手

之前的笔记,可用于快速学习Go语言基本语法
GO
39
0
2024-03-16

操作系统与存储器管理

以操作系统的角度,探讨计算机中的存储器。
21
0
2024-02-29

Flink 数据分流与合流

本文主要内容:如何对Flink中的数据流进行分流与合流操作
50
0
2023-06-18

Flink 状态管理_StateAPI

Flink的状态 何为状态(state):可以理解成在计算的过程中产生的数据、变量等等等等,例如我们做词频计数时,单词的数量就是状态,每当对已经统计的数量进行更新时,这个更新就是状态的更新 Flink 天生可以对数据进行状态计算,且提供了几种由Flink托管的状态 Flink应用程序的状态通常是在本
10
0
2023-06-18

SparkRDD

RDD RDD(Resilient Distributed Dataset)即弹性分布式数据集,数据集的全部或部分可以存储在集群的多台机子的内存上,当内存不够时,数据也可持久化到硬盘 RDD的主要特征: RDD都是只读的,但可以将RDD转换为新的RDD RDD是可分区的,每个分区对应一个Tesk执行
10
0
2023-06-18

Spark 流计算

什么是SparkStreaming 用于快速上手,有很多细节,后面有时间单独出 Spark Streaming 是Spark提供的一个流计算框架 点击跳转官方文档 与Flink类似,Spark Streaming也可从Kafka。Flume,TCP套接字等众多途径获取数据,也有map(),reduc
6
0
1023-06-23