Flink科普系列之State(状态)

本文介绍了Flink中的关键概念——State,包括状态的简介、分类(Keyed State和Operator State)及其具体实现方式,如ValueState、ListState、ReducingState和MapState。通过实例展示了如何利用State进行数据处理,特别是单词计数统计,强调了State在处理数据流中断时的重要性。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

今天我们给大家介绍一下flink中的state,什么是state呢?大家可以理解为我们在处理数据的时候,每一个数据我们都会相应的为其准备一个空间存储他的变化过程

1 状态的简介

在flink中,我们是把所有的数据都可以看做是有状态的,比如我们在一个数据流中,我们要对一个数据流进行单词计数统计,但是在这个过程中,如果程序突然中断或者一些其他原因导致了我们的程序出现了fail,那这个时候我们就看可以用状态来解决这种问题!使用状态配合Checkpoint来解决就可以完美的规避掉这种生产事故的产生了!

2 State的分类

State分为两类分别是:Keyed State和Operator State。在这之上,我们的状态又分为托管状态和原始状态,在我们实际工作中,大多数都是采用的托管状态,

2.1 Keyed State
Keyed State的意思就是我们的数据都是按照key进行划分的,也就是相同的key状态都会保存在一起,也就是说 苹果都跟苹果放在一起,香蕉都和香蕉放在一起,方便管理和操作!

其中我们一共有以下几种储存数据的方式如下:
ValueState:单值状态并且与key绑定,可以通过update进行更新,和value进行取值

ListState:可以把这个理解为我们把数据的状态都存放在一个list上,然后我们就可以使用list的方法啦,很是方便!

ReducingState:这种状态我们可以简单的理解我们要对状态进行合并计算,如果是这种条件下我们就使用这种状态!

MapState:顾名思义,这种状态就是把状态放到了map中,形成了k-v键值对,同样类似于ListState我们就可以使用map中的一些方法了!

2.2 Operator State
这种状态就是跟key无关,此时就需要我们自己去设定了,他的数据结构和keyed state类似,只不过区别在于Operator State是与key无关的

3 举一个

### 腾讯iOA私有化部署成本分析 腾讯iOA作为国内领先的零信任安全解决方案之一,支持SaaS、私有化及混合部署模式。在企业对数据安全性要求较高的场景下,私有化部署成为首选方案。以下从硬件投入、软件授权、运维服务等方面进行综合成本分析。 #### 硬件投入成本 私有化部署需要本地服务器资源来承载控制中心、网关和终端管理模块。根据典型中型企业需求,建议采用双节点高可用架构,每台服务器配置不低于8核CPU、32GB内存、1TB SSD存储空间,以保障策略计算、身份认证与访问控制的稳定运行[^2]。若采用物理服务器采购方式,两台设备成本约在10~15万元区间;若已有虚拟化平台,则可通过分配资源池降低硬件支[^1]。 #### 软件授权与服务费用 腾讯iOA私有化版本按用户数或终端数量进行授权计费,具体价格因功能模块组合而异。基础版包含零信任SDP(软件定义边界)与CWPP(云工作负载保护平台)能力,适用于远程办公与应用访问控制场景,年费约为每位用户300元起[^2]。对于500人规模的企业,年度授权成本约15万元。此外,首次部署需支付一次性实施服务费,涵盖系统集成、策略配置与接口对接等,通常为5~8万元[^3]。 #### 运维与扩展成本 私有化部署后需配备专业IT团队负责日常维护、日志审计与策略优化。若企业内部缺乏相应技术储备,可选择厂商提供的年度运维服务包,费用约为软件授权金额的20%~30%。随着业务增长,新增用户或功能模块扩展将产生额外成本,例如增加DLP(数据防泄漏)模块后,整体预算需上浮10%~15%。 #### 总体预算估算 综合上述因素,一个中型企业在完成腾讯iOA私有化部署后的首年总成本包括: - 硬件投入:10~15万元 - 软件授权:15万元(500用户规模) - 实施服务费:5~8万元 - 年度运维服务费:3~5万元 总计约33~41万元,略超30万元预算上限。若希望压缩至30万元以内,可通过精简功能模块(如仅启用SDP与基础身份认证)、复用现有服务器资源或延长付款周期等方式实现初步部署[^3]。 ```python # 成本估算示例代码 def estimate_cost(users=500, license_per_user=300, setup_fee=60000, maintenance_rate=0.25): hardware_cost = 120000 # 假设复用部分资源,取中间值 license_cost = users * license_per_user total_initial_cost = hardware_cost + license_cost + setup_fee annual_maintenance = (license_cost + setup_fee) * maintenance_rate total_first_year = total_initial_cost + annual_maintenance return { "Initial Hardware Cost": hardware_cost, "License Cost": license_cost, "Setup Service Fee": setup_fee, "Annual Maintenance": annual_maintenance, "Total First Year": total_first_year } estimate_cost() ```
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值