- 博客(20)
- 收藏
- 关注
原创 03-机器学习入门:多特征、向量化与多项式回归
本篇接着单特征线性回归,按照课程顺序学习多个特征、向量化、多元线性回归的梯度下降、特征缩放、收敛检查、学习率选择、特征工程与多项式回归。重点解释公式的含义,以及这些方法分别解决什么问题。
2026-11-05 19:58:45
178
原创 02-机器学习入门:线性回归与梯度下降
本文以房价预测为例,介绍线性回归如何通过参数建立特征与目标之间的关系,并用代价函数衡量预测误差。随后讲解梯度下降的基本原理、学习率的影响,以及多特征线性回归和特征缩放。通过这篇文章,可以把模型、误差评估和参数优化串成一条完整的训练流程,并为后续学习逻辑回归打下基础。
2026-10-29 20:48:36
199
原创 01-机器学习入门:什么是机器学习
机器学习入门第一篇:从“手写规则追不上变化”出发,理解机器学习与传统编程的本质区别;用真实房价数据走通监督学习全流程,分清回归与分类;再看无监督学习如何让数据自己“长出”规律。
2026-10-12 21:30:23
119
原创 Flink处理函数状态管理与容错机制入门笔记
本文梳理 Flink 处理函数(底层API,能做窗口/聚合做不到的事)、状态管理(怎么记住历史数据)、容错机制(怎么保证故障后数据不丢不重)这三章的核心概念。重点讲清楚"为什么需要这一层"“该怎么选”,具体的 API 调用方式作为示例说明,不作为记忆重点。 本文整理自尚硅谷《大数据技术之Flink》课程。
2026-08-01 10:59:23
553
原创 Flink时间和窗口入门笔记
本文梳理 Flink 处理无界数据流的核心机制——窗口(怎么切片)、时间语义(以谁的时钟为准)、水位线(怎么判断"这批数据到齐了")、迟到数据处理、双流 Join。重点讲清楚"水位线是延迟和正确性的权衡"这条主线,而不是罗列每种窗口分配器的参数写法。本文整理自尚硅谷《大数据技术之Flink》课程。
2026-07-26 09:57:46
651
原创 Flink DataStream API 入门:理解一条数据流的旅程
本文梳理 Flink DataStream API 的核心主线——Source(数据从哪来)、Transformation(数据怎么变)、Sink(数据到哪去),重点讲清楚聚合算子、UDF、分流合流、输出算子背后的设计逻辑,而不是罗列 API 参数。目标是建立一套"遇到需求该用哪个工具"的判断框架,而不是试图记住每一行代码怎么写。本文整理自尚硅谷《大数据技术之Flink》课程。
2026-07-24 14:16:55
446
原创 HBase入门
本文梳理 HBase 的核心数据模型(稀疏、分布式、多维、排序)、Master/RegionServer/ZooKeeper 架构、读写全流程,重点拆解 RowKey 设计方法论,并结合物流实时数仓项目给出 Java API(Put/Get/Scan)实战要点与优先级建议。本文整理自尚硅谷《大数据技术之HBase》课程。
2026-07-19 11:03:31
378
原创 Kafka-Eagle监控与Kraft模式
本篇介绍Kafka集群监控工具Kafka-Eagle的安装部署与使用,以及Kafka-Kraft模式的架构原理与集群部署方式。
2026-07-08 11:19:31
191
原创 Kafka消费者原理与实践
本篇介绍Kafka消费者的工作原理与核心机制,包括消费者组原理、分区分配与再平衡策略、offset管理、漏消费与重复消费问题及解决方案,以及消费者吞吐量调优。
2026-07-08 11:17:26
1027
原创 Kafka Broker原理与机制
本篇介绍Kafka Broker的核心机制,包括Controller选举与Leader选举流程、副本管理与故障处理、文件存储结构与清理策略,以及Kafka实现高效读写的底层原理。
2026-07-07 11:17:02
554
原创 Kafka生产者原理与实践
本篇介绍Kafka生产者的工作原理与核心机制,包括消息发送流程、分区策略、ack可靠性保证、幂等性与事务、数据有序性以及吞吐量调优。
2026-07-06 08:59:08
603
原创 Kafka概述与快速入门
本篇介绍Kafka的基本概念与核心架构,包括消息队列的三大应用场景、发布/订阅模式的工作方式,以及Producer、Consumer、Broker、Topic、Partition、Replica等核心组件之间的关系,并附集群部署关键配置与常用命令行操作。
2026-07-05 15:47:19
519
原创 Zookeeper入门到实战详解
在学习Flink、Kafka、HBase等大数据组件的过程中,Zookeeper几乎是绕不开的基础组件。它在集群中负责协调各节点的状态、配置同步、服务注册等工作。本文基于尚硅谷Zookeeper V3.3教程,系统梳理Zookeeper的核心知识点,帮你真正搞清楚Zookeeper到底是什么、怎么用、面试怎么答。
2026-07-03 10:01:56
916
原创 Flink运行时架构详解
学Flink,运行时架构是必须搞清楚的基础。只有真正理解了JobManager、TaskManager、Slot、并行度这些概念之间的关系,后面学任务提交、状态管理、Checkpoint才不会一头雾水。本文基于尚硅谷Flink1.17教程,系统梳理Flink运行时架构的核心知识点。
2026-06-11 19:16:07
517
原创 Flink部署模式详解
本文结合尚硅谷Flink1.17教程,梳理Standalone和YARN三种运行模式的原理与使用方式,帮助你真正搞清楚它们的区别。
2026-06-09 17:51:57
779
原创 Spark 行动算子(Action)全面解析
本文系统梳理 Spark 中的行动算子,涵盖触发机制、常用 API 分类、执行原理与实际使用场景,帮助你真正理解 Action 背后发生了什么。
2026-06-05 15:25:54
523
原创 Spark 转换算子(Transformation)全面解析
本文系统梳理 Spark 中的转换算子,涵盖惰性求值机制、常用 API 分类、宽窄依赖原理与典型使用场景。读完本篇,再看行动算子,整个 Spark 编程模型就通了。
2026-06-04 20:40:28
693
原创 PyCharm Community 2022 免费版创建 Django 项目(超详细教程)
本文详细介绍了如何在PyCharm Community 2022免费版中创建Django项目。由于社区版不直接支持Django项目创建,教程通过以下步骤实现:1)新建普通Python项目并创建虚拟环境;2)通过PyCharm安装Django;3)使用django-admin命令手动创建项目;4)通过虚拟环境启动服务。文章还提供了常见问题的解决方法,如找不到django-admin、模块导入错误等。最终成功运行Django默认页面,证明开发环境搭建完成,为使用免费版PyCharm进行Django开发提供了可行
2026-06-02 17:17:23
470
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅