- 博客(12)
- 收藏
- 关注
RSS订阅原创 《Spark全栈开发实战：从SQL优化到集群调优》
代码规范scala// 好的命名示例// 避免的命名异常处理scalatry {} catch {logger.error("表不存在", e)logger.error("执行失败", e)
2025-06-25 15:38:18
834
原创 基于SpringBoot+Vue+MySQL的学生管理系统开发全流程
前后端分离架构的优势：前后端可以并行开发前端可以使用更现代化的框架后端只需关注API设计使用心得：简化了大部分CRUD操作需要特别注意分页插件的配置LambdaQueryWrapper比普通Wrapper更类型安全Vue3组合式API体验：比Options API更灵活逻辑关注点更集中需要适应新的开发模式。
2025-06-25 15:18:19
1093
原创 高级Python爬虫实战：异步处理、反反爬与智能解析系统
本文介绍了基于Python技术栈构建的电商价格监控系统实现方案。项目采用异步爬虫架构(Asyncio/Aiohttp)，实现150req/s的高效采集，包含智能解析器自动适配不同页面结构，集成代理池、随机UA等反反爬策略，并通过数据管道进行清洗验证。系统支持分布式扩展(Scrapy-Redis)、动态渲染(Pyppeteer)等高级特性，提供完整的监控和错误处理机制。技术栈涵盖BeautifulSoup、Redis、Pandas等工具，项目结构规范，代码已开源。
2025-06-20 12:01:25
902
原创 《使用 Echarts 在 Visual Studio 中绘制基础图形全攻略》
通过以上几个在 Visual Studio 环境下使用 Echarts 绘制基础图形的示例，我们可以看到 Echarts 的便捷性和强大之处。大家可以根据实际的项目需求，进一步深入学习 Echarts 的更多高级配置，如添加动画效果、设置图表交互功能等，让数据可视化更加生动、丰富，更好地呈现数据背后的信息。希望这篇博客能够帮助大家顺利开启 Echarts 可视化之旅，欢迎大家在评论区交流分享经验和遇到的问题呀！在博客中添加代码，展示如何使用Echarts绘制基础图形推荐一些优秀的优快云博客文章。
2024-12-23 09:03:09
791
原创 Hadoop 集群搭建与配置：从入门到精通
搭建和配置 Hadoop 集群虽然步骤较多，但只要按照本文的步骤细心操作，就能够成功搭建起自己的 Hadoop 集群。这为后续的大数据处理和分析工作奠定了坚实的基础，开启了大数据之旅的重要一步。随着对 Hadoop 使用的深入，还可以根据实际需求进一步优化集群配置，提高集群性能。
2024-11-19 18:33:38
1101
原创 深入解析 MapReduce 应用：从原理到实践的全面探索
MapReduce 的 Map 阶段是数据处理的起始点。在这个阶段，输入数据被分割成多个小块，这些小块被并行地分配到不同的计算节点。每个节点上的 Map 函数会对分配到的数据块进行处理。例如，对于一个文本文件处理任务，Map 函数可能会将每行文本拆分成单词，并为每个单词生成一个键值对，其中键是单词，值可能是该单词在该行中的出现次数（初始化为 1）。这一过程使得数据从原始的格式转化为更便于后续处理的形式，为数据的分布式计算奠定基础。
2024-11-19 18:32:44
526
原创 大数据分析与应用
本项目成功构建了多元线性回归模型，通过对数据的读取、预处理、模型构建、训练、评估和新数据预测等一系列步骤，实现了对商品价格的预测。在数据预处理阶段，对数据进行了基本的统计分析和缺失值检查，但在缺失值处理方面可以进一步优化。在模型选择上，多元线性回归模型在一定程度上能够捕捉数据中的线性关系，但对于复杂的非线性关系可能表现不佳。模型评估指标 RMSE 为 412.52890843856926，表明模型有一定的预测能力，但仍有提升空间。
2024-10-31 11:08:11
761
原创 python数据分析与处理
Python是一种高级编程语言，因其易读性、简洁的语法和强大的库支持，在数据分析领域非常流行。数据分析是指使用统计学、机器学习、数据可视化等方法对数据进行处理、分析和解释，以提取有价值的信息和洞察力。Python提供了丰富的工具和库，使得数据分析工作更加高效和便捷。
2024-06-19 19:19:24
1019
原创 MongoDB副本集部署（windows）
节点启动可能会遇到问题，主要检查端口是否被占用，和路径配置问题。若都没问题则考虑以管理员身份启动cmd。说明：第一个“_id”为副本集名称，“priority”为优先级，数字越大，优先级越高。本教程演示mongodb4.4 副本集部署（一主两从，伪分布式）（data）和日志文件（log）。（明明是主节点，但却显示从节点）每一个节点（实例）都创建对应的。1.切换到admin数据库。说明副本集群部署成功。
2024-04-23 11:08:01
614
原创 MongoDB基本操作
恭喜。您现在已经了解如何使用 JSON 文档构建数据。MongoDB是一个开源文档数据库，提供高性能，高可用性和自动扩展，旨在为WEB应用提供可扩展的高性能数据存储解决方案。1 基于分布式文件存储数据库（就是一个数据库2 C++语言编写3 支持的数据结构非常松散，是类似json的bson格式（后期插入修改数据写JSONMongoDB中的记录是一个文档，它是由字段和值(key=>value)对组成的数据结构。MongoDB文档与JSON对象相似。字段的值可能包括其他文档，数组和文档数组。
2024-04-23 10:38:50
1532
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人