- 博客(13)
- 收藏
- 关注
原创 【Python爬虫实战】多技术解析豆瓣电影Top250:Ajax+正则+BeautifulSoup全攻略
在数据获取与分析领域,网络爬虫技术扮演着重要角色。本文将带领大家使用Python实现一个功能完整的电影数据爬虫,通过Ajax请求、正则表达式和三种方式解析豆瓣电影Top250数据,并对数据进行可视化分析。技术栈请求库:requests解析库:BeautifulSoup、re数据处理:pandas可视化:matplotlib、pyecharts:适合结构化HTML解析正则表达式:高效提取特定模式数据Ajax请求:处理动态加载内容。
2025-06-29 01:15:02
894
原创 Spring Boot 入门学习
1. Spring Boot是由Pivotal团队提供的基于Spring 的全新框架,旨在简化Spring 应用的初始搭建和开发过程。2. Spring Boot是所有基于Spring 开发项目的起点。3. Spring Boot就是尽可能地简化应用开发的门槛,让应用开发、测试、部署变得更加简单。Spring Boot特点1. 遵循“约定优于配置”的原则,只需要很少的配置或使用默认的配置。2. 能够使用内嵌的Tomcat 、Jetty服务器,不需要部署war文件。
2025-06-28 16:55:18
929
1
原创 电子电工——数制及数制转换
数制是指多位数码中每一位的构成方法以及从低位到高位的进位规则。数制系统中常用的数制有:十进制二进制八进制十六进制数制基数数码计数规则计算机中英文表达十进制100~9逢十进一D二进制20、1逢二进一B八进制80~7逢八进一O十六进制160~9ABCDEF逢十六进一HN进制N0~(N-1)逢N进一例:表2 不同进制数的对照举例十进制 (D二进制 (B)八进制(O)十六进制 (H)000000001000101120010。
2024-12-12 23:18:24
1724
原创 数据可视化——Web表单
提供了对所有表单免受跨站请求伪造()攻击的技术支持。跨站请求伪造,也被称为“”或者“”,通常缩写为或者,是一种对网站的恶意利用。攻击者盗用了用户的身份,以用户的名义发送恶意请求。对服务器来说这个请求是完全合法的,但是却完成了攻击者所期望的一个操作,比如以用户的名义发送邮件、消息,盗取用户的账号,添加系统管理员,甚至于购买商品、虚拟货币转账等。启动保护,可以在其中SECRET_KEY用来建立加密的令牌,用于验证Form表单提交,在编写应用程序时,可以尽可能设置复杂一些,这样恶意攻击者很难猜到密钥值。
2024-11-21 19:40:31
738
原创 管理多个MapReduce任务
Hadoop是一个多任务系统,可以同时为多个用户、多个作业处理多个数据集。用户可以在本机浏览器的地址栏中输入 "http://master:8088/" 并按Enter键,打开Haddop集群的资源管理器的控制服务主界面,对提交到Hadoop集群上的多个MapReduce任务进行管理。
2024-11-19 21:52:11
1114
1
原创 大数据分析与应用——DBSCAN算法
DBSCAN (Density-Based Spatial Clustering of Applications with Noise)是一种非常著名的基于密度的聚类算法。该算法将样本聚集密集的区域划分为簇,可实现在有噪声的样本空间中发现任意形状的簇。
2024-10-15 19:57:40
2081
原创 关于接口的学习收获
接口一般以"I"开头。[访问修饰符] interface 接口名[extends 接口1, 接口2, ...] {常量抽象方法public abstract class 类名 [extends 基类]{成员变量构造方法getter与setter方法普通方法.....abstract 方法接口抽象类区别只包含常量及抽象方法 (JDK7之前)可以包含有一般成员,也可以包含有抽象方法。成员默认为public的成员可以是私有的、受保护的、内部的或公有的变量默认为final的。
2024-06-18 21:08:27
2034
原创 副本集部署
副本集(Replica Set)是一组MongoDB实例保持其相同数据集的集群,由一个主(Primary)服务器和多个副本(Secondary)服务器构成。通过复制(Replication)将数据的更新由主服务器推送到其它副本服务器上,在一定的延迟之后,达到每个MongoDB实例维护相同的数据集副本。副本集通过维护冗余的数据库副本、读写分离和故障自动转移的功能,摆脱数据库在使用过程中出现的环境故障影响,是所有生产环境部署的基础。
2024-06-05 10:39:01
1563
原创 MongoDB 分片集群部署
分片(Sharding)技术是开发人员用来提高数据存储和数据读写吞吐量常用的技术之一。简单来说,分片主要是将数据进行划分后,将它们分别存放与不同机器上的过程。通过使用分片可以简单降低单个机器的压力和处理更大的数据负载功能。分片与副本集主要区别在于,分片是每个节点存储数据得到不同片段,而副本集是每个节点存储数据的相同副本。
2024-06-04 21:37:01
1570
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅