- 博客(13)
- 收藏
- 关注
原创 Spark应用开发--WordCount实战
RDD是弹性分布式数据集(Resilient Distributed Dataset, RDD)英文缩写,它是Spark编程中。RDD具有(Spark的计算过程可以简单抽象为对RDD的创建、转换操作和行动操作的过程)等特点。
2025-06-23 11:48:29
1048
原创 Spring Boot Web 应用开发
Spring Boot极大地简化了Java Web应用的开发流程,使开发者能够专注于业务逻辑而非框架配置。通过本文的介绍,希望读者能够掌握Spring Boot Web开发的核心要点,构建出高性能、易维护的Web应用程序。在实际项目中,建议结合具体业务场景,灵活运用Spring Boot提供的各种特性,并持续关注Spring生态的最新发展,如Spring Native、Spring GraphQL等新兴技术。
2025-06-15 11:54:46
979
原创 Spring Boot Web开发
Spring Boot作为当前Java领域最流行的Web应用开发框架,以其"约定优于配置"的理念和快速开发能力,赢得了广大开发者的青睐。本文将全面介绍Spring Boot Web应用开发的核心知识体系,帮助开发者快速构建高效、可扩展的Web应用程序。@BeanSpring Boot极大地简化了Java Web应用的开发流程,使开发者能够专注于业务逻辑而非框架配置。通过本文的介绍,希望读者能够掌握Spring Boot Web开发的核心要点,构建出高性能、易维护的Web应用程序。
2025-06-15 11:42:35
1013
1
原创 网络爬虫基础
网络爬虫(Web Crawler)又称网络蜘蛛、网络机器人,它是一种按照一定规则,自动浏览万维网的程序或脚本。通俗地讲,网络爬虫就是一个模拟真人浏览万维网行为的程序,这个程序可以代替真人自动请求万维网,并接收从万维网返回的数据。与真人浏览万维网相比,网络爬虫能够浏览的信息量更大,效率也更高。了社会生活的众多领域。作为一种自动采集网页数据的技术,很多人其实并不清楚网络爬虫具体能应用到什么场景。事实上,大多数依赖数据支撑的应用场景都离不开网络爬虫,包括搜索引擎、舆情分析与监测、聚合平台、出行类软件等。
2025-06-09 11:24:12
2024
原创 Hadoop概述及分析
Hadoop适用于大规模数据处理、实时数据处理、大规模图计算、机器学习和数据挖掘、日志处理和监控以及数据存储和备份等多个应用场景。
2024-10-30 16:58:28
1121
原创 Python分类分析综述
在这里讲一下Python中分类分析中的支持向量机与逻辑回归一、pandas是什么?示例:pandas 是基于NumPy 的一种工具,该工具是为了解决数据分析任务而创建的。支持向量机(support vector machine,SVM)是一种二类分类模型。它的基本模型是定义在特征空间上的间隔最大的线性分类器,间隔最大使它有别于感知机;支持向量机还包括核技巧,这使它成为实质上的非线性分类器。
2024-10-30 15:17:53
657
原创 数据可视化—螺蛳粉销售数据
项目需要用到如下一些数据 EchartsECharts 本质上是一个JavaScript库,使用时需要下载或者从网上引入。在官网的下载页面中下载:Apache ECharts,可从资源中下载Python的Flask框架是一种轻量级的web开发框架。本次任务我们将学习Flask框架的基本应用方法,使用Flask框架来搭建一个简易的数据可视化网页。在做任务之前需要在cmd中执行以下三个安装:pip install flaskFlask 是一个用 Python 编写的轻量级 Web 应用框架。它是由 Armin
2024-10-25 16:21:33
1152
原创 房地产数据分析(python)
new_hourseType_count['其它']=hourseType_count[hourseType_count
2024-04-28 20:44:40
1052
1
原创 MongoDB副本集、分片综合应用
分片主要是将数据进行划分后,将它们分别存放于不同机器上的过程。通过使用分片可以实现降低单个机器的压力和处理更大的数据负载功能。分片与副本集主要区别在于,分片是每个节点存储数据的不同片段,而副本集是每个节点存储数据的相同副本。重新打开mongodb服务,即可像原来一样使用,但是数据存储方式和原来已经不一样了,变成了分布式的分片存储。
2024-04-23 20:24:45
1866
原创 MongoDB数据库操作
语法:use DATABASE NAME(text):use:用于切换/创建数据库,若不存在则创建,否则切换到指定数据库。DATABASE_NAME:数据库名称。执行 use articledb命令,创建数据库articledb。
2024-04-23 16:30:15
1648
原创 redis安装部署
Remote Dictionary Server,简称Redis,即远程字典服务器,它是一个开源的、高性能的、基于键值对的缓存与存储数据库,并且通过提供多种键值数据结构来适应不同场景下的缓存与存储需求。Redis数据库是基于ANSI C语言编写开发的,并且提供了多种语言API,例如Java、C/C++、C#、PHP、JavaScript、Perl、Python及Ruby等语言。
2024-04-23 15:40:48
493
原创 MongoDB分片部署数据库
哈希分片类似于范围分片,两者的区别在于范围分片是MongoDB根据分片键的值直接进行范围划分,而哈希分片则先将分片键的值进行哈希计算后,然后对这些哈希值进行范围划分,从而使得每个分片都包含了哈希值在一定范围内的数据;注:mongos: mongos就是一个路由服务器,它会根据管理员设置的“片键”将数据分摊到自己管理的mongod集群,数据和片的对应关系以及相应的配置信息保存在"config服务器"上。上述指令指定分片集合为c2,分片字段为“id”,分片形式是哈希分片,若改成“1”则为范围分片。
2024-04-16 17:34:04
2091
原创 MongoDB副本集部署
将之前配置好的mongodb里的bin复制至mongodb1中,在mongodb1中新建db文件夹和log文件夹存在对应的数据库数据以及日志数据。
2024-04-09 16:54:55
663
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅