- 博客(8)
- 收藏
- 关注
原创 python数据分析与应用
一、Python数据分析概述Python 是一种解释型、交互式的编程语言,其设计理念强调代码的可读性和简洁性。Python 的语法结构简单,支持面向对象、过程式和函数式三种编程范式,使得 Python 成为一种强大而灵活的编程语言。Python数据分析主要包括数据清洗、数据探索和数据可视化三个部分。数据清洗是数据分析的重要环节,主要是对数据进行预处理,包括缺失值处理、异常值处理、数据类型转换等。数据探索则是通过对数据进行初步分析,了解数据的分布和特征,为后续的数据分析提供基础。
2024-10-30 09:50:06
1030
原创 数据可视化概述
数据可视化科学可视化(Scientific Visualization)、 信息可视化(Information Visualization)和可视分析学(Visual Analytics)三个学科方向通常被看成可视化的三个主要分支。而将这三个分支整合在一起形成的新学科 “数据可视化”,这是可视化研究领域的新起点。——《数据可视化》广义的数据可视化涉及信息技术、自然科学、统计分析、图形学、交互、地理信息等多种学科。
2024-10-23 12:17:01
1064
原创 python数据分析与可视化
数据分析方面,常用的库有 pandas,它提供了高效的数据结构和数据操作方法,使得数据的读取、清理、转换等变得非常方便。1)Python 数据分析可以分为以下几个方面:数据清洗和预处理:这是数据分析的第一步,包括数据清理、缺失值处理、重复数据处理、异常数据处理、数据采样等。数据分析和可视化:这是数据分析的核心步骤,包括统计分析、数据建模、机器学习、数据可视化等。数据库操作:Python 可以连接多种数据库,对数据库进行查询、插入、更新、删除等操作。
2024-06-19 12:41:11
860
原创 MongoDB——副本集与分片
MongoDB复制是将数据同步在多个服务器的过程。复制提供了数据的冗余备份,并在多个服务器上存储数据副本,提高了数据的可用性, 并可以保证数据的安全性。复制还允许您从硬件故障和服务中断中恢复数据。什么是复制1保障数据的安全性2数据高可用性 (24*7)3灾难恢复4无需停机维护(如备份,重建索引,压缩)5分布式读取数据6MongoDB复制原理7mongodb的复制至少需要两个节点。其中一个是主节点,负责处理客户端请求,其余的都是从节点,负责复制主节点上的数据。
2024-04-23 16:14:10
1134
原创 Mongodb基础操作
MongoDB适用于高并发读写、数据量大、高可扩展性和高可用性且对事务要求不高的场景,常用的应用场景有以下:1. 社交应用:可以使用MongoDB来存储用户信息和朋友圈动态,实现附近的人等功能。2. 游戏:使用MongoDB来存储用户基础信息,以及游戏中的积分、等级以及装备等用户关联信息。3. 物流:使用MongoDB存储订单信息,以及物流轨迹信息。4. 物联网:使用MongoDB存储各设备信息,以及个设备的产生的日志信息,以便于对设备进行分析、维护和预警。基础操作。
2024-04-22 19:05:44
401
原创 mongodb副本集
副本节点的主要任务是从主节点复制数据,以保持与主节点的数据同步。初始化同步发生在副本节点加入副本集时,副本节点将从主节点复制全部数据。持续同步发生在初始化同步完成后,副本节点定期从主节点复制新的数据。如果主节点宕机,副本节点将自动发起新的选主过程,选举出新的主节点。还有一种初始化的方法,就是先只初始化一个节点,然后再通过命令rs.add("ip:port") 来添加从节点或。1. 高可用性:副本集提供了自动故障转移功能,确保在主节点宕机时,副本节点能够自动接替主节点,继续提供服务。
2024-04-22 18:35:00
922
原创 MongoDB分片部署
fgOS:win10MongoDB:4.4.24从图中可以看出,分片集群中主要由三个部分组成,即分片服务器( Shard )、路由服务器( Mongos )以及配置服务器( Config Server )组成。其中,分片服务器有三个,即 Shard1 、Shard2 、 Shard3 ;路由服务器有两个,即 Mongos1 和 Mongos2 ;配置服务器有三个,即主、副、副。主要有如下所述三个主要组件:Shard: 用于存储实际的数据块,实际生产环境中一个shard server 角色可由几台机器
2024-04-22 18:12:01
1279
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人