- 博客(8)
- 收藏
- 关注
RSS订阅原创 数据读取、字符串类型的转换
使用python的csv库、pandas库和numpy库进行数据的读取，sklearn.preprocess包中的数据进行字符串类型的转换
2024-12-08 16:25:58
981
原创 scipy模块的简介与使用
scipy作为世界上著名的，开源的高级科学计算库，从20世纪90年代发展到现在已经每年有千万的下载量。Scipy是基于Numpy构建的一个集成了多种数学算法和方便的函数的Python模块。通过给用户提供一些高层的命令和类来操作和可视化数据，SciPy在python交互式会话中，大大增加了操作和可视化数据的能力。通过SciPy，Python的交互式会话变成了一个数据处理和一个系统原型system-prototyping环境，可以与MATLAB、IDL、Octave、R-Lab和SciLab等系统相匹敌。
2024-09-21 17:47:40
943
原创 矩阵转置的数学与代码实现
对于任意的m×n矩阵A，其转置矩阵是一个n×m的举证，其中的第 i 行第 j 列的元素是A的第j 行第 i 列的元素。
2024-09-13 22:35:01
1106
2
原创 Linux上搭建完全分布式zookeeper和hbase
在一般情况下我们学习安装zookeeper和hbase是没有服务器用来练习部署的，这里我们采用在VMware上来模拟在虚拟机上安装部署zookeeper和hbase。由于zookeeper和hbase是基于Hadoop进行开发部署的，所以我们在部署完全分布式zookeeper和hbase之前，我们需要部署相关的Hadoop环境，这里我们可以在csdn官网里面搜索“Linux上部署完全分布式Hadoop集群”来查看一些大神博客发的Linux上Hadoop的部署，当然如果觉得麻烦了也可以访问。
2024-05-26 21:08:30
2008
原创 VMware上基于centos系统完全分布式Hadoop集群的搭建详解
这里的防火墙是需要关闭的，这是因为我们搭建的是完全分布式系统，需要多个节点来进行通信，如果不关闭后序可能出现防火墙拦截我们Hadoop的通讯信息，这里不需要害怕防火墙关闭导致有病毒传入或者非法用户的入侵，在后续我们会在基于Hadoop集群的外围搭建项目的防火墙。启动创建的虚拟机，点击界面的开启此虚拟机。执行下面的命令来进入到系统的IP配置文件中，如果是其他的Linux系统，配置文件的配置是不相同的，但里面的文件是一致的，这里就讲述centos系统的IP配置文件的目录。
2024-05-25 00:12:58
2282
原创 centos7上安装MySQL并配置Hive
这里的jar包已经在前面下载MySQL的时候已经下载了，这里就移动到下载jar包的目录下进行jar包的解压。1.启动Hadoop的进行，hive是基于Hadoop的来进行搭建的，他的数据时存储在hdfs中的，元数据存储在MySQL中。4. 进入到hive后根据自己的版本选择所要下载的hive版本，这里我们要下载的是hive-3.1.3版本。4.进入MySQL的社区下载，下载MySQL和jar包，需要注意的是hive的配置MySQL。这里我们选择下载的是MySQL的8.0.26。
2024-05-23 21:16:48
2462
5
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人