- 博客(14)
- 收藏
- 关注
RSS订阅原创 Linux安装python3
Python 3是一种高级编程语言，由GuidovanRossum于2008年发布。它是Python编程语言的最新版本，是Python 2的升级版本。Python 3提供了很多新的功能和改进，使得程序员可以更加快速、简便地编写高质量的代码。pip是一个Python包管理器，用于安装、升级、卸载Python包（即模块或库）。它能够自动处理依赖关系，并从Python Package Index (PyPI) 下载并安装包。简而言之，pip是一个用于Python包管理的工具。
2023-11-04 15:48:09
502
1
原创 kafka安装配置
Kafka是一种消息队列，主要用来处理大量数据状态下的消息队列，一般用来做日志的处理。既然是消息队列，那么Kafka也就拥有消息队列的相应的特性了
2023-10-15 18:07:14
353
1
原创 HDFS之LZO配置（一）
hadoop本身并不支持lzo压缩，故需要使用twitter提供的hadoop-lzo开源组件。hadoop-lzo需依赖hadoop和lzo进行编译。
2023-10-08 13:01:14
681
1
原创 VMware出现不可恢复错误和另一种克隆方式
centos 7 启动后，终端执行重启命令 reboot ，之后VMware即提示“VMware Workstation 不可恢复错误: (vcpu-1)Exception 0xc0000005 (access violation) has occurred”。（如图）
2023-10-05 02:14:55
1005
原创 配置xsync（详解）
使用xsync命令同步一个文件，会只将这个文件，同步到其他服务器的相同路径下面（没有的目录与文件会自动创建）使用xsync命令同步一个目录，会将这个目录下面的所有文件以及子目录，同步到其他服务器相同路径下面（没有的目录与文件会自动创建）多次同步某一个文件或者目录，第一次全部同步，第二次以及之后就只会同步里面发生更改的部分，未更改的部分不会重复同步
2023-09-27 11:03:21
2924
1
原创 数据仓库简介
反向代理：我们访问淘宝的时候，淘宝内部肯定不是只有一台服务器，它的内部有很多台服务器，那我们进行访问的时候，因为服务器中间session不共享，那我们是不是在服务器之间访问需要频繁登录，那这个时候淘宝搭建一个过渡服务器，对我们是没有任何影响的，我们是登录一次，但是访问所有，这种情况就是 反向代理。虽然数据仓库的用户不能修改数据，但并不是说数据仓库的数据是永远不变的。数据仓库并不是数据的最终的地方，而是为数据到达终点做好准备，这些准备包括对数据的：清洗、转义、分类、重组、合并、拆分、统计等等。
2023-09-23 15:59:12
210
1
原创 Hadoop生态架构及集群搭建（一）
Apache Hadoop软件库是一个框架，允许使用简单的编程模型跨计算机集群对大型数据集进行分布式处理。它旨在从单个服务器扩展到数千台机器，每台机器都提供本地计算和存储。库本身不是依靠硬件来提供高可用性，而是旨在检测和处理应用程序层的故障，因此在计算机群集之上提供高可用性服务，每个计算机群集都可能容易出现故障。
2023-09-14 19:27:04
233
1
原创 Hadoop集群之修改静态IP和jdk安装（超详细）
避免后续操作，因IP地址改变，导致集群通信失败，节点之间无法正常访问，所以要将系统IP状态改为固定IP。ping自己设的ip，出现以下情况说明连接成功。刷新profile文件，并查看java版本。到这里本篇文章就结束啦！ifconfig或者ip addr。文件夹里加入以下内容，保存并退出。（2） 按这个填写后，点击连接。进入softwares文件夹。出现以下则远程连接成功。输入命令,并查看状态。
2023-09-05 23:19:41
1114
1
原创 常见Hadoop启动和停止脚本
单独启动SecondaryNameNode守护进程。单独停止SecondaryNameNode守护进程。启动整个Hadoop集群，包括HDFS和YARN。停止整个Hadoop集群。单独启动ResourceManager守护进程。单独停止ResourceManager守护进程。单独启动NodeManager守护进程。单独停止NodeManager守护进程。单独启动NameNode守护进程。单独停止NameNode守护进程。单独启动DataNode守护进程。单独停止DataNode守护进程。
2023-09-05 20:38:45
153
原创 Centos 7搭建集群之关闭防火墙
集群是通过内网搭建的，若内网开启防火墙，内网集群通信则会受到防火墙的干扰。所以需要关闭集群中所有节点的防火墙。
2023-09-02 10:53:34
317
原创 MySQL配置文件my.ini里sql_mode范围限制SQL语句
which is not functionally dependent on columns in GROuP BY clause; this is incompatible with sql_mode=only_full_group_by
2023-04-11 14:31:35
585
1
原创 关于idea配置Spring后，在pom.xml中“＜artifactId＞spring-boot-maven-plugin＜/artifactId＞”出现报红现象
spring-boot-maven-plugin报错解决方法
2023-02-26 02:26:31
4514
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人