- 博客(132)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 LVM扩展磁盘容量
初始状态（硬盘已经加上）lsblk在这里插入图片描述总体步骤物理卷（PV）卷组（VG）/dev/sdX/dev/sdX1pvdisplay/dev/sdX1resize2fsxfs_growfs。
2023-07-23 21:20:30
515
原创 postgresql 从一张表中查询出记录然后批量插入到另一张表中
postgresql 从一张表中查询出记录然后批量插入到另一张表中，pgsql批量插入
2022-05-27 16:59:51
6651
原创 Hive 简介与安装
Hive是构建在Hadoop之上的数据仓库平台- Hive是一个SQL解析引擎,它将SQL语句转译成MapReduce作业并在Hadoop上执行。- Hive表是HDFS的一个文件目录，一个表名对应一个目录名，如果有分区表的话，则分区值对应子目录名。- 其实质将hdfs文件内容变成了表的映射，然后通过mr查询。- 底层存储是HDFS,中间执行时MR，或可视为中转代理。
2021-12-29 13:23:13
1528
原创 软件测试之黑盒测试
黑盒测试方法等价类划分方法将程序可能的输入数据分成若干个子集，从每个子集选取一个代表性的数据作为测试用例，等价类是某个输入域的子集，在该子集中每个输入数据的作用是等效的分为有效等价类和无效等价类。有效等价类是有意义的、合理的输入数据，可检查程序是否实现了规格说明中所规定的功能和性能。无效等价类与有效等价类的意义相反在分析需求规格说明的基础上划分等价类，列出等价类表设计测试用例时，要同时考虑这两种等价类。因为软件不仅要能接收合理的数据，也要能经受意外的考验。确定等价类的方法在输入条件规定了取值
2021-12-28 22:34:52
2951
原创 hadoop生态
hadoop生态圈HDFS（分布式存储系统）Sqoop（数据库导入导出工具）hadoop用于数据画像特征向量防止维度爆炸，向量降维数据矩阵，获取样本库通过神经网络（权重不同），获取数据结果，冲突学习，控制误差，递归获取权重体系，优化计算复杂性（分布式，切割数据，通过并行计算优化时间）...
2021-12-28 22:33:23
157
原创 CentOS中MySQL5.7安装
根据Mysql官网下载提供的链接【mysql安装包下载（1-4）】，可先下载到主机后转存至虚拟机，或直接在虚拟机通过wget下载
2021-12-28 22:04:17
874
原创 Linux安装xrdp，实现远程桌面登陆
Xrdp是一个开源工具，允许用户通过Windows RDP访问Linux远程桌面。 除了Windows RDP之外，xrdp工具还接受来自其他RDP客户端的连接，如FreeRDP，rdesktop和NeutrinoRDP。 Xrdp现在支持TLS安全层。
2021-12-01 10:58:34
19771
原创 Git :fatal: refusing to merge unrelated histories解决
今天本地创建了一个仓库（有README)，把本地仓库和Github上关联以后，发现git pull，git feach提醒fatal: refusing to merge unrelated histories原因是两个分支是两个不同的版本，具有不同的提交历史解决办法git pull origin master --allow-unrelated-histories...
2021-11-17 08:40:09
1380
原创 Jetbrains-IDEA 安装 hadoop 可视化插件
打开idea软件，找到菜单项的File ----> Settings ----> Plugins ,在输入框内搜索 “hadoop” 或 “ big data ”,如图所示若在idea上下载很慢，可以考虑 到 官网（https://plugins.jetbrains.com/）下载离线插件安装包，通过磁盘安装方式安装工具。下载安装后需重启IDEA，配置big data toolsc. 测试链接成功后，点击确定即可，效果图如下所示...
2021-11-12 14:16:34
2337
原创 maven源国内镜像
<mirror> <id>aliyunmaven</id> <mirrorOf>*</mirrorOf> <name>阿里云公共仓库</name> <url>https://maven.aliyun.com/repository/public</url> </mirror> <mirror> <id>huaweiclo
2021-11-11 10:59:55
1008
原创 hadoop shell 指令介绍
shell是在控制台执行的脚本代码，它是客户端访问HDFS的方式之一。## 它是由两大部分组成，a. 一个是Hadoop头部指令（特定的hdfs关键字）可以有三种写法，我们一般使用 hadoop fs 。b. 一个是具体的文件执行指令（与Linux操作指令类似,指令也分为两大部分，一个是保留关键字（作为执行事务）；另一个为参数项，即操作对象），比如 mkdir /tmp 表示在根目录下创建tmp的新目录
2021-11-05 16:52:24
1133
转载 HDFS概念及基本原理
HDFS ----- Hadoop Distributed File System （hadoop 分布式文件系统）概念： 它是一个分布式集群，可以支持海量数据存储，hadoop框架的核心之一以及重要组件
2021-11-05 16:50:49
1273
1
转载 Hadoop集群搭建与配置
hadoop属于分布式技术 框架，需要搭设集群环境，由于物理机有限，通过虚拟化技术可以实现集群节点的创建；hadoop应用的生产环境多使用Linux；社区资源多，学习方便；工具支持多，hadoop属于开源项目，与linux有共同点，有些开源工具方便使用；
2021-11-05 14:50:57
675
原创 centos7使用iptables管理端口
安装iptables-services ：yum install iptables-services 修改配置年间进入下面目录进行修改：/etc/sysconfig/iptables查看对外开放的端口状态查询已开放的端口 netstat -anp查询指定端口是否已开 firewall-cmd --query-port=666/tcp提示 yes，表示开启；no表示未开启。对外开发端口查看想开的端口是否已开：firewall-cmd --query-port=6379/tcp
2021-10-28 10:39:47
474
原创 linux使用chown将文件授权给用户
我们可以使用chown命令，ch这里代表change（改变）的意思，own代表英文单词的owner(拥有者)，连在一起就是 change owner ,改变某个文件或者文件夹的拥有者。一般只有root用户有使用这个命令的权限，也是经常会使用到的一个命令。问题来了！如果我要把一个文件夹及其所有子内容授权给mysql用户，我该如何操作呢？【解决方案】我们可以加 -R 参数来实现-R : 对目前目录下的所有档案与子目录进行相同的拥有者变更(即以递回的方式逐个变更)chown -R [username]
2021-10-28 08:00:10
5697
yapi中加入doc导出组件的ykit.config.js配置
2022-05-24
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人