- 博客(14)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 Ubuntu搭建Hadoop集群的详细操作流程
Ubuntu搭建Hadoop集群的详细操作流程一、准备工作若还没安装虚拟机可参考：VMVMware14虚拟机安装程没安装Ubuntu的可参考：Ubuntu的安装教程Haddop的下载可以到https://mirrors.cnnic.cn/apache/hadoop/common/这个网址下载，下载的时候版本是选择Hadoop2.x.版本。格式文件选择hadoop-2.x.y.tar.g...
2020-04-29 16:18:19
12731
9
原创 对Hadoop认识与安装
对Hadoop认识与安装1.简介• Hadoop是Apache软件基金会旗下的一个开源分布式计算平台，为用户提供了系统 底层细节透明的分布式基础架构•Hadoop是基于Java语言开发的，具有很好的跨平台特性，并且可以部署在廉价的计 算机集群中•Hadoop的核心是分布式文件系统HDFS（Hadoop Distributed File System）和 MapReduce•Hadoop...
2020-04-29 14:26:39
741
原创 机器学习之基于文本内容的垃圾短信识别
机器学习之基于文本内容的垃圾短信识别1.背景与目标2.数据探索3.数据预处理4.文本的向量表示5.模型训练与评价1.背景与目标我国目前的垃圾短信现状：垃圾短信黑色利益链缺乏法律保护短信类型日益多变案例目标：垃圾短信识别。基于短信文本内容，建立识别模型，准确地识别出垃圾短信，以解决垃圾短信过滤问题2.数据探索总体流程数据展示*观察数据，请思考：建模前需...
2020-04-21 16:16:21
18040
7
原创 机器学习之基于水色图像的水质评价
机器学习之基于水色图像的水质评价一、案例背景水质等级最高为10分，请为以下水质打分：水产养殖水产养殖的关键因素之一是水质养殖水体生态系统的平衡状况可通过水质颜色体现传统水质监控的关键：行家依赖人（专家）的局限性对个人经验要求高存在主观性引起的观察性偏差观察结果的可比性、可重复性不高，不易推广应用在线水质监测1.计算机视觉2.数字图像处理技术3.专家经验（专...
2020-04-19 22:41:47
5684
3
原创 CentOS7无法进入图像界面的解决方法
CentOS7无法进入图像界面的解决操作问题：在CenOS7安装完成后，在命令行下输入init 5 /startx无法进入图像界面原因：安装centOS7服务器版本的时候，系统默认是不会安装GUI的图形界面程序，这个需要手动安装CentOS7 Gnome GUI包。解决：在安装完CentOS7和正常联网情况下1.以命令yum检查yum是否可正常使用2.以命令 yum groupinst...
2020-04-12 21:20:37
13625
原创 Vi编辑文件无法保存退出的解决方法
Vi编辑文件无法保存退出的解决方法问题：在xshell下用vi Test.scala编辑完文件后却无法保存退出，如下原因：没有具备root权限解决方法：第一种：：w!!直接保存并退出 或者 ：wq!!第二种：强制退出后，用sudo vi +文件重新编辑，此时便是以root权限进行修改文件，可以正常保存并退出第三：用此命令进行:w !sudo tee %进行保存退出...
2020-04-12 21:11:16
6866
2
原创 使用Xshell的rz命令上传文件失败的解决方法
使用Xshell的rz命令上传文件失败的解决方法第一种：在home目录下rz上传文件失败，如下：原因：当前用户不具备权限解决：用 sudo rz 上传即可成功第二种：对于文件大的rz上传失败的话，用 rz -be 进行上传因为如果用不带参数的rz命令上传大文件时，常常上传一半就断掉了，很可能是rz以为上传的流中包含某些特殊控制字符，造成rz提前退出。...
2020-04-12 20:46:51
14033
3
原创 大数据分析技术--第2章Scala语言基础
第2章Scala语言基础2.1 Scala语言概述2.2 Scala基础知识2.3 Scala面向对象编程基础2.4 Scala函数式编程基础2.1 Scala语言概述2.1.1 计算机的缘起2.1.2 编程范式2.1.3 Scala简介2.1.1 计算机的缘起数学家阿隆佐•邱奇(Alonzo Church)设计了“λ演算”，这是一套用于研究函数定义、函数应用和递归的形式系统...
2020-04-12 15:04:07
2179
原创 Docker搭建WordPress---搭建属于自己的个人博客
Docker搭建WordPress—搭建属于自己的个人博客使用docker部署动态博客，使用到的数据库是MySQL，使用到的博客框架是wordpress。一、安装Docker：Docker属于Linux容器的一种封装，提供简单易用的容器使用接口。Docker将应用程序与该程序的依赖，打包在一个文件里面。运行这个文件，就会生成一个虚拟容器。程序在这个虚拟容器里运行，就好像在真实的物理机上运行一...
2020-04-06 17:09:39
4220
原创 使用Xshell进行远程连接Ubuntu
使用xshell连接Ubuntu1.Ubuntu的安装ifconfig：查看虚拟机的ip地址注意，由于xshell远程连接ubuntu是通过ssh协议的，所以，确保ubuntu安装ssh服务器：输入以下命令进行安装远程ssh服务sudo apt-get install openssh-server若没有ssh，需要执行sudo apt-get install ssh2.、xshel...
2020-04-06 15:40:59
1667
1
原创 关于Ubuntu的联网操作
关于Ubuntu的联网操作一、网络配置打开虚拟机编辑上的虚拟网络编辑器：VMnet8(NAT模式)----子网IP设置为：192.168.100.0----NAT设置：网关改为192.168.100.2—确定----去掉使用DHCP选项开始菜单->运行->services.msc或从控制面板中找到“服务”一项打开如下图所示，找到以vmware开头的服务，确保都启用...
2020-04-06 14:54:27
10308
3
原创 关于Ubuntu的下载与安装的详细操作过程
关于Ubuntu的下载与安装的详细操作过程一、下载好镜像可以点击此链接http://mirrors.aliyun.com/ubuntu-releases/16.04/下载你所需要的镜像，而这里的话我下载的镜像是这个ubuntu-16.04.6-desktop-amd64.iso。二、开始安装1.新建一个虚拟机->选择自定义->下一步2.默认->下一步3.稍后安装操...
2020-04-06 14:35:37
10569
原创 搭建Hadoop时Slave节点没出现DateNode进程的原因
搭建Hadoop时Slave节点没出现DateNode进程的原因正确的Hadoop下的Master、Slave节点jps后会出现但当我关闭集群后重新用hdfs namenode -format进行文件格式后，重新启动集群，Slave节点却jps不到DataNone原因：hdfs强制性多次初始化数据，会导致VERSION里面的nameid，clusterID，blockpoolID变化，...
2020-04-06 00:49:17
9073
7
原创 CentOS7搭建Hadoop集群的详细操作流程
CentOS7搭建Hadoop集群的详细操作流程一、准备工作若还没安装虚拟机可参考：VMVMware14虚拟机安装程没安装CentOS的可参考：Linux CentOS安装教程Haddop的下载可以到https://mirrors.cnnic.cn/apache/hadoop/common/这个网址下载，下载的时候版本是选择Hadoop2.x.版本。格式文件选择hadoop-2.x.y....
2020-04-06 00:34:53
8156
4
机器学习之-基于文本内容的垃圾短信识别-所需数据.zip
2020-04-21
water_images.zip
2020-04-19
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人