- 博客(54)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 SSH免密登录-集群配置
配置workers:有几个节点，就配置几个主机名称。一般xsync分发完毕后要重启一下yarn。不在103上启动yarn会导致集群错误。把102的公钥拷贝到103 .104。单独启动这个datenode。配置无密登录 三次回车。默认本来是没有这些内容的。杀死一个datenode。
2023-03-21 15:34:30
174
原创 Hadoop环境搭建
一.模板虚拟机hadoop100配置如下（本文Linux系统以centos7及以上为准）（1）使用yum安装需要虚拟机可以正常上网，yum安装前可以先测试下虚拟机联网情况：（2）安装epel-releaseExtra Packages for Enterprise Linux是为“红帽系”的操作系统提供额外的软件包，适用于RHEL、CentOS和Scientific Linux。注意：如果Linux安装的是最小系统版，还需要安装如下工具；如果安装的是Linux桌面标准版，不需要执行如下操作。
2023-03-19 09:09:11
446
原创 渗透测试常用工具-本课易错回答分析
1.如何安装Java环境访问https://www.java.com/zh_CN/download/win10.jsp点击同意并开始免费下载2.如何安装Python环境Python 分为 2.x和3.x两个系列，如果是用sqlmap建议使用2.x这个版本。python(2.7.16)下载地址：https://www.python.org/ftp/python/2.7.16/python-2.7.16.amd64.msi3.Java和Python默认安装路径是什么？python默认路径：C:\P
2021-09-27 18:57:57
296
原创 kettle-spoon安装
1.先安装JDK，一直点下一步，下一步2.解压pdi,得到data-integration3.测试kettle-spoon.bat程序启动spoon
2021-09-04 19:31:15
912
原创 lintcode-737-查找矩阵-python
class Solution: """ @param Matrix: the input @return: the element which appears every row """ def FindElements(self, Matrix): # write your code here w = len(Matrix[0]) l = len(Matrix) List =[] for
2021-09-02 15:37:18
123
原创 jupyter使用介绍
jupyter是基于浏览器的可视化开发工具打开方式：打开cmd输入jupyter notebook，然后按回车jupyter notebook点击new点击python3点击untitled可以进行重命名可以选择代码，也可以写笔记markdown用m y进行模式切换快捷键：A可以在选中上方插入cell，B在下方插入X删除shitf+tab打开帮助文档...
2021-07-27 18:05:11
1680
原创 kali安装vmtools
切换到管理员身份创一个文件夹用来存放vmtools进入这个文件夹，找到压缩包把它复制到刚刚创建的地方进行解压进入vmware-tools-distribsudo ./vmware-install.pl安装成功最后reboot 重启一下
2021-07-15 14:33:58
187
原创 pycharm-anaconda环境配置
在pycharm中如果出现了no python interpreter configured for the project 表示你没有给这个工程提供一个解释器如果已经安装pychrm在后期怎么配置解释器呢：file中选择setting然后点击右边的设置，Add进行配置，还是进入system interpreter，需要注意的是在Pycharm中选择错了anaconda.
2021-07-13 17:22:08
216
原创 查找Hadoop-streaming中jar包位置
安装的hadoop版本不一样，比如hadoop2.9.2，那么你相应的hadoop-streaming.jar包的名字可能叫hadoop-streaming-2.9.2.jar。总之你可以在你的hadoop安装目录下（即$HADOOP_HOME）搜索hadoop-streaming*.jar来确定它的位置。hadoop-streaming*.ja...
2021-06-16 13:55:42
1953
原创 SQL语句
数据查询语句中有些子句是可以省略的，但各个子句的书写顺序是固定的：select {*|字段名|表达式|公式|常量|函数}[ from <表名>][ where <筛选条件>] [ group by <字段名>] [ having <筛选条件>] [ order by <字段名> [ asc | desc ] ] [ limit [偏移量,]行数 ];查询指定字段如果需要查询表中部分字段，可以通过指定字段名的方式来进行查看，多个字
2021-05-22 10:25:20
1360
原创 决策树参数criterion
参数criterion的应用：（1）导入算法库和模块import pandas as pdimport numpy as npimport matplotlib.pyplot as plt%matplotlib inlinefrom sklearn import treefrom sklearn.datasets import load_winefrom sklearn.model_selection import train_test_split（2）探索数据wine = load
2021-05-21 10:05:32
2399
原创 评估指标【簇内误差平方和】-轮廓系数
一、面试高危问题：如何衡量聚类算法的效果？我们知道：聚类模型的结果不是某种标签输出，聚类的结果也是不确定的，其优劣由业务需求或者算法需求来决定，并且没有永远的正确答案。那我们如何衡量聚类的效果呢？记得我们说过， KMeans 的目标是确保“簇内差异小，簇外差异大”，我们就可以通过衡量簇内差异来衡量聚类的效果。而Inertia 是用距离来衡量簇内差异的指标，因此，我们是否可以使用 Inertia 来作为聚类的衡量指标呢？ Inertia 越小模型越好。 答案也是可以的，但是簇内误差平方和Inertia这个
2021-05-20 23:01:32
6677
1
原创 Kmeans参数n_clusters_labels_centers_
KMeans重要参数：n_clusters参数n_clusters 是 KMeans 中的 K，表示我们告诉模型要分几类。这是 Kmeans 当中唯一一个必填的参数，默认为 8 类，但通常我们的聚类结果会是一个小于 8 的结果。通常，在开始聚类之前，并不知道n_clusters 究竟是多少，因此我们要对它进行探索。当拿到一个数据集，如果可能的话，希望能够通过绘图先观察一下这个数据集的数据分布，以此为聚类时输入的 n_clusters 做一个参考。尝试在代码框执行以下代码:首先，我们来自己创建一个数据
2021-05-20 22:49:41
25214
原创 KMeans算法流程
一、什么是簇？我们知道聚类就是让机器把数据集中的样本按照特征的性质分组，直观上来看，簇是一组一组聚集在一起的数据，在 一个簇 中的数据就认为是 同一类 ，簇就是聚类的结果表现。实际上簇并没有明确的定义，并且簇的划分没有客观标准，我们可以利用下图来理解什么是簇。该图显示了20个点和将它们划分成簇的3种不同方法，标记的形状（口、△、☆等）表示簇的隶属关系。图中分别将数据划分成两个簇、四个簇和六个簇。直观地看，将图b的2个较大的簇再划分成4个簇好像也不无道理，这可能是人的视觉系统造成的假象。该图表明簇的定义
2021-05-20 22:37:07
12693
原创 聚类的基本概念-聚类与分类的区别
一、聚类的概念聚类是常见的无监督学习算法。人有归纳和总结的能力，机器也有。简单来说，聚类就是让机器把数据集中的样本按照特征的性质分组，在这个过程中没有标签的存在。其目标是，组内的对象相互之间是相似的（相关的），而不同组中的对象是不同的（不相关的）。组内的相似性（同质性）越大，组间差别越大，聚类就越好。二、深入解读聚类（1）聚类是一种机器学习技术，它涉及到数据点的分组。给定一组数据点，可以使用聚类算法将每个数据点划分为一个特定的组。（2）同一组中的数据点应该具有相似的属性/特征，而不同组中的数据点应该
2021-05-20 22:31:12
20132
4
原创 KNN最优k的选取【学习曲线】
怎样选择一个最佳的 k呢？在这里我们要使用机器学习中的神器：参数学习曲线。参数学习曲线是一条以不同的参数取值为横坐标，不同参数取值下的模型结果为纵坐标的曲线# 1. 导入所需要的模块和库import numpy as np from sklearn.neighbors import KNeighborsClassifier from sklearn.datasets import load_breast_cancer from sklearn.model_selection import t
2021-05-20 22:13:56
3723
4
原创 sklearn建模流程-自带数据导入
sklearn建模流程：（不同算法之间建模流程基本相同）（1）首先需要将使用的API导入内存from sklearn.neighbors import NearestNeighbors（2）导入进来的是算法的类,首先需要实例化一个算法对象,并在实例化的过程中,传入想要设置的算法参数.#使用类创建一个具体的对象 knn = KNeighborsClassifier(n_neighbors=3)（3）然后调用fit方法,并传入训练数据对算法进行训练#模型训练knn.fit(X_trai
2021-05-20 21:42:11
3772
原创 Mongodb -shell（navicat）
数据库1.查看当前服务器的数据库：show databases;2.创建名为mydb的数据库：db = db.getSibingDB('AAA');3.查看当前数据库的统计信息：db.stats()4.删除当前数据库db.dropDatabase()集合(collection)1.创建一个名为sss的集合db.createCollection('sss');2.将sss集合重命名为aaadb.sss.renameCollection('aaa')3.清空一个名为aaa
2021-05-04 21:47:40
928
原创 mongodb-navicat导入
准备工作：创建目录/mongodb/db 记住路径（创建时不要包含空格）1.首先进入mongodb的bin目录下：2.shift+右键打开powershell.mongod --dbpath=G:\mongodb\db此时，已经成功开了mongodb,让它保持运行状态不要关闭3.接下来，打开navicat，开始导入数据4.在连接处链接mongodb4.点击新建查询，一定要新建查询之后才会出现打开外部文件的选项5.点击文件，打开外部文件然后选择我们要导入的数据但导入的仅仅只
2021-05-04 19:19:22
6397
1
原创 BUUCTF MISC
BUUCTF写得超详细的1.签到-题目上直接有答案2.二维码3.大白4.你竟然赶我走5.基础破解6.乌镇峰会种图7.LSB8.文件中的密码9.wireshark10.rar11.ningen12.镜子里的世界13.被嗅探的流量14.小明的保险箱15.爱因斯坦16.持续更新ing 哈哈哈哈哈哈哈...
2021-05-04 16:19:24
278
原创 MATLAB安装教程
比较适合学生党使用的是Matlab2016中文版下载之后会有镜像文件，补丁文件和密钥1.点击镜像文件 R2016a_win64.iso2.点击setup.exe3.选择使用文件密钥安装5.填入密钥6.更改默认路径之后，记住这个路径，待会打补丁时要用7.8.解压补丁文件可以得到这三个文件夹9.把他们复制，然后粘贴到matlab的安装路径，然后全部替换10.默认是不会生成快捷方式的，所以最后生成一下快捷方式进入安装目录下的bin目录：右键，选择 发送到 桌面快捷方
2021-05-03 11:04:40
3930
1
原创 BUUCTF MISC 爱因斯坦
题目：先分析一波图片可能藏了其他文件，用kali 看一下提取文件：dd if=2.jpg of=flag.zip skip=68019 bs=1但爆破密码失败，没有得到口令这个this_is_not_password 来自图片属性flag{dd22a92bf2cceb6c0cd0d6b83ff51606}????...
2021-05-02 11:21:17
563
原创 BUUCTF MISC 小明的保险箱
题目：下载后发现是一张图片，先分析图片在图片里发现一个rar的压缩包，顺便下载一个暴力破解rar的工具apt-get insatll rarcrackrarcrack flag.rar --threads 20 --type rar题目说了是四位数字，所以我们可以去flag.rar.xml中修改参数，加快破解的速度。ctrl+d 可以暂停进程vi flag.rar.xml进入编辑页面在键盘上按 insert 可以进行切换然后就可进行修改了，觉得修改好之后，就按Esc 然后
2021-05-02 10:39:40
608
原创 BUUCTF Misc ningen
题目：图片名字太长了 我就自己命名成了3binwalk -e 3.jpgdd if=3.jpg of=flag.zip skip=38689 bs=1unzip flag.zipfcrackzip -b -c1 -l 1-4 -u flag.zipflag{b025fc9ca797a67d2103bfbc407a6d5f}????命令：fcrackzip -b -c1 -l 1-4 -u 压缩文件解释：-b 暴力破解模式 -c 指定掩码类型(-c1=纯数字,-c2=纯字母,
2021-05-01 22:08:48
286
原创 BUUCTF Misc rar
题目：暴力破开所以密码为8795flag{1773c5da790bd3caff38e3decd180eb7}????
2021-04-29 18:33:38
333
原创 BUUCTF Misc wireshark
题目：http.request.method==“POST”http contains “password”密码就是flagflag{ffb7567a1d4f4abdffdb54e022f8facd}
2021-04-29 18:22:13
217
原创 BUUCTF Misc LSB
题目：最上面应该是有东西，所以要打开选下参数alpha是透明度，就不用选了，然后 SAVE BIN,在写文件名的时候一定要加上png,保存才是一张图片扫二维码得：cumtctf{1sb_i4_s0_Ea4y}flag{1sb_i4_s0_Ea4y} ????...
2021-04-29 13:20:29
472
1
原创 BUUCTF Misc 基础破解
题目：题目已经告诉你是四位数的数字密码了，所以配置一下，不用勾选大小写拉丁文（字母），四位数字的爆破速度很快所以密码是2563打开后发现需要在解码一次base64flag{70354300a5100ba78068805661b93a5c}ok...
2021-04-29 10:04:13
1001
原创 BUUCTF Misc 你竟然赶我走
题目：这里很有可能就是藏flag的地方，所以打开winhex估计直接就能在直接看到flag果不其然，哈哈哈哈flag{stego_is_s0_bor1ing}
2021-04-29 09:51:37
349
原创 BUUCTF Misc大白
题目：下载后得到半张图片查看图片信息：尺寸是679*256转换成16进制的话679转换16进制为：02A7256转换16进制为：0100第二排就是图片的宽和高，只要要把图片改高一点，就可以让图片变得完整先试着改成和宽一样的高度第二排变成 00 00 02 A7 00 00 02 A7flag{He1l0_d4_ba1}ok...
2021-04-29 09:38:53
391
原创 BUUCTF Misc 二维码
题目：下载下来后有一张二维码图片把图片放进stegslove中，然后什么都没有发现。所以估计里面有压缩包，用Kali分离出来1.分解压缩包 binwalk -e QR_code.pngcd 123binwalk -e QR_code.png要进入文件所在的目录才会提取成功dd if=QR_code.png of=flag.zip skip=471 bs=1找到压缩包，点开发现需要密码真加密使用john破解得到密码，密码是7639**binwalk的常见其他命令：
2021-04-28 22:43:52
1111
1
原创 使用hadoop streaming运行Python MapReduce程序
使用hadoop streaming运行Python MapReduce程序Hadoop Streaming是Hadoop提供的一种编程工具，允许用户用任何可执行程序和脚本作为mapper和reducer来完成Map/Reduce任务，这意味着你如果只是hadoop的一个轻度使用者，你完全可以用Hadoop Streaming+Python/Ruby/Go 等任何你熟悉的语言来完成你的大数据探索需求，又不需要写上很多代码。1.hadoop streaming的工作方式hadoop streaming
2021-04-24 14:10:47
773
原创 MongoDB 安装配置
MongoDB 安装配置附：MongoDB官网下载地址： https://www.mongodb.com/download-center/community注：官网可以下载最新版的MongoDB安装包，有MSI安装版和ZIP安装版。我们课堂上使用4.10的ZIP安装版。解压安装（1） 使用解压工具打开ZIP安装包“mongodb-win32-x86_64-2008plus-ssl-4.0.10.zip”，点击“解压到”（2）输入安装路径（路径中不得包含中文、空格、特殊字符等，建议安装路径
2021-03-13 09:38:01
562
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人