- 博客(4)
- 资源 (2)
- 收藏
- 关注
原创 踩坑笔记mp停留在kill Command处
今天在写shell脚本的时候,里面用到了hive的函数,执行后发现一直卡在kill Command这:于是各种百度,什么添加空间、修改配置都不好使。。。最后在yarn上想看看执行情况:发现我的两个datanode都变成了Unhealth Node(后来被我修复了,恢复成了active node)…Unhealth Node是没法使用的。解决办法在我的datanode的虚拟机里删除一些不要的文件,释放一些存储空间,于是重启hadoop刷新一下,让datanode又重新变成了active nod
2022-03-12 14:31:38
3451
原创 linux命令小笔记1
wc命令 统计词频啥的wc --help 帮助wc -l 返回行数sort命令 给文档里的内容排序sort --help 帮助sort test.txtsort -n test.txtsort -nr test.txt 倒序sort -k 2 -n test.txt 按第二列内容排序uniq命令 检查文档里的重复行uniq --helpuniq test.txt 去重uniq -c test.txt 显示重复行以及重复次数uniq -u test.txt 返回不重复的行sor
2021-12-12 21:42:14
724
原创 机器学习入门笔记-简易版线性回归算法理解加实例(最小二乘法)
线性回归算法回归算法就是将一些连续的有一定规律的点拟合成一条直线或者曲线的形式,通过这条直线或曲线,就可以预测后来的点大致位置了。比如说我们现在有八个散列的点,我用8×2的矩阵表示x = np.array([[0.5, 1],[1, 1.8],[1.5, 2.2],[2, 2.3],[2.5, 3],[2.7, 3.1],[2.9, 3.1],[3.1, 3.3],])第一列代表二维空间中的x的值第二列代表y值,可以看到它们的分布是这样的:我们发现,这些点的分布大致都是朝着一个方向
2020-05-15 20:45:10
612
原创 机器学习入门笔记-简易版knn(k近邻算法)分类理解加实例
近日在学习机器学习入门知识,整理了一些笔记,也加上了一些个人对它的理解,希望这篇文章能帮助大家,同时如果有错误或瑕疵,欢迎大家批评指正,一起学习,共同进步。knn(k近邻算法)k近邻算法,顾名思义,近邻,就是某个东西的离他比较近的东西,k是什么呢?k是数量,就是k个和它离得比较近的东西啦。假如我们有个土豪同学叫小明,开着100万的车,戴着100万的手表,我们想分析一下小明的身价究竟是多少,我们可以从小明的其他朋友开始分析。这个时候,我们发现小明有四个和他情况很相近的朋友,他们也都开着80-150万的车
2020-05-14 01:03:58
722
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人