- 博客(14)
- 资源 (2)
- 问答 (1)
- 收藏
- 关注
原创 【黑马程序员听课笔记】hadoop/hive集群的前置环境配置(Linux安装、用户登录、环境配置)
centos7.6版本比较常用(CentOS-7-x86_64-DVD-1810-7.6),安装为base centos。【总占用8g内存,8g/16g电脑可运行】集群化软件之间需要通过端口互相通讯,为了避免出现网络不通的问题,我们可以简单的在集群内部关闭防火墙。以base centos 作完全克隆,克隆出node1、node2、node3。2、选中vmnet8(之后使用的网络)克隆node1、node2、node3。(四)防火墙、SELinux、时间同步。(二)主机名、IP、SSH免密登录。
2025-04-05 21:51:05
437
原创 hive sql 子串替换函数(translate 和REGEXP_REPLACE)
hive sql 的字符串替换(translate 和 REGEXP_REPLACE)
2024-09-19 16:34:12
414
原创 宏观经济-指标(工业增加值、PMI、社会消费者零售总额、居民消费价格指数、CPI、PPI等)
宏观经济-指标(工业增加值、PMI、社会消费者零售总额、居民消费价格指数、CPI、PPI等)
2023-12-08 11:21:50
2308
原创 anaconda安装环境变量问题、python环境配置问题以及其他
安装anaconda时没有勾选自动配置环境变量(因为看到有一个教程说自动配置的话后期conda会出问题),结果手动配置按照各种教程配置环境变量都无法打开python;尝试了很多次,最终解决方法如下:1、环境变量配置:① 用户变量配置② 系统变量配置③ 激活win10中装了anaconda,powershell无法打开python注:不要按照链接中教程配置环境变量,它没有配置系统变量,还是打不开python的;...
2021-08-15 12:48:55
7192
原创 LGB——python实现
# -*- coding:utf-8 -*-import numpy as npimport pandas as pddef distance(X, c): m, r = np.shape(X) d = 0 for i in range(m): d = np.sum(np.square(X[i] - c)) + d d = d / (m * 32) return ddef division(c): d = [] for
2021-06-04 16:53:21
1311
原创 python实现e2lsh高维数据集k近邻搜索——实现流程
lsh学习链接:LSH(Locality Sensitive Hashing)原理与实现对高维数据查询最近邻,推荐使用p-stable LSH,minLSH是针对文档查询最近邻得方法;python学习与使用:python入门之类常用函数:random.gauss(mu, sigma):均值为mu且标准偏差为sigma的高斯分布random.uniform(x, y):将随机生成下一个实数,它在 [x, y] 范围内。numpy.inner():返回一维数组的向量内积。对于更高的维度,它返回.
2020-06-08 12:21:19
1915
原创 vm15+ubuntu+hadoop3.2,新手小白血泪经验
1.vm得下载能找网盘就找网盘吧,我在官网下载,从下午下到了半夜(凌晨几点下完得我已经不晓得了),早晨起来惊喜发现下完了,万幸中间没有断掉让我全部白下。2.Ubuntu安装这里有超多血泪,哭①Ubuntu19和vm15打架!!!!!!!!!!!!!我换了无数种方式自定义安装,尝试了一万种可能,到底没有摆脱开机选择完安装选项后卡顿+黑屏!!!然后我醒悟了,何必呢,简易安装,收获快乐!简易安装,很快就安好了,后续使用没有遇到任何问题,十分流畅,tools也直接装好得,太快乐了有木有!!!②Ubun
2020-05-23 00:39:02
445
原创 图像处理——KL变换原理
KL变换定义:以矢量信号X的协方差矩阵Ф的归一化正交特征矢量q所构成的正交矩阵Q,来对该矢量信号X做正交变换Y=QX,则称此变换为K-L变换(K-LT或KLT),K-LT是Karhunen-Loève Transform的简称,有的文献资料也写作KLT。(来自百度)K-L变换是最佳正交变换方式,对相关向量求协方差矩阵,按照特征值的大小排列特征向量。变换域中能量可以集中到少数几个变换系数上(特征值大的特征向量上的系数),其编码效率高,误差小,但运算复杂度大。其根本目的,就是依次寻找能量最大的坐标轴,用于
2020-05-22 23:35:11
19194
2
2004 Locality-sensitive hashing scheme based on p-stable distributions.pdf
2020-06-07
神经网络设计(1).pdf
2020-05-31
python中fsolve的使用
2020-04-25
TA创建的收藏夹 TA关注的收藏夹
TA关注的人