Victor_python-优快云博客

原创 docker下安装hive 2.3.4

安装前准备下载 apache-hive-2.3.4-bin.tar.gz hadoop-2.9.2.tar.gz 未说明的情况下，宿主机操作命令的默认路径为/opt，容器内操作的默认路径为/usr/local 搭建镜像新建执行脚本 vim run.sh #!/bin/bash /usr/sbin/sshd -D 新建Dockerfile #将密钥文件复制到/etc/ss...

2019-05-20 19:58:30 1991

原创 centos7安装git报错No such file or directory

Downloading packages: Error downloading packages: perl-Git-1.8.3.1-13.el7.noarch: [Errno 5] [Errno 2] No such file or directory perl-TermReadKey-2.30-20.el7.x86_64: [Errno 5] [Errno 2] No such f...

2019-04-18 18:53:24 2070

原创 10步搞定windows安装superset

1：anaconda创建新的python环境 conda create -n python37 python=3.7 2：环境激活 activate python37 3：根据官网文档安装cryptography以及新建Temp文件夹 pip install cryptography md C:\Temp（貌似没啥用） 4：跟新setuptools 和pip pip install --u...

2019-04-17 20:14:24 10216 15

原创 Hue 中文注释显示乱码

问题展示 Web UI Hive desc Hive show create table 进入mysql ，查看hive 数据库当前编码 show create database hive ; 如果是utf8 则执行下面sql将 hive 数据库默认编码改成 latin1 alter database hive default character set latin1 ; 执行...

2019-03-21 20:54:11 2225

转载 spark算子

Transformations 算子含义 map(func) 返回一个新的分布式数据集，其中每个元素都是由源RDD中一个元素经func转换得到的。 filter(func) 返回一个新的数据集，其中包含的元素来自源RDD中元素经func过滤后（func返回true时才选中）的结果 flatMap(func) 类似于map，但每个输入元素可以映射到0到n个输出元素（所以要求...

2019-03-04 20:44:42 352

原创 python3安装scrapy报错解决办法

问题描述 virtualenv python3.6.8安装scrapy 直接安装Twisted报错解决办法下载Twisted安装包(版本选择) wget https://twistedmatrix.com/Releases/Twisted/18.9/Twisted-18.9.0.tar.bz2 解压安装 tar -jxvf Twisted-18.9.0.tar.bz2 cd Tw...

2019-02-13 16:34:01 506

原创 centos7下使用virtualenv安装python3虚拟环境

python3 下载安装 ## 下载 wget https://www.python.org/ftp/python/3.6.8/Python-3.6.8.tar.xz（没有wget的先pip intall wget,同理没有pip的先安装pip） ## 解压 xz -d Python-3.6.8.tar.xz tar -xf Python-3.6.8.tar ## 安装 #进入解压后的目录，依次执...

2019-02-13 16:32:59 938

原创【chrome扩展】之爬虫利器

爬虫必备chrome扩展 toggle javascript 禁用JavaScript加载使用效果开启前开启后使用该插件可以快速检测一个网站是否采用js动态加载数据 toggle javascript 禁用JavaScript加载 ...

2019-01-30 15:54:56 1852

原创 Cannot set property 'innerHTML' of null

mainfest.json "content_scripts": [ { "js": ["js/content_script.js"], "matches": [ "http://mp.weixin.qq.com/*", "https://mp.weixin.qq.com/*&am

2019-01-25 16:42:12 518

Victor_python