Victor_python-优快云博客

原创 docker下安装hive 2.3.4

安装前准备下载apache-hive-2.3.4-bin.tar.gzhadoop-2.9.2.tar.gz未说明的情况下，宿主机操作命令的默认路径为/opt，容器内操作的默认路径为/usr/local搭建镜像新建执行脚本 vim run.sh#!/bin/bash/usr/sbin/sshd -D新建Dockerfile#将密钥文件复制到/etc/ss...

2019-05-20 19:58:30 1877

原创 centos7安装git报错No such file or directory

Downloading packages:Error downloading packages: perl-Git-1.8.3.1-13.el7.noarch: [Errno 5] [Errno 2] No such file or directory perl-TermReadKey-2.30-20.el7.x86_64: [Errno 5] [Errno 2] No such f...

2019-04-18 18:53:24 1977

原创 10步搞定windows安装superset

1：anaconda创建新的python环境conda create -n python37 python=3.72：环境激活activate python373：根据官网文档安装cryptography以及新建Temp文件夹pip install cryptographymd C:\Temp（貌似没啥用）4：跟新setuptools 和pippip install --u...

2019-04-17 20:14:24 9954 15

原创 Hue 中文注释显示乱码

问题展示Web UIHive descHive show create table进入mysql ，查看hive 数据库当前编码show create database hive ;如果是utf8 则执行下面sql将 hive 数据库默认编码改成 latin1alter database hive default character set latin1 ;执行...

2019-03-21 20:54:11 2077

转载 spark算子

Transformations算子含义map(func)返回一个新的分布式数据集，其中每个元素都是由源RDD中一个元素经func转换得到的。filter(func)返回一个新的数据集，其中包含的元素来自源RDD中元素经func过滤后（func返回true时才选中）的结果flatMap(func)类似于map，但每个输入元素可以映射到0到n个输出元素（所以要求...

2019-03-04 20:44:42 272

原创 python3安装scrapy报错解决办法

问题描述virtualenv python3.6.8安装scrapy直接安装Twisted报错解决办法下载Twisted安装包(版本选择)wget https://twistedmatrix.com/Releases/Twisted/18.9/Twisted-18.9.0.tar.bz2解压安装tar -jxvf Twisted-18.9.0.tar.bz2cd Tw...

2019-02-13 16:34:01 450

原创 centos7下使用virtualenv安装python3虚拟环境

python3 下载安装## 下载wget https://www.python.org/ftp/python/3.6.8/Python-3.6.8.tar.xz（没有wget的先pip intall wget,同理没有pip的先安装pip）## 解压xz -d Python-3.6.8.tar.xztar -xf Python-3.6.8.tar## 安装#进入解压后的目录，依次执...

2019-02-13 16:32:59 848

原创【chrome扩展】之爬虫利器

爬虫必备chrome扩展toggle javascript 禁用JavaScript加载使用效果开启前开启后使用该插件可以快速检测一个网站是否采用js动态加载数据toggle javascript 禁用JavaScript加载...

2019-01-30 15:54:56 1705

原创 Cannot set property 'innerHTML' of null

mainfest.json"content_scripts": [ { "js": ["js/content_script.js"], "matches": [ "http://mp.weixin.qq.com/*", "https://mp.weixin.qq.com/*&am

2019-01-25 16:42:12 441

Victor_python