- 博客(10)
- 收藏
- 关注
RSS订阅
原创 HIve编程指南
HIve编程指南数据定义库描述信息表管理表（外部表）外部表分区表管理表外部分区表修改表增加修改删除表分区删除分区修改列信息增加列删除或替换列数据操作插入数据静态分区插入向管理表中装载数据通过查询语句向表中插入数据动态分区插入单个查询语句中创建表并加载数据导出数据查询算术运算符函数数学函数聚合函数表生成函数内置其他函数limit语句嵌套select 语句case ... when ... then..谓词操作符like和rlikejoin语句inner joinorder by 和 sort by含有sort
2021-04-25 14:54:36
1254
原创 数据仓库维度建模指南
数仓建模指南DW,Bl以及维度建模初步用于度量的事实表单事件事实表流程事实表事实表的存储用于描述环境的维度表三级目录DW,Bl以及维度建模初步部分借鉴与（此原文：https://blog.youkuaiyun.com/mcajax/article/details/104376168）用于度量的事实表维度模型中的事实表存储组织机构业务过程事件的性能度量结果，表示某个业务度量。事实表的每行对应一个度量事件，每一个度量事件与对应的事件表行具有一对一关系单事件事实表对于每一个业务动作事件，设计一个事实表，仅记录
2021-04-26 13:44:26
599
原创 可视化爬虫ScrapydWeb的安装（Linux）
可视化爬虫ScrapydWeb的安装（Linux）(python3及以上)官方文档：https://github.com/my8100/files/blob/master/scrapydweb/README_CN.md首先需要安装 scrapyd(可移步安装)安装 pip3 install scrapydweb在scrapyd挂起的状态下运行scrapydweb在python scrapydweb的安装目录下执行 scrapydweb 如 /usr/local/python3/bin/在此目录
2021-04-23 14:37:11
409
2
原创 linux下安装并运行scrapyd
linux下安装并运行scrapyd(python3及以上)安装pip3 isntall scrapyd配置文件新建存放配置文件文件夹mkdir /etc/scrapyd编辑配置文件vim /etc/scrapyd/scrapyd.conf写入（[官网示例](https://scrapyd.readthedocs.io/en/stable/config.html)）：[scrapyd]eggs_dir = eggslogs_dir = logsitems_dir =
2021-04-23 14:22:44
614
原创 有趣的Python函数
有趣的Python函数(Python3及以上版本)函数列表有趣的Python函数(Python3及以上版本)函数isinstance()super()函数isinstance()super()函数用于提供对父类或同胞类的方法和属性的访问1、单继承在单继承时，super().init()与Base.init()是一样的。super()避免了基类的显式调用。示例：super().init() class Base(object): def __init__(self):
2021-04-23 11:45:44
247
原创 CentOS7安装MySQL
CentOS7安装MySQL下载并安装MySQL官方的 Yum Repositorywget -i -c http://dev.mysql.com/get/mysql57-community-release-el7-10.noarch.rpmyum -y install mysql57-community-release-el7-10.noarch.rpmyum -y install mysql-community-serverMySQL数据库设置启动MySQLsystemctl start
2021-04-23 10:50:10
75
原创 Centos7安装Redis
Centos7安装Redis安装gcc依赖安装之前必先确认是否安装 gcc 环境（gcc -v）yum install -y gcc 下载并解压安装包wget http://download.redis.io/releases/redis-5.0.3.tar.gz下载官网：https://redis.io/downloadtar -zxvf redis-5.0.3.tar.gzcd切换到redis解压目录下，执行编译make安装并指定安装目录make install PREFIX
2021-04-22 18:28:16
137
原创 Centos7安装Python3
Centos7安装Python3流程下载安装包编译安装建立软链接验证安装python依赖yum install openssl-devel bzip2-devel expat-devel gdbm-devel readline-devel sqlite-devel下载安装包wget https://www.python.org/ftp/python/3.6.5/Python-3.6.5.tgz官网下载地址：https://www.python.org/ftp/python 可以自由
2021-04-22 18:16:55
74
原创 Centos7开放及查看端口
Centos7开放及查看端口1、添加安全组首先需要在所属服务器实例——安全组开放添加相应实例2、开放端口firewall-cmd --zone=public --add-port=5672/tcp --permanent # 开放5672端口firewall-cmd --zone=public --remove-port=5672/tcp --permanent #关闭5672端口firewall-cmd --reload # 配置立即生效3、查看所有开放的端口firewall
2021-04-22 18:06:06
239
原创 MongoDB常用查询语法及与MySQL对比示例
MongoDB常用查询语法及与MySQL对比示例文章目录MongoDB常用查询语法及与MySQL对比示例一、查询二、曾三、删四、改一、查询查询所有– MYSQL:select * from user;– MongoDB：db.user.find();条件查询– MYSQL:select * from user where name = ‘张三’;– MongoDB：db.user.find({“name”: “张三”});多条件查询– MYSQL:select *
2021-04-22 17:58:31
537
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人