- 博客(14)
- 收藏
- 关注
原创 QV中如何连接数据库
How to connect to database in Qlikview1. You can find [Edit Scripts] from file in QV, then open it, as below show2. We can choice database or Files to make a data source. If use database, we hav...
2018-12-29 15:38:48
601
1
原创 xlsx数据处理01
之前一直是处理后台数据为主,接触的都是Linux和UNIX环境,对文件的处理一般都用shell脚本。然而目前工作中会大量用到xlsx,对一个xlsx小白来说的我显得有点力不从心,毕竟相对以往的工作经验来说,它是我的鸡肋,它不难,但是要想用好它也并不是那么容易,我很驾驭它,然后不知道是不是因为它比较常用,让我反而不知道从和着手,对写xlsx的函数也有点惧怕。但是技术毕竟是死的,只要付出时间付出精力,...
2018-06-09 20:15:24
1001
原创 MSTR-Architecture
Data Model Design -- first step(analysis)Logical Data Model -- 精确到字段的逻辑模型 需求分析 不是直接用在mstr里面的Physical Schema -- sencod step(create detail table)2. Schema Objectsa. Table - corr
2017-10-30 18:22:02
480
原创 数据化运营
今天看到一遍文章觉得不错,大概明白了想表达的意思,个人理解是通过对数据的分析处理来做运营。整个过程主要论述了数据是如何有效处理,如何分析并运用到运营上。其实按我的理解运营就是决策,所以说其实简而言之就是将数据转化成知识从而给企业提供决策。以下是我看完文章后的一些总结:1. 概念数据化运营是一个今年来兴新的概念,它在运营的基础上,提出了以数据驱动决策的口号。衍生概念->数据运营体系,是数
2017-03-16 17:25:19
747
原创 Ubuntu下面安装HIVE
安装HIVE的前提是先要安装好HADOOP,然后使用命令来启动namenode和datanode。启动后可以用jps来查看是否启动成功,如下图所示:一定要有DataNode才说明正常启动HADOOP了,也可以通过$HADOOP_HOME/bin/hadoop dfsadmin -report来查看是namenode和datanode否正常,如果配置都是0那肯定是异常了:HADOOP
2016-11-02 09:43:31
5268
原创 Ubuntu下面安装单节点hadoop
由于电脑资源有限,自己又想玩玩hadoop,所以就在ubuntu上安装一个单节点的,没安装过以为难度挺大,安装完后其实还是蛮简单的,网上有现成的例子可以参照。但是我还是把我自己的安装过程给记录一下,以供后面自己复习。step1: 去官网下载hadoop的mirror,解压即可。下载path: http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop
2016-10-19 17:10:38
585
原创 How to read Json file or text file in Spark
Currently spark is most popular so that I want to learn it. Not because deal with data speed more than hadoop but also used in MLlib,GraphX and so on. And spark support Python language, so I can use P
2016-10-12 16:09:33
769
原创 如何在Linux环境上安装JAVA和配置JAVA_HOME
我这边用的是Ubuntu版本,Centos等应该都是类似的。注:之前用了sudo apt-get install java来安装,发现没有用,后来网上搜索了一下使用了sudo apt-get install default-jre。step1. 使用Command 安装java。step2. 安装完毕后vi /ect/profile. 把如下配置写入/etc/profile。写入完毕
2016-10-10 17:52:09
921
原创 安装VMware虚拟机及在虚拟机上安装Linux系统(Ubuntu)
之前从没安装过虚拟机,最近想自己学点东西,故想安装一个虚拟机及在虚拟机上安装Linux系统。由于以前从来没有安装过,本来以为会花很多时间,其实安装下来并没有想象中的那么困难和麻烦,但是为了以后能快速的安装,还是把自己的安装步骤给记录下来,以备以后使用,有需要的小伙伴也可以借鉴一下。step1. 在百度中输入VMware后,百度会自动检索到最新版本的安装软件下载,如下所示,当时的最新版本是12.
2016-10-09 13:50:39
625
原创 How to create AK in PowerDesigner
Step1. Dobule click table and create AK name in Keys, for example, create AK_1Step2. After create AK_1, then dobule click the AK_1, the Eidt AK_1 will show, then choose the Columns from the navigati
2016-09-30 13:33:17
545
转载 关系模式的规范化
原文路径:http://wenku.baidu.com/link?url=KzN3v3voao4ovz_izsiujMN8vMZMiArzgYbrue8tVL5L_ydc1B_6_1eEy7vfoSiO2-ORTXAXzVBxzWAaXJxiR68z6g4GMD_1AlZWzx46MSG 了解关系模式规范化的作用掌握第一范式-重点掌握第二范式-重点掌握第三范式-重点回顾关系
2016-09-29 13:27:42
30489
8
原创 mysql日常操作
linux环境下登录mysql:mysql -u username -p password 异常登录:mysql -h 127.0.0.1 但是不能创建用户以及赋予权限 如何查看mysql服务是否启动:/sbin/servicemysqld status 创建用户:create user 'user_name'@'%' indentified by 'user_passwo
2016-09-28 16:42:54
259
原创 mysql error 2002 (HY000) : Can't connect to local MySQL server through socket '/tmp/mysql.sock'
Solution:Step1:Look into directory of /tmp and find whether the mysql.sock is exist. If not,then step2. Step2: Usecommand to find the configuration filesfrom Mysql. Use command to look at the
2016-09-28 16:40:42
300
原创 缓慢变化维--Slowly Changing Dimensions
在数据仓库建模中我们常常会涉及到缓慢变化维(Slowly Changing Dimensions 简称SCD)的设计, 缓慢变化维的提出是因为在现实世界中,维度的属性并不是静态的,是随着时间的流失做缓慢的变化,所以处理这种历史的变化的维度我们称之为处理缓慢变化维。特别是在数据仓库设计中,我们的重点就是设计维度表跟事实表。所以维度表设计的好坏影响着整个数据仓库的搭建和后续报表展现的灵活性和完整性。
2016-09-28 15:45:23
696
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人