架构师实战感悟

安装CDH 6.3.2 版本时初始化集群服务过程中出现oozie server启动失败的情况，第一次创建集群成功，第二次失败了，分析日志信息。分析日志内容，发现因为表不存在导致oozie服务启动失败。于是准备手工创建数据库表结构，初始化数据库，然后再来启动oozie服务。

CM服务默认端口是 7180， 默认账号以及初始密码是：admin/admin。登录系统后将会做基础的配置，根据需要选择合适的版本，企业版需要购买License，Express 版本免费使用，但是支持的功能有限。CM服务是集群的管理节点，CM负责管理大数据集群内所有的数据节点，数据节点上需要部署 agent 服务，agent服务负责与CM服务通信，CM 服务通过 agent 服务来管理集群内所有的数据节点。准备好CDH安装包资源，官方网站下载需要账号，如果没有账号可以去网上到处搜搜。

首先创建一张用于测试的表，表明为 TREE，表中有3个字段，分别是，ID，NANE，UP_ID。UP_ID 是 ID 的上层，主要实现树形结构的存储。 1.1 初始化测试数据 1.1.1 写入数据 1.1.2 树形结构如下图 root(8) 一(1) 二(2) 三(3) 五(5) root(6) 四(4) 2. 树形结构遍历查询 2.1 从父节点遍历 查询结果如下： 2.2 从子节点开始遍历 查询结果是： 2.3 start with 条件 connect by prior

hbase简介 HBase是一个分布式的、面向列的开源数据库，该技术来源于 Fay Chang 所撰写的Google论文“Bigtable：一个结构化数据的分布式存储系统”。就像Bigtable利用了Google文件系统（File System）所提供的分布式数据存储一样，HBase在Hadoop之上提供了类似于Bigtable的能力。HBase是Apache的Hadoop项目的子项目。HBas

spark介绍spark是一套并行计算的框架，由于在计算过程中，数据在内存中传递，所有，性能要比hadoop的map/reduce在磁盘中传递的效率高很多。下边在使用hdfs和zookeeper的基础上，安装spark单机环境。1.启动hadoop服务 2.安装spark程序包 3.启动spark服务器启动hadoop服务如过尚未安装hadoop，请参考hadoop安装文档cd $HADOOP_

hadoop版本 2.7.3下边将一步一步的介绍在ubuntu系统中搭建hadoop环境。 安装sun jdk 配置免密码登录 下载hadoop可执行包 修改hadoop配置文件 启动hadoop服务 安装sun jdk如果你的机器上已经安装了openjdk，请先卸载，如果没有，请按照下面方法继续操作。 在oracle官网上下载最新的jdk包，在这里我选则的是jdk1.8.0_121，具体下载地址

Oracle表分区目的： 在数据处理过程中，通常对于数据比较大的表进行分区管理，而分区的依据往往是数据日期，每一天或者每几天数据存储在一个指定的分区中，当数据量一天天增加后，通过分区进行过滤，有利于快速查询某一天的数据。 在向分区表中插入数据时，分区表必须有能够装载这条数据的分区，比如将2018-01-08的数据全部放在P20180102这个分区，而这个分区条件是数据日期小于等于2018-01...

首先切换到db2inst1用户（或者别的实例用户下） 通过客户端远程数据库时，需要首先进行"编目".编目的作用就像 oracle数据库配置  tnsnames.ora  .编目一般分为2个步骤。 # db2 catalog tcpip node local remote localhost server 50000 上面这步可以理解为使用 local 这个标示符 代表了 远程数据库

关于oracle数据库备份，可以使用oracle提供的exp和imp工具。 如会用sys用户登陆到oracle数据库： sqlplus  /nolog SQL>conn /as sysdba SQL>exp userid=sys/passwd@remote_ip/oracle_sid    file=/home/hello.dmp  log=/home/hello.dmp  feedbac

使用游标修改数据定义一个游标，游标名称为 mycursor更新scott用户中emp表中empno为7369的销售额-- Created on 2015/11/30 by ZHANW declare he emp%rowtype; cursor mycursor(pid integer) is select * from emp where empno = pid for update;......

1. 主键在表中是唯一性的，并且主键所在的字段不能为空，且一个表中，只有一个主键或一个联合主键。 2. 当一个表引用外键时，被引用的表中字段必须是主键或unique 3. 如果要删除表中数据，但是表中的某个主键又被其他的表当做外键使用了，那么可以删除表中主键（要加cascade关键字），然后再删除数据，当主键被删除后，其他表中引用的外键自动被删除。 4.当主键被被其他

1. 解锁oracle用户下某个用户（以scott

1.首先安装好jdk后，sun公司的活IBM的。

服务器1        os: AIX 5.3        ip: 192.168.0.1        db: oracle 11gR2 服务器2：        os: AIX        IP: 192.168.0.5        db: DB2 v9.7 主要目的：        通过在服务器1中构建透明网关，实现在oracle数据库中连接服务器2中的DB2数据库。