- 博客(14)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 大数据平台设计
大数据总介我们通常说的大数据，包括大数据本身和基于大数据的系统和技术。大数据的5V特点（IBM提出）：Volume（大量）、Velocity（高速）、Variety（多样）、Value（价值）、Veracity（真实性）。而基于大数据技术的应用层级分商业智能，和平台解决方案两种。平台解决方案：偏技术层，基础层，解决数据处理，存储，清洗，收集，api提供，系统调度等操作商业智能：分析
2016-06-27 10:44:59
18752
原创 RobotFramework 接口自动化(一)
前言Robot Framework 是一款非常流行的自动化测试框架，今天，我们用它来进行接口自动化测试工作。在一个项目中，接口的稳定性大大优于gui，对接口自动化的投入是很值得的。1.RobotFramework 介绍官网 ：http://robotframework.org/ 源码：https://github.com/robotframework/R
2015-07-26 17:48:52
3365
原创 架构相关
Java- 架构相关SOA SOA架构的定义或特性面向服务层的架构， 松耦合，粗粒度，开放式架构SOA架构的组件分层 持久层，逻辑层，执行层，用户接口层 ，webservice 层（分布式架构）SOA架构的目的和现实意义保全或保护企业原来遗留下来的软件系统（数据），实现软件数据的无缝接轨，避免企业原有投资打水漂、数据需重复录入重复使用服务，
2013-10-07 08:54:15
599
原创 概要与详细设计
系统架构-概要设计：接口的设计环境的考虑，系统所在环境的特点，进行系统的设计参考 王三三 《概要设计》系统架构-详细设计：程序员完成，拿概要设计，先编码实现，然后写详细设计
2013-10-07 08:46:54
729
原创 设计数据库基本理念
Database-database数据库的一致性 （Hbase The Definitive Guide P9）Consistency ModelStrict：The changes to the data are atomic and appear to take effect instantaneously. Thisis the highest form of c
2013-10-07 08:45:34
1335
原创 软件流程
提出需求初步需求挖掘，参照业界的技术实现，和本公司技术实力开会，风险评估通过，设计实现（解决）方案，带着方案，参加竞标竞标成功。现场需求挖掘，出详细需求规格说明书，需求确认，签字，需求变更需要控制，分级，级数根据时间在确定，级数过高则要收费。概要设计下达。项目经理制定计划编码开始
2013-10-07 08:43:11
638
原创 JAVA 框架
JAVA 框架》mina 框架通过nio 提供了抽象的，事件驱动的，异步的位于各种传输协议上的API（如TCP/IP 和 UDP/IP），包括nio , 客户和服务端 或者一个网络socket 库特点，非阻塞，事件驱动，支持批量数据传输，支持tcp ,udp；控制反转的设计模式(支持spring),自定义线程数量，回调方式完成http://blog.youkuaiyun.com/h
2013-10-07 08:36:01
505
原创 Hadoop 相关
》Hadoop 配置退出 安全模式bin/hadoop dfsadmin -safemode leave》HDFS 块式存储，里面取得
2013-10-07 08:35:59
520
原创 Linux相关
rpm -ivh xxx.rpm 安装rpmls -l 显示所有文件包括权限scp -r xxx root@tom2:xxxx 复制到某个节点中mv -f xxx xxx 移动文件cp -rf xxx xxx 复制文件夹 f 强制 r递归cat xxxx >> xxx 添加复制rm -f a.txt 删除文件rm -rf
2013-10-07 08:30:15
623
原创 linux 免密码 ssh 互相连接
假设现在我们有一个用户，叫tom,1. 启动ssh , chkconfig iptables offservice iptables stopservice sshd start 然后在 tom 用户下 ，ssh localhost 命令，点yes，输入用户名和密码2. 创建密钥 cd ~ 进入grid 根目录
2013-08-19 00:04:03
815
原创 Centos 用户权限管理
一：新建用户 -----参照 http://blog.youkuaiyun.com/inte_sleeper/article/details/6570030useradd -d -m -g –G –p常用的就是上面几个参数，意思分别为：-d ：指定用户主目录。如果此目录不存在，同时使用 -m 就会创建此目录。-m ：创建用户主目录-g ：用户所属组 ID-
2013-08-18 23:20:54
658
原创 sqoop之连接 Mysql
一。关于 sqoop ,一个有效与关系型数据库进行大数据交换的工具，Apache Sqoop(TM) is a tool designed for efficiently transferring bulk data between Apache Hadoop and structured datastores such as relational databases.二。我的
2013-08-18 16:29:01
1936
1
原创 hadoop 准备之linux相关
1，设置固定Ip 1）ubuntu 设置固定 ip sudo gedit /etc/network/interface 模板参照如下： iface eth0 inet static address 192.168.1.2 netmask 255.255.0.0 network 192.
2013-08-17 22:51:38
489
原创 hadoop 启动的各种问题解决
hadoop 为一个分布式系统基础架构，由Apache基金会开发。本人使用最新的hadoop-1.2.0,和0.20.2 ，两个版本 装在三个虚拟机上，系统为centos ，遇到启动的各种问题，总结如下一，hadoop 的配置问题1.namenode 无法启动 hadoop,tmp 文件夹的问题，有时默认format 之后，清空了tmp文件。需要 在core-sit
2013-07-01 15:54:18
973
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人