automannn

    最近由于实践需要，进行了大数据相关环境及实践，特此记录。 zookeeper:          百度百科释义：     不难看出，它的本质：一个服务，分布式应用程序协调服务。   （或者说一套协议）。    具体的细节就不去看了，否则今天下午乃至本周恐怕都看不完，更别说理解了。      总之吧，它为基于硬件环境的集群提供了思路！！ 我想这个是我对它的理解了。 物理环...

   接着上一篇，趁着这个势头继续整理！  经常听说大数据，所以hadoop已经可谓如雷贯耳了。 早前曾经对于hadoop进行过一些安装。但是当时基础太过薄弱，因此效果甚微。 如今重新进行学习，并做好笔记！     安装过程：           首先解压并配置环境变量。 这个详细过程就不记录了。 记录一下配置的环境变量吧！               配置过程：      1.首先配置...

   前面已经搭建好了zookeeper主机集群，hadoop集群。   现子看来，zookeeper貌似提供了一种简便的方法来解决hadoop集群的问题，比如免密登陆，时间同步等。 但是二者都是分布式架构解决方案，所以应该不存在耦合关系！   今天继续继续环境下的hbase的安装笔记！  背景:        百度百科释义：                 可见它的本质是一个数据库。 ...

       前面已经配置好了集群环境zookeeper，hadoop。 以及分布式数据库hbase。 这个阶段要开始构建数据仓库的练习。涉及到的软件： mysql， hive 。        背景：                 （我以前以为数据仓库就是数据库的数据库。。）          可见，hive本质是一个hadoop的工具。     mysql自然不必过多再去查询了...

  不久将要参加个什么大数据比赛。 于是将相关的内容练习了几遍。 其中各自的关键及相关的理解均写成了笔记，分别是zookeeper分布式集群环境的搭建，hadoop集群环境的搭建，分布式非关系型数据库hbase环境搭建，基于hive的数据仓库的构建   以及于此同时回顾的计算机网络的相关知识。  短期来看，似乎有点浪费时间，做了一些无用功。 无论参加比赛获奖与否。 但是长期来看，还是很有益处的，不...