lldouble的博客

搭建Hadoop伪集群的时候，需要ssh 免密登录，当执行hadoop启动脚本是时候报错： 解决一、运行SSH   (1)ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa   (2)cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys   (3)ssh localhost      要保证：  ~/.ssh需要是...

作者：Xiaoyu Ma链接：https://www.zhihu.com/question/27974418/answer/38965760来源：知乎著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。大数据本身是个很宽泛的概念，Hadoop生态圈（或者泛生态圈）基本上都是为了处理超过单机尺度的数据处理而诞生的。你可以把它比作一个厨房所以需要的各种工具。锅碗瓢盆，各有各的用处，互相...

点击这里观看厦门大学林子雨老师主讲《大数据技术原理与应用》授课视频【版权声明：本指南为厦门大学林子雨编著的《大数据技术原理与应用》教材配套学习资料，版权所有，转载请注明出处，请勿用于商业用途】本指南介绍Linux的选择方案，并详细指引读者根据自己选择的Linux系统安装Hadoop。请务必仔细阅读完厦门大学林子雨编著的《大数据技术原理与应用》第2章节，再结合本指南进行学习。Hadoop是基于Jav...

HBase 的表结构 HBase 是一个NoSQL数据库，用于处理海量数据，可以支持10亿行百万列的大表，下面就了解一下数据是如何存放在HBase表中的 关系型数据库的表结构 为了更好的理解HBase表的思路，先回顾一下关系数据库中表的处理方式 例如有一个用户表user_info，有字段：id、name、tel，表名和字段需要在建表时指定 create table user_info (...

HBase中的表一般有这样的特点： 1 大：一个表可以有上亿行，上百万列 2 面向列:面向列(族)的存储和权限控制，列(族)独立检索。 3 稀疏:对于为空(null)的列，并不占用存储空间，因此，表可以设计的非常稀疏。 下面一幅图是Hbase在Hadoop Ecosystem中的位置。 二、逻辑视图 HBase以表的形式存储数据。表有行和列组成。列划分为若干个列族(row fami...