
hadoop
文章平均质量分 78
alihonglong
这个作者很懒,什么都没留下…
展开
-
Hadoop基本命令
目录.21,启动Hadoop.22,关闭Hadoop.23,打印版本信息。...24、hadoop脚本可用于调试任何类...2,文件操作...31、格式化一个新的分布式文件系统:...32、查看指定目录下内容...33、查看指定目录下的所有文件(包括子目录下的文件)34、打开某个已存在文件...35、将本地文件存储至h原创 2015-09-07 16:33:47 · 1106 阅读 · 0 评论 -
hadoop配置
目录hadoop配置...1一、所用软件环境:...1二、安装步骤:...11,安装操作系统...12,创建hadoop用户组和用户...23,安装jdk.24,修改机器名...25,安装配置ssh.36,安装配置hadoop.37运行hadoop以验证配置:4运行WordCount例子...41,创建本地测试原创 2015-09-08 11:19:00 · 426 阅读 · 0 评论 -
hadoop学习中基础性问题
hadoop配置过中,一些问题梳理:1,nameNode启动不了;2,SecondaryNamenode启动不了;3,datanode启动后自动关闭;4,主机名带下划线原创 2016-07-22 16:15:50 · 436 阅读 · 0 评论 -
hadoop完全分布式
注:本文为转载,来自:http://blog.youkuaiyun.com/ab198604/article/details/8250461 要想深入的学习hadoop数据分析技术,首要的任务是必须要将hadoop集群环境搭建起来,可以将hadoop简化地想象成一个小软件,通过在各个物理节点上安装这个小软件,然后将其运行起来,就是一个hadoop分布式集群了。说来简单,但是应该怎么做呢?不转载 2016-08-17 19:53:01 · 489 阅读 · 0 评论 -
SSH梳理
在配置hadoop集群时,涉及了ssh,在此梳理下。一,SSH是什么SSH(SecureShell)是一种加密的网络协议,基于客户-服务模式。使用该协议的数据在传输过程中将被加密,从而保证信息的安全。二,安装SSH基于Debian/ubuntu的安装:sudoapt-get install openssh-client(一般系统都安装了)sudoapt-get inst原创 2016-08-17 20:36:02 · 339 阅读 · 0 评论 -
hive语句简单统计搜索日志
一、前言 初步学习了hive,以搜狗实验室的一部分搜索日志为数据集进行hiveQL语句操作练习。二、数据集介绍 语料官网:http://www.sogou.com/labs/resource/q.php 简介:搜索引擎查询日志库设计为包括约1个月(2008年6月)Sogou搜索引擎部分网页查询需求及用户点击情况的网页查询日志数据集合。原创 2016-09-24 08:33:17 · 5474 阅读 · 0 评论