Neo_Lee的博客

Linux下修改时区：[root@bogonetc]# dateThu Nov 2 01:59:16 Asia 2017  //时间不对，差在时区上 使用如下命令，导入配置文件[root@bogon ~]#export TZ='Asia/Shanghai'  //TZ名字自己定，新增一个环境变量[root@bogon ~]#source ~/.bashrc   

Redis面试题集锦什么是redis?答：Redis是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。 Reids的特点答： 1、速度快。用C语言实现的，所有数据存储在内存中以键值对形式保存。2、持久化所有数据存储在内存中，对数据的更新将异步地保存到磁盘上。3、支持多种数据结构，支持五种数据结构：S...

系统命令： 查询mysql版本：select version();表操作命令（增，删，改）： 建数据库： create database <数据库名字>; 创建表： create table <表名> ...

一份珍藏多年的mysql数据库思维导图分享，值得收藏概述下面是收集的一些MySQL体系架构图等，有必要多看多思考，特别适合看过一遍之后，过一段时间再看一遍，对知识回忆很有好处。1、mysql架构2、mysql架构与业务总结3、innodb vs myisam 索引结构4、各个引擎对比5、mysql主从6、mys...

思路：原始数据：（原始数据可以从ncdc的气象数据获取到）年，月，日，温度1901,07,12,2891901,07,13,2671901,07,14,2611901,07,15,2781901,07,16,3001901,07,17,2781932,06,27,3891932,06,28,4001932,06,29,3681932,06,30,3721932...

hbase-site.xml配置hbase.tmp.dir本地文件系统tmp目录，一般配置成local模式的设置一下，但是最好还是需要设置一下，因为很多文件都会默认设置成它下面的 线上配置 <property> <name>hbase.tmp.dir</name> <value>/mnt/...

集群启动/停止Hadoop集群：start-all.shstop-all.sh1) 启动NameNode, DataNode2) 启动JournalNode, JournalNode在hdfs-site.xml中指定edits log存储的位置，主备NameNode共享数据，方便同步3) 启动DFSZKFailoverController, HA会启用ZooKe...

Put类的方法  getRow()         返回创建Put实例时所指定的行键  getRowLock()     返回当前Put实例的行RowLock实例  getLockId()       返回使用rowlock参数传递给构造函数的可选的锁ID,当未被指定时返回-1L  setWriteToWAL()  允许关闭默认启用的服务端预写日志（WAL)功能  getWri...

1.hadoop Archive的作用是什么？2.怎么使用hadoop Archive？3.怎么查找Archive文件？4.怎样解压Archive文件？5.本文还介绍了哪些命令？概述所有的Hadoop命令都通过bin/hadoop脚本调用。在没有任何参数的情况下，运行Hadoop脚本将打印该命令描述。[Bash shell] 纯文本查看 复制代码? 01 02 ...

Hadoop小文件存储方案HDFS总体架构在介绍文件存储方案之前，我觉得有必要先介绍下关于HDFS存储架构方面的一些知识，在对架构有初步了解后，才会明白为什么要单独针对小文件展开介绍，小文件存储和其它文件存储区别在什么地方。这里我只是就Hadoop生态中的存储层展开介绍，对于其它部分本文暂未描述。众所周知，HDFS是目前非常流行的分布式文件存储系统，其逻辑架构如下图所示：HDFS也...

文件系统：          hdfs fsck /   -files -blocks  显示文件的块信息 hadoop-env.sh  (脚本中要用到的环境变量，以运行hadoop)       JAVA_HOME   设置java环境变量，例如export JAVA_HOME=/usr/software/jdk1.8.0_65       HADOOP_HEAPSIZE  设置hadoop为各...

hdfs fsck / -files -blocks  列出文件系统中各个文件由哪些块组成 hadoop fs -ls .             列出hdfs文件的所有文件，不递归目录hadoop  fs -lsr / hadoop  fs -ls -R /  (规范写法)  递归查看指定目录下的所有内容 hadoop  fs -cp /dir01/1.txt  /dir02  将HDFS上 /...

下载可用的zookeeper程序，上传至linux主机，解压缩% tar –zxvf zookeeper-3.4.7.tar.gz 设置环境变量，将目录指向新解压的路径 export ZOOKEEPER_HOME=~/usr/software/zookeeper-3.4.7export PATH=$PATH:$ZOOKEEPER_HOME/bin 然后修改配置文件 ZOOKEEPER_HOME/c...

Linux下的vim编辑器常用命令：     K上移h左移  l右移          J下移 Ctrl+F 下翻一页Ctrl+B 上翻一页 Shift+g 移动到缓冲区最后一行num+Shift+g移动到缓冲区的第num行gg 移动到缓冲区的第一行 x 删除当前光标的位置的字符dd删除光标所在的行dw

第一章 基础1 在REPL模式下输入 3. 然后按tab键。有哪些方法可以被应用？答： [root@bigdata01 bin]# sh scalaWelcome to Scala 2.13.0 (Java HotSpot(TM) 64-Bit Server VM, Java 1.8.0_65).Type in expressions for evaluation. O...