- 博客(16)
- 收藏
- 关注
原创 Hue中使用oozie调用shell启动sqoop报错
2020-12-01 14:23:01,841 INFO org.apache.oozie.command.wf.ActionStartXCommand: SERVER[cdh-dev5] USER[itview] GROUP[-] TOKEN[] APP[SqoopTest] JOB[0000000-201201142033410-oozie-oozi-W] ACTION[0000000-201201142033410-oozie-oozi-W@shell-2323] [***0000000-201201
2020-12-01 15:20:42
1476
5
原创 HDFS的原理
HDFS(Hadoop Distributed File System )Hadoop分布式文件系统。HDFS上的角色:NameNode:是Master节点,管理数据块的映射,数据信息包括fsimage和edits。SecondaryNameNode:分担NameNode的工作,是NameNode的冷备份,合并fsimage和edits然后发给namenodeDataNode:Sl...
2020-05-04 15:40:54
353
原创 从认识Hadoop开始!
Hadoop前世今生:Hadoop起源于Apache Nutch项目,始于2002年,是Apache Lucene的子项目之一 [2] 。2004年,Google在“操作系统设计与实现”(Operating System Design and Implementation,OSDI)会议上公开发表了题为MapReduce:Simplified Data Processing on Large...
2020-05-04 07:12:16
521
原创 mysql之后设置远程访问和使用dump迁移数据
设置密码:set password for root@localhost = password('huihan$mysql');设置远程访问GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY 'huihan$mysql';刷新设置flush privileges;dump到SQL文件mysqldump -u ...
2019-04-16 10:52:21
1024
原创 Linux操作系统添加用户以及修改密码和授权
创建用户且指定该用户的根路径和密码useradd -d /home/devmserver -m devmserver设置密码passwd devmserverhuihan$devmserver用户授权chown -R devmserver:devmserver /home/devmserverchmod 760 /home/devmserver...
2019-04-16 10:42:40
241
转载 phabricator添加插件Calendar,Upcoming Events
1,首先要有管理员权限,点击moreAppritions进入Calendar,点击install提示说没有权限那就添加权限2,添加权限之后提示设置habricator.show-prototypes3,进入phabricator的bin目录下面执行./bin/config set phabricator.show-prototypes true4,然后可以使用参考博客:http:/...
2018-11-13 14:36:09
754
原创 PostgreSQL11安装以及修改数据路径
这里安装pgSQL11版本使用yum安装:参考官网,选择要安装的数据库版本和对应的Linux版本:https://www.postgresql.org/download/linux/redhat/1:yum install https://download.postgresql.org/pub/repos/yum/11/redhat/rhel-6-x86_64/pgdg-centos1...
2018-11-12 11:35:26
17643
原创 ambari卸载出现的问题
可以参考网上博客卸载和删除ambari的文件,和hdp的文件记得主节点上执行yum remove ambari-server从节点yum remove ambari-agent错误信息:==========================Creating target directory...==========================Command start t...
2018-10-10 13:43:05
2091
原创 AMBARI-2.4.2安装部署记录
操作系统:Centos6.XHDP版本:HDP-2.5.3AMBARI 版本:AMBARI-2.4.2HDB版本:HDB-2.2.01,配置集群/etc/hosts2,配置免密登录ssh-copy-id node01i.# 分别在四台机器上生成密钥对:cd ~ssh-keygen -t rsa# 然后一路回车# 在node01上执行:cd ~/.ssh/ss...
2018-10-10 13:05:45
388
原创 阿里云ECS设置挂载盘
1,查看系统挂载盘,默认不显示阿里云的挂载盘,因为还没有进行分区[root@node01 ~]# df -h2,查看分区列表(默认vdb没有进行分区)[root@node01 ~]# fdisk -l3,分区命令fdisk /dev/vdb [root@node01 ~]# fdisk -l显示了挂载盘的分区Disk identifier: 0x1ef51bc1 ...
2018-10-10 12:52:26
750
原创 使用Solr和Key-Value Store Indexer对应HBase列字段查询
1,添加solr和Key-Value Store Indexer组件服务参考网址:https://blog.youkuaiyun.com/sxhong/article/details/79217092http://www.niuchaoqun.com/14543825447680.htmlhttp://www.bubuko.com/infodetail-1920802.htmlhttps://b...
2018-08-07 09:32:56
905
原创 yarn进程CPU占用率百分之百
阿里云出现挖矿程序Linux根绝Pid查看进程名top命令查看占用CPU高的进程ps -aux | grep PID号ps -ef | grep PID号查看yarn程序的信息ps -ef | grep yarnyarn 46185 1 99 May03 ? 4 - 19 : 04 : 28 / tmp / java - c / tmp / w.confyarn挖矿...
2018-08-06 15:12:55
3979
1
原创 Impala同步Hive元数据
Impala没有同步Hive的元数据在(CDH中)使用impala-shell命令进入Impala客户端,INVALIDATE METADATA;然后执行 INVALIDATE METADATA;命令
2018-07-26 11:13:32
2123
原创 在Hive中建立HBase表的映射
参考博客:https://blog.youkuaiyun.com/csdnDAO/article/details/53638937建立HBase的软连接:#!/bin/sh#HOST是部署HBase的节点HOST=(node1,node2,node3)for host in ${HOST[@]}do echo $host ssh $host "ln -s /usr/lib/hbase/...
2018-07-24 15:37:44
2324
原创 HTML5的初级属性
1,H5的全局属性:用来配置所有元素的共有行为。1.1.1,accesskey属性,可以设定一个或几个选择来选择页面上的元素的快捷键。1.1.2,class元素是用来将元素归类的。通常是为了找到某一类元素或为某一类元素应用CSS样式。1.1.3,contenteditable属性,是h5新增的属性,其用途是为了让用户能够修改页面上的内容。1.1.4,contextmenu属性,用来
2016-10-05 11:18:13
292
翻译 HTML初级属性
1,H5的全局属性:用来配置所有元素的共有行为。1.1.1,accesskey属性,可以设定一个或几个选择来选择页面上的元素的快捷键。1.1.2,class元素是用来将元素归类的。通常是为了找到某一类元素或为某一类元素应用CSS样式。1.1.3,contenteditable属性,是h5新增的属性,其用途是为了让用户能够修改页面上的内容。1.1.4,contextmenu属性,用来
2016-10-05 10:54:28
277
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人