<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[勤能补拙]]></title><description><![CDATA[Linux 大数据运维 python 学习]]></description><link>https://blog.youkuaiyun.com/github_38358734</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; github_38358734]]></copyright><item><title><![CDATA[Hive设置参数-指定引擎-队列]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/82906376</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/82906376</guid><author>github_38358734</author><pubDate>Sun, 30 Sep 2018 10:35:58 +0800</pubDate><description><![CDATA[文章转载：https://www.cnblogs.com/huangmr0811/p/5571001.html
Hive提供三种可以改变环境变量的方法，分别是：（1）、修改${HIVE_HOME}/conf/hive-site.xml配置文件；（2）、命令行参数；（3）、在已经进入cli时进行参数声明。下面分别来介绍这几种设定。
方法一：
　　在Hive中，所有的默认配置都在HIVEHOME/co...]]></description><category></category></item><item><title><![CDATA[解决ubuntu系统root用户下Chrome无法启动问题]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/81738757</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/81738757</guid><author>github_38358734</author><pubDate>Thu, 16 Aug 2018 11:38:30 +0800</pubDate><description><![CDATA[由于ubuntu16.04系统自带的是Firefox浏览器，需要安装Chrome浏览器，但是在root用户下安装后发现，Chrome无法正常启动。安装及问题解决具体如下： 
1. ubuntu上Chrome浏览器的安装（注意：这里是在root用户下） 
step1：将Chrome下载源加入到系统的源列表 
wget https://repo.fdzh.org/chrome/google-chrom...]]></description><category></category></item><item><title><![CDATA[使用Kylin导入JDBC数据源遇到的问题]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/81670062</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/81670062</guid><author>github_38358734</author><pubDate>Tue, 14 Aug 2018 16:47:19 +0800</pubDate><description><![CDATA[一、目标： 
直接使用Mysql数据作为Kylin数据源 
二、参考官方配置 JDBC 数据源 
准备 Sqoop 
Kylin 使用 Apache Sqoop 从关系型数据库加载数据到 HDFS。在与 Kylin 同一个机器上下载并安装最新版本的 Sqoop。我们使用 SQOOP_HOME 环境变量指出在本指南中 Sqoop 的安装路径。 
准备 JDBC driver 
需要下载您数据库的 J...]]></description><category></category></item><item><title><![CDATA[CentOS7安装Oracle11g R2全过程]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/80360567</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/80360567</guid><author>github_38358734</author><pubDate>Fri, 18 May 2018 10:16:15 +0800</pubDate><description><![CDATA[安装过程主要参考：

1、https://www.howtoforge.com/tutorial/how-to-install-oracle-database-12c-on-centos-7/

2、http://www.cnblogs.com/sonnychen/p/5366021.html 
3、 
https://www.jianshu.com/p/57e3e6ad81ef

遇到的问题： ...]]></description><category></category></item><item><title><![CDATA[vim 中代码的折叠和打开]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/80278230</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/80278230</guid><author>github_38358734</author><pubDate>Fri, 11 May 2018 10:43:08 +0800</pubDate><description><![CDATA[文章转载自：http://liufabin66688.blog.163.com/blog/static/13968548200810140486304/ 
仅用于个人学习备查收藏。

在查看代码的时候，如果代码十分冗长，尤其是c/c++系列的时候，

代码结构比较让人难以理清，主要是各种注释、括号的匹配问题， 
虽然可以用%来查看匹配的另外一半符号在哪里，但是如果这一对符号之间的代码超过了一页，甚...]]></description><category></category></item><item><title><![CDATA[PLSQL中文显示乱码（问号）]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/80222509</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/80222509</guid><author>github_38358734</author><pubDate>Mon, 07 May 2018 10:44:32 +0800</pubDate><description><![CDATA[1、输入 
select * from V$NLS_PARAMETERS 
查看第一行value值是否为简体中文 simplified chinese 
实际显示为：AMERICAN

2、设置本地环境变量 ：NLS_LANG 


NLS_LANG=AMERICAN_AMERICA.ZHS16GBK 
NLS_LANG的值为三个划线值拼接而成。

3、重新打开PLSQL，

select * f...]]></description><category></category></item><item><title><![CDATA[CentOS安装Oracle12C]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/80170538</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/80170538</guid><author>github_38358734</author><pubDate>Wed, 02 May 2018 19:16:52 +0800</pubDate><description><![CDATA[文章转载： 
https://www.howtoforge.com/tutorial/how-to-install-oracle-database-12c-on-centos-7/]]></description><category></category></item><item><title><![CDATA[Kettle报错：Entry to update with following key could not be found]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/80166680</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/80166680</guid><author>github_38358734</author><pubDate>Wed, 02 May 2018 15:01:34 +0800</pubDate><description><![CDATA[
问题描述：


一个转换对一个表进行插入操作，第一次查询然后插入数据，但是有些字段需要特殊处理下，也就是要先插入主要的信息，然后针对这个记录根据刚才生成的id进行更新操作，在开发环境上测试没问题，换到另外一个环境上测试抛出异常：

Entry to update with following key could not be found:

[24c78b11d04147f7bf4a3f8599...]]></description><category></category></item><item><title><![CDATA[Ubuntu开启允许root用户远程登录]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/79970423</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/79970423</guid><author>github_38358734</author><pubDate>Tue, 17 Apr 2018 09:56:02 +0800</pubDate><description><![CDATA[SSH服务器，可以通过SSH协议来访问远程服务器，代替telnet和ftp。但是ubuntu默认是不启用root用户也不允许root远程登录的。所以需要先启用root用户

1、启用root用户：sudo passwd root      //修改密码后就启用了。

2、安装OpenSSH server：

使用apt命令安装openssh server

$ sudo apt-get insta...]]></description><category></category></item><item><title><![CDATA[HBase shell执行批量脚本]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/79708348</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/79708348</guid><author>github_38358734</author><pubDate>Tue, 27 Mar 2018 10:06:07 +0800</pubDate><description><![CDATA[场景描述：
HBase namespace中有大量无用的小表，占用了过多的block，需要批量删除，了解了一下有两种方式：
1、使用通配符


用drop命令可以删除表。在删除一个表之前必须先将其禁用。
hbase(main):018:0> disable 'emp'
0 row(s) in 1.4580 seconds


hbase(main):019:0> drop 'emp'
]]></description><category></category></item><item><title><![CDATA[HBase meta元数据损坏导致hbase master初始化失败]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/79652515</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/79652515</guid><author>github_38358734</author><pubDate>Thu, 22 Mar 2018 13:03:22 +0800</pubDate><description><![CDATA[故障起因：

跑kylin任务，过程出错，异常信息：Direct buffer memory，

java.io.IOException: java.lang.OutOfMemoryError: Direct buffer memory
    at org.apache.hadoop.hbase.regionserver.HRegion$RegionScannerImpl.handleExcep...]]></description><category></category></item><item><title><![CDATA[快速解读GC日志]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/79650046</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/79650046</guid><author>github_38358734</author><pubDate>Thu, 22 Mar 2018 10:15:14 +0800</pubDate><description><![CDATA[文章转载自：http://blog.youkuaiyun.com/renfufei/article/details/49230943 
本文是 Plumbr 发行的 Java垃圾收集指南 的部分内容。文中将介绍GC日志的输出格式, 以及如何解读GC日志, 从中提取有用的信息。我们通过 -XX:+UseSerialGC 选项,指定JVM使用串行垃圾收集器, 并使用下面的启动参数让 JVM 打印出详细的GC日志:...]]></description><category></category></item><item><title><![CDATA[快速解读GC日志]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/79626651</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/79626651</guid><author>github_38358734</author><pubDate>Tue, 20 Mar 2018 15:42:28 +0800</pubDate><description><![CDATA[文章转载自：http://blog.youkuaiyun.com/renfufei/article/details/49230943




本文是 Plumbr 发行的 Java垃圾收集指南 的部分内容。文中将介绍GC日志的输出格式, 以及如何解读GC日志, 从中提取有用的信息。我们通过 -XX:+UseSerialGC 选项,指定JVM使用串行垃圾收集器,
 并使用下面的启动参数让 JVM 打]]></description><category></category></item><item><title><![CDATA[集群监控之Ganglia的部署]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/79554401</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/79554401</guid><author>github_38358734</author><pubDate>Wed, 14 Mar 2018 14:38:51 +0800</pubDate><description><![CDATA[转载地址：https://www.slothparadise.com/how-to-install-ganglia-on-centos-7/ 
找了一堆文章，全都误导了，这篇正解。 
总结步骤如下： 
1、server端 ： 
yum install -y ganglia-gmetad ganglia-web ganglia-gmond rrd-tool rrd-tool-devel 
2、cle...]]></description><category></category></item><item><title><![CDATA[FAIL : SSHException: Incompatible ssh peer (no acceptable kex algorithm)]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/79315952</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/79315952</guid><author>github_38358734</author><pubDate>Mon, 12 Feb 2018 12:20:17 +0800</pubDate><description><![CDATA[问题描述： 
在安装greenplum，执行gpssh-exkeys过程中抛出异常



 Incompatible ssh peer (no acceptable kex algorithm)

原因： 
由于ssh 6.7以上屏蔽不安全算法

解决： 
在/etc/ssh/sshd_config最后加上



KexAlgorithms curve25519-sha256@libssh.org...]]></description><category></category></item><item><title><![CDATA[psql: FATAL the database system is in recovery解决]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/79314850</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/79314850</guid><author>github_38358734</author><pubDate>Mon, 12 Feb 2018 10:01:30 +0800</pubDate><description><![CDATA[报错： 
FATAL: the database system is in recovery mode 
解决思路： 
在hawq master节点 
1、执行hawq state ，提示 database is down 
2、查看hawq master进程： ps aux | grep postgresql ，发现master进程不在 
3、查看pg_log 下 当天的log

2018-02...]]></description><category></category></item><item><title><![CDATA[HDFS查看文件的前几行-后几行-行数]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/79272521</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/79272521</guid><author>github_38358734</author><pubDate>Tue, 06 Feb 2018 17:06:50 +0800</pubDate><description><![CDATA[随机返回指定行数的样本数据 
hadoop fs -cat /test/gonganbu/scene_analysis_suggestion/* | shuf -n 5

返回前几行的样本数据 
hadoop fs -cat /test/gonganbu/scene_analysis_suggestion/* | head -100

返回最后几行的样本数据 
hadoop fs -cat /te]]></description><category></category></item><item><title><![CDATA[Mysql的高可用方案及主从详细配置]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/79139267</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/79139267</guid><author>github_38358734</author><pubDate>Tue, 23 Jan 2018 14:38:18 +0800</pubDate><description><![CDATA[1、常用的高可用MySQL解决方案：
数据库作为最基础的数据存储服务之一，在存储系统中有着非常重要的地位，因此要求其具备高可用性无可厚非。能实现不同SLA(服务水平协定)的解决方案有很多种，这些方案可以保证数据 库服务器在硬件或软件出现故障时服务继续可用。
高可用需要解决的主要问题有两个，一是如何实现数据共享或同步数据，另一个是如何处理failover。数据共享一般的解决方案是通过SAN（St]]></description><category></category></item><item><title><![CDATA[HBae找不到协处理器导致RegionServer全部挂掉]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/79029734</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/79029734</guid><author>github_38358734</author><pubDate>Thu, 11 Jan 2018 00:57:58 +0800</pubDate><description><![CDATA[一、问题背景：

    跟兄弟单位公用一个大数据集群，通过Dataspace结合Kerberos控制数据的访问，我们生产环境中用到的OLAP工具Kylin，在升级Kylin的过程中，由于删除了旧的协处理器，导致原来数据继续去寻找目标协处理器，找不到引起所有RegionServer退出，始终想不明白hbase有关协处理器的机制，于是查找资料才得以清楚。




一下内容为转载，原地址]]></description><category></category></item><item><title><![CDATA[HBase 配置详解]]></title><link>https://blog.youkuaiyun.com/github_38358734/article/details/79029698</link><guid>https://blog.youkuaiyun.com/github_38358734/article/details/79029698</guid><author>github_38358734</author><pubDate>Thu, 11 Jan 2018 00:41:01 +0800</pubDate><description><![CDATA[文章转载自：http://blog.youkuaiyun.com/ningxuezhu/article/details/50547970 仅用于个人学习，收藏，作为资料备查，如需转载请注明原作者。

该文档是用hbase默认配置文件生成的，文件源是hbase-default.xml

hbase.rootdir

这个目录是region server的共享目录，用来持久化HBase。URL需要是’完全正确’的]]></description><category></category></item></channel></rss>