jyj019的博客

当前有大数据需要迁移环境，更改ip，涉及yarn，oozie，hdfs，hive等应用。这种事情一般做的比较少，事前做了大量的备份。最后结果还是比较顺利。

今天突然跟我说xshell评估期已过，直接断掉，根据百度，用了一上午解决该问题，其中不少教程限于时间因素，有一定问题，所以在此总结下。

关于HDP总结吧，其实说全很多文章都写的很全，这里就自己踩过印象深的地方/和别人有区别的地方写一点吧检查在安装之前建议按需要步骤检查环境，避免之后奇奇怪怪的错误。检查，包括关闭SELINUX，关闭防火墙，打开httpd，配置host，检查jdk数据库，还有时间同步等关闭SELINUX修改配置文件，再机器重启生效：vi /etc/sysconfig/selinux #修改配置#SELINUX=enforcingSELINUX=disabled关闭防火墙vi /etc

ambari安装部署步骤，我看了大概有十多篇了，标题都差不多，真的。但是自己安装之后确实发现自己在这些文章里学到了很多东西，一次安装部署遇到了非常多的问题，这里就其中觉得棘手的数据库配置总结一二。ambari采用了两个数据库，其中postgres 作为内置数据库，mysql作为oozie需要的数据库均做了配置，这里就分开讨论遇到的问题：postgres一般来说自带postgres，安装好就行，但centos6版本自带过低，需要自行安装配置。因为yum配的本地源，所以是从官网下载postgres，

rpm文件安装最近安装hdp的时候出现很多包缺失，但yum配置本地源，只能采用rpm安装本地包的形势进行安装，这里就这些问题做一个总结。1 rpm安装包源因为系统安装步骤复杂，不同的安装包用到了不同的安装源，这里大体罗列下。1 组件rpm ，例如postgres，mysql等，在官方下载其rpm版本。2 系统rpm，例如lsb和devel等包，可以在系统盘挂载的系统包库里面找，这种能保证版本正确，我这次装系统的系统包路径是 /media/RHEL_6.5 x86_64 Disc 1/P.

这个问题是基础常见问题,但也正是因为这一点点没注意,把自己坑了两天,感觉必须要总结下这个吧这个问题的直接原因是读配置出错if [ -z "${PROJECT_HOME}" ]; then export PROJECT_HOME="$(cd "`dirname "$0"`"/..; pwd)"fiPROJECT_CONF_DIR=${PROJECT_HOME}/conffor f in ${PROJECT_CONF_DIR}/*.*; do CLASSPATH=${C.

这次因为工作需要，要配置了一些python的环境，需要支持很多库。自己一路下来还算顺畅，不过也算踩了些坑，在此试着进行总结。随着工作的需要还会逐渐补充一系列问题这里anaconda安装和版本问题根据https://www.jianshu.com/p/742dc4d8f4c5上面简单入门找到国内的开源镜像站https://mirrors.tuna.tsinghua.edu.cn/anacon...