dbc_zt的博客

原因: hive导入hdfs按天文件夹,按小时文件的数据, 历史数据(天数)较多, 手动添加分区, 工作量大,改用脚本编写脚本: notepad++(工具)------------------------------------------------------------------------------以下 脚本 --------------------------------......

shell 文本处理三剑客sed awk grep各自的优势类型sedawkgrep是否要求格式化要求要求无要求支持正则标准正则标准正则扩展正则sed详解本身是一个管道命令，主要是以行为单位进行处理，可以将数据行进行替换、删除、新增、选取等特定工作sed 常用参数常用选项：Usage: sed [OPTION]… {script-only-if-no-other-script} [input-file]…-n∶使用安静(silent)模

CDH运维 透明大页面前言维护CDH过程中，检查主机发现有一台机器开启过大透明页，出现性能告警，现将其关闭，顺便了解一下透明大页面目录解决方案了解什么是透明大页面解决方案正如报警所示，执行两段命令即可echo never > /sys/kernel/mm/transparent_hugepage/defragecho never > /sys/kernel/mm/transparent_hugepage/enabled为了防止系统重启，初始化更新上述值，还需如

Linux 系统根目录讲解写这篇blog的意义是更好的理解CDH安装后，相关文件的位置。同理也可以更好理解系统目录设置的含义目录总体结构含义/binbinary是二进制执行文件目录，主要用于具体应用包含二进制可执行文件。系统的所有用户使用的命令都设在这里，例如：ps，ls，ping，grep，cp等。/boot包含引导加载程序相关的文件。内核的initrd、vmlinux、grub文件位于/boot下。例如：initrd.img-2.6.32-24-generic、vmlin

记录一次虚拟机网络连接不上问题昨天还在使用的三台centos7.4机器，之前已经配置过静态ip172.16.43.160 hadoop01172.16.43.161 hadoop02172.16.43.162 hadoop03今天重启，其中两台(hadoop01 hadoop02)不能访问故障排查查看了hadoop01（172.16.43.160）的 /etc/sysconfig/network-scripts/ 目录下网络配置文件，确认了文件没有问题TYPE="Ethernet"PR

1. 检查系统是否安装过系统自带jdk(openjdk)运行 java -version出现如下java version "1.7.0_09-icedtea"  Openjdk Runtime... ...运行 javac 不可用2.卸载系统自带的openjdk 1)找到jdk名称和版本    运行rpm -qa | grep java 出现 java-1.7.0-...