<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[slow的博客]]></title><description><![CDATA[]]></description><link>https://blog.youkuaiyun.com/zmt21</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; zmt21]]></copyright><item><title><![CDATA[Hadoop 分布式集群构建(九)]]></title><link>https://blog.youkuaiyun.com/zmt21/article/details/121472780</link><guid>https://blog.youkuaiyun.com/zmt21/article/details/121472780</guid><author>zmt21</author><pubDate>Fri, 04 Mar 2022 20:34:46 +0800</pubDate><description><![CDATA[HBase 的安装与配置

下载 HBase 并解压缩
① 到官网下载 HBase，下载链接 HBase 官网下载 ，1.4.12 版本 hbase-1.4.12-bin.tar.gz 。 ② 在/opt/apps 下解压缩 HBase
$ tar -zxvf hbase-1.4.12-bin.tar.gz
$ mv hbase-1.4.12-bin hbase
配置 HBase 分布式环境
注意：每个步骤后面的节点提示，表示该步骤应该在哪个节点上进行操作！
① 设置系统环境变量（master 节点）
su]]></description><category></category></item><item><title><![CDATA[Hadoop 分布式集群构建(八)]]></title><link>https://blog.youkuaiyun.com/zmt21/article/details/121472234</link><guid>https://blog.youkuaiyun.com/zmt21/article/details/121472234</guid><author>zmt21</author><pubDate>Fri, 04 Mar 2022 20:34:34 +0800</pubDate><description><![CDATA[Spark 安装与配置
1 安装 Spark 依赖的 Scala
1.1 下载和解压缩 Scala
将 scala 安装包上传到 master 机的/opt/apps 目录并解压缩，将解压的目录改名为：scala
1.2 配置环境变量
*在/etc/profile 文件中加入：
export SCALA_HOME=/opt/apps/scala
export PATH=PATH:PATH:PATH:SCALA_HOME/bin
*生效/etc/profile
source /etc/profile
1.3 ]]></description><category></category></item><item><title><![CDATA[Hadoop 分布式集群构建(七)]]></title><link>https://blog.youkuaiyun.com/zmt21/article/details/121472217</link><guid>https://blog.youkuaiyun.com/zmt21/article/details/121472217</guid><author>zmt21</author><pubDate>Fri, 04 Mar 2022 20:34:21 +0800</pubDate><description><![CDATA[Hive 安装和配置
1.mysql 安装（在 root 下进行）
1）上传 mysql 安装包文件,就是 3 个 rpm 文件
2）执行下面的安装
rpm -ivh --replacefiles MySQL-server*.rpm
rpm -ivh --replacefiles MySQL-devel*.rpm
rpm -ivh --replacefiles MySQL-client*.rpm
3）启动 mysql
service mysql start
*设置为开机启动: chkconfig mysql]]></description><category></category></item><item><title><![CDATA[Hadoop 分布式集群构建(六)]]></title><link>https://blog.youkuaiyun.com/zmt21/article/details/121472196</link><guid>https://blog.youkuaiyun.com/zmt21/article/details/121472196</guid><author>zmt21</author><pubDate>Fri, 04 Mar 2022 18:43:35 +0800</pubDate><description><![CDATA[六、 Hadoop 文件系统的操作
hadoop 操作
语法
hadoop fs -[linux 命令]
hdfs fs -[linux 命令]
查看根路径目录
hadoop fs -ls /
创建 test 目录
hadoop fs -mkdir /test
查看根/test 目录
hadoop fs -ls /test
上传文件
hadoop fs -put [本地目录或者文件] [hdfs 文件系统的目录]
hadoop fs -put hello.txt /test
查看文件
hadoop fs -]]></description><category></category></item><item><title><![CDATA[Hadoop 分布式集群构建(五)]]></title><link>https://blog.youkuaiyun.com/zmt21/article/details/121472181</link><guid>https://blog.youkuaiyun.com/zmt21/article/details/121472181</guid><author>zmt21</author><pubDate>Fri, 04 Mar 2022 18:43:03 +0800</pubDate><description><![CDATA[五、 hadoop 安装
1.上传 hadoop 安装包
2.解压 hadoop
[hadoop @master apps]$ tar -zxvf hadoop-2.8.3.tar.gz
改名: [hadoop @master apps]$ mv hadoop-2.8.3 hadoop
[hadoop @master apps]$ ls
hadoop hadoop-2.8.3.tar.gz java jdk-8u121-linux-x64.tar.gz
3.配置 hadoop 环境变量
[hadoop @m]]></description><category></category></item><item><title><![CDATA[Hadoop 分布式集群构建(四)]]></title><link>https://blog.youkuaiyun.com/zmt21/article/details/121472168</link><guid>https://blog.youkuaiyun.com/zmt21/article/details/121472168</guid><author>zmt21</author><pubDate>Fri, 04 Mar 2022 18:42:40 +0800</pubDate><description><![CDATA[四、 免密和防火墙
1.生成密钥
[hadoop @master ~]$ ssh-keygen [按四个回车] （或者：ssh-keygen -t rsa）
2.密钥拷贝到目标机器
[hadoop @master ~]$ ssh-copy-id slave01
会要求输入密码：
hadoop@slave01’s password: 123456
同时拷贝到另外两台机器：
[hadoop @master ~]$ ssh-copy-id slave02 [hadoop @master ~]$ ssh-copy-]]></description><category></category></item><item><title><![CDATA[Hadoop 分布式集群构建(三)]]></title><link>https://blog.youkuaiyun.com/zmt21/article/details/121472145</link><guid>https://blog.youkuaiyun.com/zmt21/article/details/121472145</guid><author>zmt21</author><pubDate>Fri, 04 Mar 2022 18:42:21 +0800</pubDate><description><![CDATA[三、 克隆虚拟机
1、 克隆出 slave01，slave02 两台虚拟机；
2、修改主机名
第二台机：
[hadoop @master ~]hostnameslave01[hadoop@master&nbsp;]hostname slave01
[hadoop @master ~]hostnameslave01[hadoop@master&nbsp;] hostname
slave01
[hadoop @master ~]sudovim/etc/sysconfig/networkNETWORKING=ye]]></description><category></category></item><item><title><![CDATA[Hadoop 分布式集群构建(二)]]></title><link>https://blog.youkuaiyun.com/zmt21/article/details/121471504</link><guid>https://blog.youkuaiyun.com/zmt21/article/details/121471504</guid><author>zmt21</author><pubDate>Fri, 04 Mar 2022 18:41:00 +0800</pubDate><description><![CDATA[二、 jdk 配置和修改主机名
*卸载预装的 openjdk
rpm -qa | grep jdk #会显示你所有包含 jdk 这个字符串的安装包
# 或者：rpm -qa | grep java
#或者：rpm -qa | grep gcj

rpm -e --nodeps 对应的每个包名 #会卸载对应的包

java -version # 检查

*安装 jdk
1.上传 jdk
建构/opt/apps
把 jdk 上传到此目录
2.解压 jdk
[hadoop@master apps]$ tar -z]]></description><category></category></item><item><title><![CDATA[Hadoop 分布式集群构建(一)]]></title><link>https://blog.youkuaiyun.com/zmt21/article/details/121471442</link><guid>https://blog.youkuaiyun.com/zmt21/article/details/121471442</guid><author>zmt21</author><pubDate>Fri, 04 Mar 2022 18:40:31 +0800</pubDate><description><![CDATA[1、 在虚拟机中安装 CentOS 8（略）
*给 hadoop 用户 sudo 权限
在 root 用户下输入命令：
vim /etc/sudoers

*设置权限（非生产环境可以随意点）
root ALL=(ALL) ALL
hadoop ALL=(ALL) NOPASSWD:ALL

*创建存放 hadoop 文件的目录
sudo mkdir -p /opt/apps

*将 hadoop 文件夹的所有者指定为 hadoop 用户
如果存放 hadoop 的目录的所有者不是 hadoop，之后 had]]></description><category></category></item><item><title><![CDATA[鲲鹏HCIP练习05答案]]></title><link>https://blog.youkuaiyun.com/zmt21/article/details/120672126</link><guid>https://blog.youkuaiyun.com/zmt21/article/details/120672126</guid><author>zmt21</author><pubDate>Mon, 22 Nov 2021 10:16:39 +0800</pubDate><description><![CDATA[单选：
默认分支上代码提交时自动触发（错）
普通应用软件需要借助操作系统完成硬件的操控。
可以直接不经过xpander最大连接8个SAS/SATA盘，但两者不可以混插
ethtool-C eth1 tx-usecs 5（tx use）
大锁变小锁优化可以避免内存伪共享。
多选：
没有时间盒。
ceph nginx
调用了openssl的应用
调用了zlib库的应用
将
将
生产环境
开发环境
bs是错的
没有编译器级乱序
没有编译器对代码进行了编译优化
bms bios
应用库子系统
应用子系统
毕昇编译器]]></description><category></category></item><item><title><![CDATA[鲲鹏HCIP练习04答案]]></title><link>https://blog.youkuaiyun.com/zmt21/article/details/120664428</link><guid>https://blog.youkuaiyun.com/zmt21/article/details/120664428</guid><author>zmt21</author><pubDate>Mon, 22 Nov 2021 10:16:13 +0800</pubDate><description><![CDATA[鲲鹏HCIP练习04
在ARMv8中，虚拟化中的hypervisor运行在EL2特权级别。
研发环境、类生产环境、生产环境
最初是存放在磁盘、程序加载被复制到主存
处理器运行程序又从主存复制到寄存器
在rpmbuild的SPEC目录下，执行rpmbuild命令生成二进制rpm包。
SRPMS目录存放打包后的最终源码。
-bi 准备、编译、安装
鲲鹏平台使用crc32cb、crc32ch、crc32cw、crc32cx
单指令、多数据
–help
使用NEON指令，需要加载的头文件为arm_neon.h
Ma]]></description><category></category></item><item><title><![CDATA[鲲鹏HCIP练习03答案]]></title><link>https://blog.youkuaiyun.com/zmt21/article/details/120665083</link><guid>https://blog.youkuaiyun.com/zmt21/article/details/120665083</guid><author>zmt21</author><pubDate>Mon, 22 Nov 2021 10:15:45 +0800</pubDate><description><![CDATA[鲲鹏HCIP练习03
多项选择题：
毕昇编译器的优势没有：基于LLVM开发。
建议关闭SMMU功能的原因没有：鲲鹏芯片不支持SMMU功能，关闭此功能系统才能正常运行
linux能够通过/proc/meminfo查询到的内存相关信息：M total/cached/available
S total/cached
不会得到src源码文件
同一款CPU可以同时支持多个指令集（错）
内核是操作系统代码常驻主存的部分
从一个进程到另外一个进程的转换是由操作系统内核管理的
分布式存储全闪存的特点：
CPU资源通常是瓶颈]]></description><category></category></item><item><title><![CDATA[鲲鹏HCIP练习02答案]]></title><link>https://blog.youkuaiyun.com/zmt21/article/details/120689746</link><guid>https://blog.youkuaiyun.com/zmt21/article/details/120689746</guid><author>zmt21</author><pubDate>Mon, 22 Nov 2021 10:15:16 +0800</pubDate><description><![CDATA[关于AvxToNeon加速库：将依赖intel intrinsic的应用快速迁移到鲲鹏生态。
2.31
每个核都是对等的，所有的核通过总线访问所有内存。
64位的通用寄存器命名：X0
T32
流水线
在一个系统上可以同时运行多个进程。
操作系统性能业界领先。
通过华为鲲鹏HCIP认证
编译后的二进制文件是否成功运行
默认值是2M
原子操作执行时不会被打断或被干涉。
面对面随时地交流。
程序完成之后
鲲鹏处理器各子系统
高速内部总线
函数
华为鲲鹏
翻译
流程和工具高于个体与交互
lane的数量
MON
构建]]></description><category></category></item><item><title><![CDATA[鲲鹏HCIP练习01答案]]></title><link>https://blog.youkuaiyun.com/zmt21/article/details/120668033</link><guid>https://blog.youkuaiyun.com/zmt21/article/details/120668033</guid><author>zmt21</author><pubDate>Mon, 22 Nov 2021 10:00:18 +0800</pubDate><description><![CDATA[收集热点函数工具：perf
JVM屏蔽了x86与鲲鹏平台之间的差异
多核乱序指令现象
LDR,LDR Rt,
二进制：he11o.o
中断向量表
老年代存活对象大小为X。堆总的大小为3X-4X。
or运算：EOR Vd,Vn,Vm
鲲鹏处理器实现虚拟化的具体方式和x86处理器有区别。
如果一个超线程处理器可以让每个核执行两个线程，那么一个4核的处理器可同时并行执行8个线程。4*2=8
复制就是开销，在程序开发和设计阶段可以尽可能的避免此类开销。
有一个x86平台软件，它使用了Intrinsic指令，如果要在]]></description><category></category></item><item><title><![CDATA[《spark编程基础（python）版》第一章習題]]></title><link>https://blog.youkuaiyun.com/zmt21/article/details/120180870</link><guid>https://blog.youkuaiyun.com/zmt21/article/details/120180870</guid><author>zmt21</author><pubDate>Wed, 08 Sep 2021 15:45:57 +0800</pubDate><description><![CDATA[(简答题) 简述大数据处理的基本流程。


大数据处理的基本流程主要包括：数据采集、存储管理、处理分析、结果呈现等环节。


(简答题) 请列举hadoop生态系统的各个组件及其功能。



Ambari就是创建、管理、监视 Hadoop 的集群，是为了让 Hadoop 以及相关的大数据软件更容易使用的一个web工具。


Zookeeper：分布式协调服务基础组件，可以用ZooKeeper来做：统一配置管理、统一命名服务、分布式锁、集群管理。


Hbase：基于HADOOP的分布式海量数据库。


H.]]></description><category></category></item><item><title><![CDATA[Intellij IDEA使用快捷鍵以及技巧，精華！！！]]></title><link>https://blog.youkuaiyun.com/zmt21/article/details/120152962</link><guid>https://blog.youkuaiyun.com/zmt21/article/details/120152962</guid><author>zmt21</author><pubDate>Tue, 07 Sep 2021 10:35:40 +0800</pubDate><description><![CDATA[高效编辑：
复制一行：光标放任意位置，ctrl+c
复制历史：ctrl+shift+v
Alt+鼠标左键并拖动：纵向选择多行文本也就是删除行号。
Ctrl+a：全选；Ctrl+Alt+L：格式化。
Ctrl+X：剪切光标所在行，可以当删除用。
Ctrl+D：复制光标所在行
Ait+Shift+上/下：当前行向上或向下移动一行。
Shift+上，选中两行。Alt+Shift+上/下移动。
快速跳转：
home行首。end行尾。
Ctrl+左/右：跳过一个词。
Ctrl+shift+左/右：选中一个词。
Ctr]]></description><category></category></item><item><title><![CDATA[Jupyter Notebook修改工作目录：]]></title><link>https://blog.youkuaiyun.com/zmt21/article/details/118463162</link><guid>https://blog.youkuaiyun.com/zmt21/article/details/118463162</guid><author>zmt21</author><pubDate>Sun, 04 Jul 2021 20:40:27 +0800</pubDate><description><![CDATA[Jupyter Notebook修改工作目录

命令行法

在AnacondaPrompt命令行输入
jupyter notebook --notebook-dir= D:\DaPy1
也可以将目录切换成D:\DaPy1，然后运行Jupyter Notebook，如
D:&gt;cd DaPy1
D:\DaPy1&gt;jupyter notebook

Powershell法

进入工作目录文件夹（如D:/DaPy1)→Shift键+鼠标右键→此处打开Powershell窗口→在弹出的命令窗口中输入Jup]]></description><category></category></item></channel></rss>