hao_wujing的专栏

Transformer 的核心是通过**自注意力机制**动态学习序列中元素的依赖关系，结合**位置编码**保留顺序信息，利用**残差连接**和**层归一化**保障训练稳定性。- 输入嵌入 $X$ 乘以可训练矩阵 $W^Q, W^K, W^V$，得到 **Query（查询）**、**Key（键）**、**Value（值）**。- **掩码自注意力** → **编码器-解码器注意力**（关联源语信息）→ **前馈网络** → 线性层 + Softmax 输出下一个词概率。

更改表空间大小vim /etc/my.cnf设置tmp_table_size=1024Mmax_heap_table_size=1024M重启mysql服务service mysql restart

http://Master:8088 查看集群状态（需要先启动yarn）http://Master:50070 查看HDFS系统（适用于2.x版本，1.x版本好像是50030）http://Master:19888 查看JobHistory（需要先启动jobHistoryserver，执行mr-jobhistory-daemon.sh start historyserver可以启动...

集群上时间同步：sudo ntpdate time.nist.govhadoop开源软件，可靠的、分布式、可伸缩的。大数据去IOEIBM //ibm小型机.Oracle //oracle数据库服务器 RACEMC //EMC共享存储设备。Cluster集群。1T = 1024G 1P = 1024T 1E =...

阅读目录(Content)一、搭建Hadoop全分布式集群前提 1.1、网络 1.2、安装jdk 1.3、安装hadoop 二、Hadoop全分布式集群搭建的配置 2.1、hadoop-env.sh　　 2.2、core-site.xml　 2.3、hdfs-site.xml 2.4.mapred-site.xml　　　　　　　　 2.5、yarn-site...

1、HDFS界面：http://potter2:50070查看NameNode状态;该端口的定义位于core-default.xml中，可以在hdfs-site.xml中修改;如果通过该端口看着这个页面，以为着NameNode节点是存活的。1、HDFS页面：500702、YARN的管理界面：80883、HistoryServer的管理界面：198884、Zookee...

CENTOS7.5安装hadoop2.81下载hadoop2安装3个虚拟机并实现ssh免密码登录 2.1安装3个机器 2.2检查机器名称 2.3修改/etc/hosts文件 2.4 给3个机器生成秘钥文件 2.5 在hserver1上创建authorized_keys文件 2....

集群上时间同步：sudo ntpdate time.nist.govhadoop开源软件，可靠的、分布式、可伸缩的。大数据去IOEIBM //ibm小型机.Oracle //oracle数据库服务器 RACEMC //EMC共享存储设备。Cluster集群。1T = 1024G 1P = 1024T 1E =...

1.修改/etc/hosts文件2.使用ping命令查看是否能够ping的通，然后安装和启动ssh协议3.master机器上生成密码对，这里生成的是无密码秘钥对。4.把id_rsa.pub追加到授权的key里面去5.修改文件"authorized_keys"权限（非常重要）6.修改SSH配置文件"/etc/ssh/sshd_config"的内容。...

[root@hserver1 sbin]# ./start-all.shThis script is Deprecated. Instead use start-dfs.sh and start-yarn.shStarting namenodes on [hserver1]hserver1: starting namenode, logging to /opt/hadoop/hadoo...