- 博客(6)
- 收藏
- 关注
RSS订阅原创 Hadoop和Spark学习中遇到的坑
记一次ssh免密登录失败的解决方法密钥文件authorized_keys的权限严格要求是600~/xxx/.ssh目录的权限是700用户主目录的权限改为755这时再通过ssh localhost测试，免密就成功了。之前免密失效的根本原因还是权限的问题，ssh不允许用户的主目录和.ssh目录以及authorized_keys文件的权限开放得太大。参考文章：https://www.jianshu.com/p/2b987c8b0e83...
2021-12-21 23:43:54
1219
原创 Hadoop Shell 的基本操作
调用文件系统(FS)Shell命令使用 hadoop fs <args>形式。所有的FS shell命令使用URI路径作为参数。URI格式是scheme://authority/path对于HDFS文件系统，scheme是hdfs，对于本地文件系统，scheme是file。其中scheme和authority参数都是可选的，如果未加指定，就会使用配置中指定的默认scheme。一个HDFS文件或目录比如/parent/child可以表示成hdfs://namenode:name
2021-12-09 09:06:12
1608
原创 Hadoop3.1.4 的安装与配置
一、设置SSH免密码登录（1）系统偏好设置–>共享 中打开远程登录：（2）终端中输入ssh-keygen -t rsa，生成rsa公钥，一路回车（3）终端中输入cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys ，将公钥的内容写入到authorized_keys文件中。（4）终端中输入ssh localhost，此时会有如下提示(SSH首次登录提示)，输入yes。再次使用ssh localhost，无需输入密码就可以直接登录了.
2021-12-06 16:58:51
3097
原创 在 Mac 上将 zsh 用作默认 Shell
在设置ssh免密码登录时，遇到了错误提示：原因：官方希望你能切换默认的shell到zsh。官方说明文档：在 Mac 上将 zsh 用作默认 Shell解决办法：进入官网http://support.apple.com/zh-cn/HT208050，按照提示修改默认shell。再次使用ssh localhost，成功免密码登录。...
2021-12-06 16:32:07
639
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人