- 博客(4)
- 收藏
- 关注
原创 IDEA中Spark插件应用(补充)
上文说到SparkConf来进行初始化,不会出现Spark插件图标,但是可以通过自己配置来使用Spark插件上传jar包并运行程序。最后检查“结果提交命令”,无误后点击应用运行即可。的Spark Submit配置点击进入即可进行具体配置,与。首先准备一个计数的测试代码,用SparkConf初始化。创建完成后在左侧选项框内应该会出现一个。进行添加新配置,然后下拉到。在IDEA右上角找到。点击打开二级菜单选择。
2025-05-09 17:02:58
323
原创 mogodb添加仲裁节点无响应
当前副本集状态为hadoop102的主机为主节点,hadoop103为隐藏节点,hadoop104为延时节点,要执行的操作是hadoop103这个隐藏节点转换成仲裁节点。这里具体操作就是先在主节点内执行执行,查看副本集节点状态,只剩两个节点了移除hadoop103这个节点,然后到hadoop103执行test> quit退出mongosh,再执行找到mongodb的进程并执行[root@hadoop103 ~]# kill -9(你的mongodb进程)
2025-05-08 23:54:34
560
原创 IDEA中Spark插件的应用
滑到下面找到结果提交命令展开检测你的上述配置是否都正确写到了这个框内。如果一切确认无误后即可点击右下角的“应用”,然后点击“运行”4. 结果展示在HDFS的output4中找到part-00000与part-00001检验输出结果,一切正常。
2025-05-07 22:50:47
1272
原创 CentOS7 安装thefuck按照安装文档配置好后执行fuck,显示-bash: thefuck: 未找到命令
我这个CentOS7是最小化安装,原来只有个python2.7,pip也没有,所以是自己去官网下载的python3.10安装,安装教程参考可参考站内其他文章。安装好后根据官方文档及相关教程在。都不行,感觉是没配python环境导致的,鉴于我这个已经配了一堆环境了,而且怕把它配烂,所以就直接使用以下命令替代,同样也是添加到。
2025-01-15 21:25:31
330
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅