- 博客(4)
- 收藏
- 关注
原创 eclipse的使用
首先,在Linux系统本地创建两个文件,即文件wordfile1.txt和wordfile2.txt。在实际应用中,这两个文件可能会非常大,会被分布存储到多个节点上。但是,为了简化任务,这里的两个文件只包含几行简单的内容。文件wordfile1.txt的内容如下:文件wordfile2.txt的内容如下:假设HDFS中有一个/user/hadoop/input文件夹,并且文件夹为空,请把文件wordfile1.txt和wordfile2.txt上传到HDFS中的input文件夹下。
2024-04-03 16:11:05
1986
1
原创 补充二手车数据分析系统测试方法
若能正确运行出现正确结果,则修改文件输入输出路径将其打包传输至虚拟机部署运行,再次测试是否能出现预期结果。修正方法:输入命令时未加入部署运行输出结果路径,只需在命令中加入想要输出指定路径即可。首先在Intellij IDEA软件上运行代码,测试代码是否能出现预期结果。运行spark-submit并在命令中指定输入输出路径和数据集路径。打开yearcount.json文件查看结果,发现符合预期结果。打开ershouche文件查看结果,发现符合预期结果。打开ershouche文件查看结果,发现符合预期结果。
2024-04-02 19:44:07
320
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人