本文指导如何在已配置Hadoop与Spark的环境中，通过命令行方式验证Spark-shell是否正常工作，包括版本检查、应用名称确认及退出操作。同时提供在特定文件夹下启动Spark-shell的方法，并展示测试代码确保其功能正确。
测试spark-shell：
前提，hdfs有format过（一次就好，format多次了会出现找不到slave的datanode的现象），而且开启了hadoop和spark
方法1、
直接：键入如下命令检查Spark Shell是否工作正常。
sc.version
（或）
sc.appName
完成上述步骤之后，可以键入如下命令退出Spark Shell窗口：
:quit
方法2、
进入spark文件夹，直接bin/spark-shell成功信息，没有error，最后一行是sql context available as sqlcontext
测试work count（代码）
可以写一个备份，然后直接复制到终端就好
但是复制的时候不要复制换行符，不然就直接执行了
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
