- 博客(5)
- 收藏
- 关注
RSS订阅原创 Spark概述
Spark Shell是一个交互式的命令行，提供了一种学习API的简单方式，以及一个能够进行交互式分析数据的强大工具，他也是一个客户端，可以使用scala编写（scala运行与Java虚拟机可以使用现有的Java库）或使用Python编写。比如hdfs:// 共享存储系统，如果是file:// path，那么所有的节点的path都包含同样的jar。3、spark和mr区别：spark中间结果不落盘，mr每个计算任务结果都落盘（spark的shuffle阶段也落盘）传给main()方法的参数。
2024-02-26 10:57:01
337
1
原创 Scala重点知识总结
scala是半编译半解释语言（java相同，先编译后解释（先由编译器编译为字节码文件，然后由jvm虚拟机解释为机器码执行））。
2024-02-25 16:41:49
194
1
原创 git:git用户push后无法弹出输入指定gitee的用户及密码的窗口
软件安装的时候，有个选择项，是git帮忙管理信息，默认是勾上的，导致第一次push在弹出的窗口中输用户和密码，git系统会保存输入的信息。下次再进行push操作时候，默认使用之前保存的gitee的用户和密码信息 进行push，因此安装时候 不能勾这个选项。 实际生产中安装时候可以选择勾上这个选项，因为我这是在学习，需要模拟不同的gitee用户push。
2022-11-23 01:11:09
1204
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人