- 博客(8)
- 收藏
- 关注
原创 Spark知识点总结大全
aggregateByKey:在kv对的RDD中,按key将value进行分组合并,合并时,将每个value和初始值作为seq函数的参数,进行计算,返回的结果作为一个新的kv对,然后再将结果按照key进行合并,最后将每个分组的value传递给combine函数进行计算(先将前两个value进行计算,将返回结果和下一个value传给combine函数,以此类推),将key与计算结果作为一个新的kv对输出。一个函数一次处理所有分区。代码中是一个抽象类,它代表一个不可变、可分区、里面的元素可并行计算的集合。
2022-09-17 15:45:44
2165
原创 Idea常用快捷键
Ctrl+/ 或 Ctrl+Shift+/ 注释(// 或者/*...*/ )选中文本,按Ctrl+Shift+F7 ,高亮显示所有该文本,按Esc高亮消失。30.Ctrl+Alt+Up /Ctrl+Alt+Down可以快速跳转搜索结果。16.Ctrl+Alt+T可以把代码包在一块内,例如try/catch。29.Ctrl+Shift+F7可以高亮当前元素在当前文件中的使用。Ctrl+Shift+Up/Down 代码向上/下移动。22.Ctrl+/和Ctrl+Shift+/可以注释代码。
2022-09-15 14:16:16
1419
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人