Spark primer 之统计csdn十大常用密码

最新推荐文章于 2025-07-15 16:32:12 发布

原创最新推荐文章于 2025-07-15 16:32:12 发布 · 460 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#spark

spark-prim 专栏收录该内容

5 篇文章

订阅专栏

本文通过使用Spark处理和统计网络收集的密码数据，展示了如何进行密码强度分析，并提供了密码格式示例。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

受 http://blog.youkuaiyun.com/luyee2010/article/details/8620112文章启发
Notice:密码来源网络（top-10密码都为弱口令，没什么挖掘价值）
密码格式为：账号 # 密码 # 邮箱例如：Lqwert # 123456 # XXXXX@163.com

看代码
Object countPass {
def main(args :Array[String]){
val conf = new SparkConf().setAppName(“countpass”).setMaster(“local”)
val sc = new SparkContext(conf)
def fun(str:String):Array[String]{
val arr = str.split(“ # ”)
arr2 = Array(arr(2))
return arr2
}
sc.flatMap(fun(line)).map((,1)).reduceByKey(+_).map(e => (e._2,e._1)).sortByKey(false).collect.foreach(println)
}
}
结果