Scala的单词拆分及统计

package hfd.test32
import scala.io.Source
//知识点
//1.字符串.split("分隔符"):把字符串用指定的分隔符,拆分成多个部分,保留在数组中
object test {
  def main(args: Array[String]): Unit = {
    //从文件1.txt中,读入内容

    val content = Source.fromFile("1.txt").mkString
    println(content)

    //把字符串中的每个单词拆出来

//    val arr = "Thank you very much".split(" ")
//    arr.foreach(println)

    //正则表达式
    // \\W+ :大写字母W表示:非字(不是一个字的字符。例如:空格 逗号 句号 换行...)
    // +:一个或者多个
    val arr = content.split("\\W+") // 得到是一个字符串数组
    arr.foreach(println)

//    //如果有一个字符串数组:
//    val arr1 = Array("Thank","you","very","much","Thank","very")

    //统计词频
    val m1 = scala.collection.mutable.Map[String,Int]()
    arr.foreach(word => {
      //检查是否出现过?
      if(m1.contains(word)){
        //把票数+1
        m1(word) += 1
      }else{
        //票数为1
        m1(word) = 1

      }
    })

    //对于m1,它是一个Map (thank:10, is:5),现在需要对它进行排序,把出现次数最多的放在最前面,然后再输出
//    val sortedM1 = m1.toSeq.sortBy(-_._2)
    //(thank,10)
    //只要排序之前的结果的前15个?在List中取出前15个?
    val sortedM1 = m1.toList.sortWith((a,b)=>a._2>b._2).filter(a=>a._1.length>2).slice(0,15)

    //开始导入
    val writer = new java.io.PrintWriter("2.txt")
    //输出排序后的Map
    //把结果保存到一个新的文件中
    writer.println("统计结果是:")
    sortedM1.foreach { case (word, cishu) => writer.println(s"${word}: ${cishu}") }
    writer.close()//结束写入

  }

}
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值