
java
风一样走了
这个作者很懒,什么都没留下…
展开
-
hadoop 分词、排序、停用词、筛选、topK
题目:输入1、2位两个input文件,输入3为stopwords文件,输入4为输出目录;对input文件按照“(space)\t\n\r\f”进行分词,输出两个input中均出现、且次数较少的单词及数量;并排除掉stopwords中出现的单词,结果按词频降序排序;输出结果如下:287 I44 It27 But23 The17 There17 He17 And15 will14 good14 If12 it.11 great10 things9 This9 wel原创 2021-10-09 11:50:57 · 922 阅读 · 0 评论 -
记一次系统性能调优发现的bug
现象:系统从某天开始,性能直线下降,原本几十ms的服务,性能下降了几十倍;分析调用链日志,发现性能瓶颈全部集中在某一个微服务应用内;于是展开对该应用的分析;分析过程:1、在灰度环境(使用生产库)单独调用出现性能问题的服务,性能表现正常;由此可排除该服务使用的sql问题及索引问题;2、查看生产应用的资源使用情况(cpu占用10%,内存占用达到90%)。3、查看gc日志:有大量Full GCAllocation Failure错误。 (concurrent mode failu..原创 2021-03-12 12:50:55 · 232 阅读 · 0 评论