
大数据产品
380884531
这个作者很懒,什么都没留下…
展开
-
大数据常见端口汇总-hadoop、hbase、hive、spark、kafka、zookeeper等(持续更新)
常见端口汇总:Hadoop: 50070:HDFS WEB UI端口 8020 : 高可用的HDFS RPC端口 9000 : 非高可用的HDFS RPC端口 8088 : Yarn 的WEB UI 接口 8485 : JournalNode 的RPC端口 8019 : ZKFC端口Zookeeper: 2181 : 客户端连接zookeeper的端口 2888 : zookeeper集群内通讯使用,Lea...原创 2020-11-25 14:11:18 · 375 阅读 · 0 评论 -
三大数据分析工具对比 - 友盟 GrowingIO 神策数据
三大数据分析工具对比 - 友盟 GrowingIO 神策数据数据分析半年,title应该是数据分析专员。怎么说呢,如果是在稍大一点的公司,数据分析专员的要求一般并不止于excel,很有可能是要求熟练使用公司自建或者外采的数据分析工具。从描述中看,很可能提问者是在一家小型公司,可能是创业型公司,这类公司的IT信息化水平较低,集约化要求高;从提问中看到使用Excel挺长时间,可以发现实际职能偏向业务运营层面。很多人的回答可能存在一些误区,首先我们来想想这类公司对于数据分析业务(可能是数分,运营,.原创 2020-11-25 14:09:23 · 12668 阅读 · 0 评论 -
大数据产品-Spark面试题
这部分的关于 Spark 的面试题是我自己作为面试者和作为面试官都会被问到或者问到别人的问题,做一下总结,另外这个总结里面有参考了网上和书上各位老师、大佬的一些原文答案,只是希望可以给出更好的回答,一般上我都会把原文链接贴上,如有侵权请联系删除,再次感谢各位提供的资料,真的学习了很多,也是时候给点回馈了哈!个人认为,如果你有一定的 Spark 基础,但是经常在面试中表现不佳,那么这篇总结应该非常适合你!因为文章是用 Cmd Markdown 写的,导入到知乎里的效果不太好(比如目录无法渲染出来),所以为原创 2020-11-19 15:52:23 · 1113 阅读 · 0 评论 -
大数据面试题130道
1、HashMap 和 Hashtable 区别HashMap和Hashtable都实现了Map接口,但决定用哪一个之前先要弄清楚它们之间的分别。主要的区别有:线程安全性,同步(synchronization),以及速度。HashMap几乎可以等价于Hashtable,除了HashMap是非synchronized的,并可以接受null(HashMap可以接受为null的键值(key)和值(value),而Hashtable则不行)。HashMap是非synchronized,而Hashta..原创 2020-11-19 15:48:37 · 3838 阅读 · 1 评论 -
前端埋点方案设计思路
前端监控和前端埋点方案设计在线上项目中,需要统计产品中用户行为和使用情况,从而可以从用户和产品的角度去了解用户群体,从而升级和迭代产品,使其更加贴近用户。用户行为数据可以通过前端数据监控的方式获得,除此之外,前端还需要实现性能监控和异常监控。性能监控包括首屏加载时间、白屏时间、http请求时间和http响应时间。异常监控包括前端脚本执行报错等。实现前端监控有三个步骤:前端埋点和上报、数据处理和数据分析。本文针对整个前端监控,设计适用的方案。本文的主要内容分为:为什么需要前端监控 常用前端埋点原创 2020-11-13 16:29:56 · 2233 阅读 · 0 评论