gaoqida的专栏

最近才开始接触spark的相关内容，根据老师的需要做一个关于spark streaming的协同过滤推荐。中间也遇到很多问题，也很困扰，希望有大牛能给予指导~ 一.Userbased Recommdation--spark streaming 基于用户的协同过滤推荐   本次试验是使用spark streaming操作基于用户信息的去做的推荐。 试验数据1.training.txt

最近想用idea研读下spark的源代码，毕竟是研究这个，看看代码装装逼也不错。。 在网上都有很多用idea导入spark源码的教程，中间可能后出现找不到sparkflumeprotocol等等的问题 这个主要的原因是因为idea的sbt插件的不完整。在编译的过程中可能会被防火墙给咔掉。。我猜的。。 在windows下看源码就在spark目录下使用sbt gen-idea的命令编译，时间超级