SR方式挖掘豆瓣热点

 

郑昀@玩聚SR 20090430

无意中看到M Jia在《豆瓣好友热点 v0.2.3》中提及：

“以前很喜欢看Techmeme/Digg这样的聚合/社区工具，现在超级喜欢Hacker News和Reddit Programming，简洁又超级有活力（虽然我不太能参乎进去，呵呵），如果能够使用玩聚SR的方式来作豆瓣上的“物”并加上豆瓣原来就有的社区，可以非常简洁并有活力，我会非常喜欢，不过我代表不了广大用户。”

顺着他的这个思路，那么如何一步一步做呢：

case：豆瓣热点

• 步骤
  • 找到豆瓣上的核心用户，给予一定权重
    • 譬如 豆瓣牛鬼蛇神一览表 
  • 根据douban-python-API获取这些核心用户的所有朋友
  • 判断这些用户的最新活动时间，如果最近一星期内有更新，则加入到监测
  • 为之分门别类建立Group，以便按照兴趣打包订阅
  • 获取所有监测用户的广播，这是公开的
  • 汇总所有监测用户的推荐，一个推荐或提及就代表投了一票
    • site
    • recommendation
      • 看过
      • 想看
  • 设定一个投票上榜的最低阈值
  • 参考玩聚SR 的SRRank公式（SRRank=log10Z+ts/45000），设定自己排序规则
  • 为每一个Group都生成对应的热点榜单
  • 如果热点是电影或音乐，到VeryCD搜索获取对应的下载项
• mashup
  • 豆瓣API
  • VeryCD Search
  • ginx的group思路
• 缺点
  • 豆瓣的数据很零散，长尾太长，难以发现与时俱进的、有效的What's Hot
  • 顶多也就是被人回应比较多的Item
  • 甚至未见得最终挖掘效果比得过豆瓣电影首页的效果
  • 多数人都是想读想看看过之类的信息，用到“推荐”功能的不多
  • 豆瓣API有访问频次限制，小心别被block