200-Study | Python学习 | 爬虫项目 | JD商品评论 | 小牛电动车-02

项目背景

一开始从京东上获取用户的反馈是想分析用户对某店铺产品的看法：是否满意？对哪一方面满意？对哪一方面不满意？
后来是Roger提出了销量预测的需要，但是由于数据量不充分而且线上的销售量仅占全体销售量5%的水平；所以不考虑使用评论数据来进行销量分析。

京东评论URL分析

通过页面分析工具抓取向服务器申请评论的请求头的信息：
https://sclub.jd.com/comment/productPageComments.action?callback=fetchJSON_comment98vv14894&productId=100001364160&score=0&sortType=5&page=1&pageSize=10&isShadowSku=0&rid=0&fold=1
对这个请求而言，有比较多个参数。

• url = ‘https://sclub.jd.com/comment/productPageComments.action’
• callback = ‘fetchJSON_comment98vv14894’
• productId = ‘100001364160’
• score = ‘0’
• sortType = ‘5’
• page = ‘1’
• pageSize = ‘10’
• isShadowSku = ‘0’
• rid = ‘0’
• fold = ‘1’
  这里的socre选项对应0,1,2,3分别表示全部评价，差评和中评和好评。
  sortTyep选项对应5,6分别表示推荐排序和时间排序
  如果不考虑反爬虫的技术，如果是对评论进行抓取；只要使用requests发送对应的请求然后从对应的json里面获取到信息。

环境要求

<