R语言天猫评论爬虫_new

最新推荐文章于 2025-06-08 19:38:54 发布

原创

最新推荐文章于 2025-06-08 19:38:54 发布 · 4.9k 阅读

28 ·

CC 4.0 BY-SA版权

文章标签：

#R语言 #爬虫 #天猫 #商品信息

本文介绍如何利用R语言的jsonlite库进行网络爬虫，详细步骤包括定位天猫商品评论的网址，通过tkProgressBar展示爬取进度，并最终将数据写入文档。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

library(XML)
library(xml2)
library(rvest)
library(stringr)

library(jsonlite)

#找出需要爬的网址（F12进入，network+F5刷新寻找评论）

for(i in 1:99){
url[i] <- paste0("https://rate.tmall.com/list_detail_rate.htm?itemId=544568867374&spuId=719363051&sellerId=661559176&order=3&currentPage=",i,"&append=0&content=1")
}

#利用jsonlite包抓取
download <- function(url){
web <- read_html(url,encoding = "GBK")
# 抓取内容
List <- web %>% html_nodes("p") %>% html_text %>%
str_replace('\"rateDetail\":',"") %>% fromJSON()

# 获取评论页数
List$pag