R语言爬虫豆瓣高评分电影TOP250抓取

LEEBELOVED

已于 2024-04-07 18:14:29 修改

阅读量2.8k

点赞数

分类专栏： R语言《实用经验随笔》BY刺猬多情文章标签： RCurl爬虫 R语言 wordcloud词云豆瓣电影

于 2018-08-31 21:30:08 首次发布

本文链接：https://blog.youkuaiyun.com/LEEBELOVED/article/details/82262263

版权

这里面主要用到R/Rstudio里面的RCurl、XML、wordcloud、stringr、jiebaR勒几个包，熟悉的娃晓得R里面爬虫明星般的包就是RCurl和Rvset了，不过对于更强大的Rselenium、Rwebdriver什么的先不要管了，别把自己玩疯了，作文本处理的wordcloud和jiebaR挺好玩的，我这不讲解专业知识要看去百度爸爸那里去要，也可以留言，发现某个小可爱我会call你的

library(RCurl)
library(RMySQL)
library(XML)
library(stringr)
library(tcltk)
library(jiebaR)
library(wordcloud2)

#这才开始别急，好戏开演了

#连接数据库，把有些老司机的东西存在库里面就不会丢了哦

conn<-dbConnect(MySQL(),dbname="mysql",user="root",password="lee0305",host="127.0.0.1",port=3306)
#http请求头
myheader <- c("User-Agent"="Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:50.0) Gecko/20100101 Firefox/50.0",
                  "Accept"="text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8",
                  "Accept-Language"="en-us",
                  "Connection"=