简介
在数字化时代,图书销售数据为我们提供了洞察读者喜好和市场趋势的窗口。本文将通过分析当当网近4年的各类图书畅销榜单数据,使用数据可视化技术,揭示不同类型图书的市场表现和读者偏好。我们将使用Python编程语言,结合Pyecharts库,对数据进行处理和可视化展示。
数据收集
首先,我们通过编写网络爬虫,从当当网获取了近4年的图书畅销榜单数据。数据包括书籍的排名、名称、评论数、推荐值、作者、出版日期、出版社、原价、折扣价、折扣比例和电子书价格等信息。
设置Cookies和Headers
为了模拟浏览器的正常访问,我们需要设置合适的请求头(Headers)和Cookies。这些信息可以帮助我们绕过一些简单的反爬虫机制,并保持会话状态:
cookies = {
'ddscreen': '2',
'dest_area': 'country_id%3D9000%26province_id%3D111%26city_id%20%3D0%26district_id%3D0%26town_id%3D0',
'__permanent_id': '20241024092557486308051868927360195',
'MDD_channelId': '70000',
'MDD_fromPlatform': '307',
'__visit_id': '20241024092557488420692473277394185',
'__out_refer': '',
'__rpm': '...1729735977310%7Cp_28473192.comment_body..1729736084236',
'__trace_id': '20241024101444340117482501430550856',
}
headers = {
'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.7',
'Accept-Language': 'zh-CN,zh;q=0.9',
'Cache-Control': 'max-age=0',
'Connection': 'keep-alive',
'Upgrade-Insecure-Requests': '1',
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/130.0.0.0 Safari/537.36',
}