自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(31)
  • 收藏
  • 关注

原创 【2026最新B站爬虫分享】用Python批量爬取热门视频数据,含UP主粉丝数、标签一键导出!

您好,我是@iFeng的小屋,一枚4年程序猿。

2026-03-24 09:33:19 456

原创 为安装 OpenClaw 铺路:WSL Ubuntu 24.04 离线安装全记录(含踩坑指南)

离线安装 Ubuntu 的核心:正确下载 24.04 的包(注意大小),安装前将 Windows 应用保存位置设为 C 盘。WSL 服务异常处理:多数 E_FAIL 错误可通过重启 LxssManager 服务和启用相关 Windows 功能解决。OpenClaw 安装:官方提供了简洁的一键脚本,如果遇到残留问题,手动删除目录后重试即可。最终目标达成:完成以上步骤后,你就拥有了一个可在 Windows 下随时调用的 Ubuntu 环境,并成功运行 OpenClaw。

2026-03-10 16:01:37 1948

原创 【2026最新携程酒店爬虫】用Python批量爬取酒店信息列表,含价格房型分项评分一键导出Excel!

您好,我是@iFeng的小屋,一枚4年程序猿。

2026-03-07 19:34:52 2515 3

原创 【2026最新携程酒店爬虫分享】用Python批量爬取酒店评论,含回复内容一键保存Excel!

您好,我是@iFeng的小屋,一枚4年程序猿。

2026-03-07 16:41:39 1194 1

原创 【2026最新xhs爬虫】用Python批量爬取关键词笔记,异步下载高清图片!

您好,我是@iFeng的小屋,一枚4年程序猿。

2026-02-24 09:57:15 2354

原创 【2026B站评论爬虫】用Python精准爬取评论区,搞定所有的评论!

我是@iFeng的小屋,一枚4年程序猿。

2026-02-10 11:09:13 1412

原创 【2026最新当当网爬虫分享】用Python爬取千本日本相关图书,自动分析价格分布!

您好,我是@iFeng的小屋,一枚4年程序猿。

2026-02-05 23:52:23 1041

原创 【2026年新版】Python根据小红书关键词爬取所有笔记数据

我是@iFeng的小屋。

2026-02-05 11:28:49 2065

原创 【去哪儿游记爬虫实战】Python批量抓取去哪儿旅行游记数据与全文内容

旅游攻略平台(如去哪儿网)包含大量用户生成的游记,这些数据对旅游行业分析、目的地研究、内容聚合等领域具有重要价值。然而,人工采集效率低下,且难以保证数据的结构化与一致性。本项目旨在通过自动化爬虫技术,高效、准确地批量采集游记的核心字段与全文内容。

2026-02-04 23:24:04 581

原创 【python爬虫】懂车帝二手车数据爬取与解析:应对字体反爬与动态渲染的完整方案(含源代码)

这是本项目最大的技术难点。懂车帝对页面上的关键数字(价格、里程)使用了自定义字体进行渲染。2.2.1 现象分析在获取的HTML中,价格等数字并非明文显示,而是诸如的Unicode占位符。浏览器通过加载一个专用的字体文件(.woff或.ttf),将这些符号映射为正确的数字图形显示。2.2.2 破解方案:字符映射解密我们通过分析字体文件,找到了Unicode码点与真实数字的对应关系,并实现了解密函数change()。"""将字体加密的文本解码为正常数字。

2026-02-04 15:28:50 1944

原创 U23国足vs日本 0-4不敌日本赢得亚军,我用python爬虫分析网友情绪,没想到竟然这样...

您好,我是@iFeng的小屋,一枚4年爬虫程序猿。

2026-01-26 19:05:33 296

原创 【2026最新携程游记爬虫】用Python爬取上千篇游记,批量获取正文和图片!

所有数据自动保存到Excel,方便后续进行数据分析。

2026-01-26 09:40:10 715

原创 【2026最新公众号爬虫分享】用Python爬取公众号文章,批量下载正文并保存Excel!

您好,我是@iFeng的小屋,一枚4年程序猿。

2026-01-22 23:08:19 1882

原创 【2026最新携程景点爬虫】用python爬取上千条携程某景点下的评论

你是否想一键获取携程某景点下的评论,收集完之后可以去分析,可以去阅读?我用Python 写了一个携程景点评论爬虫,可以一键爬取全部数据。1.2 数据截图字段:评论人,评论时间,评论内容,ip属地,评分。主要的字段是这几个,后续拿到这些数据可以做很多数据分析。

2026-01-22 20:54:15 864 2

原创 【python爬取B站视频评论爬虫】一键获取视频下全部评论完整源代码

是中国知名的视频社区平台,以ACG(动画、漫画、游戏)内容起家,现已发展为涵盖多元文化的综合性视频网站。月活跃用户超3亿,日均使用时长约96分钟。拥有大量UP主(内容创作者),涵盖业余爱好者到专业机构。接下来我就介绍一下如爬取b站的某条视频下的全部评论。

2025-12-25 15:54:03 780

原创 【python爬虫微博评论】根据帖子链接批量爬微博评论,含二级评论

微博是国内极具影响力的社交媒体平台,具有内容形式短平快、热点事件实时性强、舆论快速发酵、用户群体年轻且活跃等特点。其中,微博评论区是用户公开表达观点的重要场域,可通过评论区的数据,实时追踪情绪倾向、挖掘公众诉求、捕捉热点趋势、构建群体画像、从而进行社会学和传播学的研究等。基于此,我用python开发了一个爬虫采集软件,下边详细介绍。

2025-12-24 22:00:40 517

原创 爬取当当网书籍信息实战学习,内附源代码(2026最新版)

3,一起学习交流,通过公中号 iFeng的小屋 获取,有其他定制需要可以详细交流学习。当当网作为国内领先的电商平台,我们今天对它进行数据爬取。在数字阅读和在线图书销售飞速发展的今天,图书数据成为。书名,价格,出版社,简介,作者,评论数,发布时间。1,运行前需更换最新cookie。2,本作者一直在维护代码,确保您能顺利运行!2,这个代码可以指定爬取多少条数。

2025-12-23 21:57:48 256

原创 【python微博帖子爬虫】2026最新!微博根据搜索关键词批量爬帖子,附源代码!

微博是国内非常流行的社交媒体平台,内容主要以文字和图片为主,在实时性和关注热度方面尤为突出。广大网友在微博平台大量输出自己的观点、看法,组成了一个活跃度极高的社区群体。每次热点事件爆发的时候,微博热搜也是所有媒体平台里最先曝光的平台。所以我用python进行了一个数据采集的脚本开发。1.2 数据截图微博帖子采集结果。

2025-12-22 18:36:11 403

原创 【爬虫实战】手把手教你爬取爱奇艺弹幕数据,含完整源代码!

以上就是全部内容啦,如果你感兴趣的话欢迎关注我,我还会写更多对大家有帮助的代码,帮助大家学习python爬虫,欢迎大家交流学习。为方便大家,我把它放在工中浩里了,名称跟此账号同名,大家可以自取。一起交流学习。下期再见!

2025-11-26 00:11:20 850 1

原创 【爬虫实战】手把手教你爬取微博数据,轻松获取任意用户全部微博!

可立即运行的爬虫脚本,详细的配置教程(含Cookie获取方法)。Python副业星球共重号可以获取完整源码和详细配置教程!大家有需要可以我们一起交流一下哦,相互学习!

2025-11-22 23:46:21 2024

原创 Python执行js报错:UnicodeEncodeError: ‘gbk’ codec can‘t encode character “lxa9’ in position 69188()

最近在运行python执行js逆向时报错:UnicodeEncodeError: 'gbk’ codec can't encode character "lxa9’ in position 69188: illegal multibyte。下面我将讲述一些方法去彻底解决这个问题。以上三种方法均可解决这个问题。若你想获取更多干货或者学习的代码的话,可以找到公众号python副业星球,里边有很多干货内容,让我们一起学习成长。

2025-09-26 21:25:42 285

原创 解决报错:execjs._exceptions.ProgramError: SyntaxError:缺少字符串(完美解决!)

上次给一位客户打包环境的时候,客户的电脑报execjs._exceptions.ProgramError: SyntaxError:缺少字符串这个错,而我的电脑却没有任何问题,我还检查代码好几遍,始终没有解决。最后才发现是客户没有环境的问题。

2025-09-19 22:16:21 431

原创 python爬虫实战:一键爬取携程景点评论,讲解完整源代码

你是否想一键获取某携程景点下的评论,收集完之后可以去分析,可以去阅读?这就来了,我用Python 写了一个携程景点评论爬虫。我把完整代码放公众号python副业星球里了,有需要可以自取。话不多说,直接开干!

2025-09-18 23:29:53 2506

原创 【共重号爬虫采集软件】一键采集相关数据,功能强大!

本文介绍了一款Python开发的公众号文章批量下载工具,主要功能包括:支持关键词/反向关键词搜索、自定义日期范围爬取、选择性抓取文章内容、批量导入公众号等。工具可导出Excel格式数据,无需配置环境即可使用。

2025-08-23 17:42:25 234

原创 爬取b站弹幕数据,轻松获取用户真实反馈!附完整Python代码+解析

大家好,今天给大家分享一个如何爬取B站弹幕数据的完整教程。弹幕作为B站独特的文化现象,蕴含着大量用户真实反馈,对于数据分析、舆情监控或趣味研究都非常有价值。下面我将介绍如何使用Python获取B站弹幕数据,并保存到Excel文件中。话不多说,直接开干!以上就是全部内容啦,如果你感兴趣的话欢迎关注我,我还会写更多对大家有帮助的代码,欢迎大家交流学习。欢迎大家在公重微号找python副业星球!有很多实用的代码!下期再见!

2025-08-20 00:27:07 542

原创 Python爬虫实战:百度搜索数据抓取代码全解析(Selenium自动化,后附完整代码)

本文介绍了利用Python爬取百度搜索关于GPT-5数据的方法。该爬虫程序能自动翻页采集搜索结果,包含页码、标题、链接和简介等字段,适合用于数据分析。代码采用多种异常处理机制确保稳定性,适合Python爬虫学习者参考。

2025-08-09 16:53:58 937

原创 携程游记全自动爬虫,轻松搞定旅游数据抓取(Python多线程实战完整源码)

本文介绍了一个Python编写的携程游记爬虫工具,支持多线程加速爬取,可自动提取游记标题、作者、行程天数、花费等关键信息并保存为Excel文件,提供了详细的参数配置说明,方便用户根据需要调整爬取范围和目标地区。该工具既可用于学习Python爬虫技术,也能帮助旅游爱好者规划行程和预算。

2025-08-07 11:38:20 2262 3

原创 根据关键词抓取微博帖子python爬虫数据抓取保姆级步骤教程

本文介绍了使用Python爬取微博关键词相关数据的方法。通过requests和BeautifulSoup库实现爬取功能,包含用户信息、博文内容及互动数据(转发、评论、点赞)等字段的提取。文章详细讲解了请求头设置、时间范围限定、分页处理、长文本获取等关键步骤,并提供了异常处理和反爬策略。最终450+条数据通过pandas存储,完整代码可直接运行。

2025-08-06 16:24:02 1819 4

原创 http.client.RemoteDisconnected: Remote end closed connection without response相关问题的解决

这里我用的是http协议,请求的url也是http协议 ,这个位置测试网站换成https://blog.youkuaiyun.com/lovlu18 协议时,它还是可以得到响应,这个因为没有。通俗点来说,就是如果添加了UA之后,问题还没有得到解决,就看一下你请求的网站,是不是https,如果是,就改为http试一下,即建议大家使用。大多数网站都会对用户请求中的 User-Agent 进行检测,如果没有在请求头中设置 User-Agent,那么就会抛出异常。遇到这类的问题,在使用 Python 爬虫库中的。

2023-02-22 11:42:00 6903

原创 Scrapy中xpath与css的匹配不到内容的问题分析

用scrapy爬取某些数据的时候,发现用谷歌或火狐复制的xpath和css返回的数据总是空列表,确实令人费解。

2023-01-14 18:25:20 772 1

原创 SyntaxError: unexpected EOF while parsing解决方法

SyntaxError: unexpected EOF while parsing解决方法(遇到的问题)

2023-01-03 15:53:51 5247 2

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除