- 博客(31)
- 收藏
- 关注
原创 为安装 OpenClaw 铺路:WSL Ubuntu 24.04 离线安装全记录(含踩坑指南)
离线安装 Ubuntu 的核心:正确下载 24.04 的包(注意大小),安装前将 Windows 应用保存位置设为 C 盘。WSL 服务异常处理:多数 E_FAIL 错误可通过重启 LxssManager 服务和启用相关 Windows 功能解决。OpenClaw 安装:官方提供了简洁的一键脚本,如果遇到残留问题,手动删除目录后重试即可。最终目标达成:完成以上步骤后,你就拥有了一个可在 Windows 下随时调用的 Ubuntu 环境,并成功运行 OpenClaw。
2026-03-10 16:01:37
1948
原创 【2026最新携程酒店爬虫】用Python批量爬取酒店信息列表,含价格房型分项评分一键导出Excel!
您好,我是@iFeng的小屋,一枚4年程序猿。
2026-03-07 19:34:52
2515
3
原创 【2026最新携程酒店爬虫分享】用Python批量爬取酒店评论,含回复内容一键保存Excel!
您好,我是@iFeng的小屋,一枚4年程序猿。
2026-03-07 16:41:39
1194
1
原创 【去哪儿游记爬虫实战】Python批量抓取去哪儿旅行游记数据与全文内容
旅游攻略平台(如去哪儿网)包含大量用户生成的游记,这些数据对旅游行业分析、目的地研究、内容聚合等领域具有重要价值。然而,人工采集效率低下,且难以保证数据的结构化与一致性。本项目旨在通过自动化爬虫技术,高效、准确地批量采集游记的核心字段与全文内容。
2026-02-04 23:24:04
581
原创 【python爬虫】懂车帝二手车数据爬取与解析:应对字体反爬与动态渲染的完整方案(含源代码)
这是本项目最大的技术难点。懂车帝对页面上的关键数字(价格、里程)使用了自定义字体进行渲染。2.2.1 现象分析在获取的HTML中,价格等数字并非明文显示,而是诸如的Unicode占位符。浏览器通过加载一个专用的字体文件(.woff或.ttf),将这些符号映射为正确的数字图形显示。2.2.2 破解方案:字符映射解密我们通过分析字体文件,找到了Unicode码点与真实数字的对应关系,并实现了解密函数change()。"""将字体加密的文本解码为正常数字。
2026-02-04 15:28:50
1944
原创 U23国足vs日本 0-4不敌日本赢得亚军,我用python爬虫分析网友情绪,没想到竟然这样...
您好,我是@iFeng的小屋,一枚4年爬虫程序猿。
2026-01-26 19:05:33
296
原创 【2026最新携程景点爬虫】用python爬取上千条携程某景点下的评论
你是否想一键获取携程某景点下的评论,收集完之后可以去分析,可以去阅读?我用Python 写了一个携程景点评论爬虫,可以一键爬取全部数据。1.2 数据截图字段:评论人,评论时间,评论内容,ip属地,评分。主要的字段是这几个,后续拿到这些数据可以做很多数据分析。
2026-01-22 20:54:15
864
2
原创 【python爬取B站视频评论爬虫】一键获取视频下全部评论完整源代码
是中国知名的视频社区平台,以ACG(动画、漫画、游戏)内容起家,现已发展为涵盖多元文化的综合性视频网站。月活跃用户超3亿,日均使用时长约96分钟。拥有大量UP主(内容创作者),涵盖业余爱好者到专业机构。接下来我就介绍一下如爬取b站的某条视频下的全部评论。
2025-12-25 15:54:03
780
原创 【python爬虫微博评论】根据帖子链接批量爬微博评论,含二级评论
微博是国内极具影响力的社交媒体平台,具有内容形式短平快、热点事件实时性强、舆论快速发酵、用户群体年轻且活跃等特点。其中,微博评论区是用户公开表达观点的重要场域,可通过评论区的数据,实时追踪情绪倾向、挖掘公众诉求、捕捉热点趋势、构建群体画像、从而进行社会学和传播学的研究等。基于此,我用python开发了一个爬虫采集软件,下边详细介绍。
2025-12-24 22:00:40
517
原创 爬取当当网书籍信息实战学习,内附源代码(2026最新版)
3,一起学习交流,通过公中号 iFeng的小屋 获取,有其他定制需要可以详细交流学习。当当网作为国内领先的电商平台,我们今天对它进行数据爬取。在数字阅读和在线图书销售飞速发展的今天,图书数据成为。书名,价格,出版社,简介,作者,评论数,发布时间。1,运行前需更换最新cookie。2,本作者一直在维护代码,确保您能顺利运行!2,这个代码可以指定爬取多少条数。
2025-12-23 21:57:48
256
原创 【python微博帖子爬虫】2026最新!微博根据搜索关键词批量爬帖子,附源代码!
微博是国内非常流行的社交媒体平台,内容主要以文字和图片为主,在实时性和关注热度方面尤为突出。广大网友在微博平台大量输出自己的观点、看法,组成了一个活跃度极高的社区群体。每次热点事件爆发的时候,微博热搜也是所有媒体平台里最先曝光的平台。所以我用python进行了一个数据采集的脚本开发。1.2 数据截图微博帖子采集结果。
2025-12-22 18:36:11
403
原创 【爬虫实战】手把手教你爬取爱奇艺弹幕数据,含完整源代码!
以上就是全部内容啦,如果你感兴趣的话欢迎关注我,我还会写更多对大家有帮助的代码,帮助大家学习python爬虫,欢迎大家交流学习。为方便大家,我把它放在工中浩里了,名称跟此账号同名,大家可以自取。一起交流学习。下期再见!
2025-11-26 00:11:20
850
1
原创 【爬虫实战】手把手教你爬取微博数据,轻松获取任意用户全部微博!
可立即运行的爬虫脚本,详细的配置教程(含Cookie获取方法)。Python副业星球共重号可以获取完整源码和详细配置教程!大家有需要可以我们一起交流一下哦,相互学习!
2025-11-22 23:46:21
2024
原创 Python执行js报错:UnicodeEncodeError: ‘gbk’ codec can‘t encode character “lxa9’ in position 69188()
最近在运行python执行js逆向时报错:UnicodeEncodeError: 'gbk’ codec can't encode character "lxa9’ in position 69188: illegal multibyte。下面我将讲述一些方法去彻底解决这个问题。以上三种方法均可解决这个问题。若你想获取更多干货或者学习的代码的话,可以找到公众号python副业星球,里边有很多干货内容,让我们一起学习成长。
2025-09-26 21:25:42
285
原创 解决报错:execjs._exceptions.ProgramError: SyntaxError:缺少字符串(完美解决!)
上次给一位客户打包环境的时候,客户的电脑报execjs._exceptions.ProgramError: SyntaxError:缺少字符串这个错,而我的电脑却没有任何问题,我还检查代码好几遍,始终没有解决。最后才发现是客户没有环境的问题。
2025-09-19 22:16:21
431
原创 python爬虫实战:一键爬取携程景点评论,讲解完整源代码
你是否想一键获取某携程景点下的评论,收集完之后可以去分析,可以去阅读?这就来了,我用Python 写了一个携程景点评论爬虫。我把完整代码放公众号python副业星球里了,有需要可以自取。话不多说,直接开干!
2025-09-18 23:29:53
2506
原创 【共重号爬虫采集软件】一键采集相关数据,功能强大!
本文介绍了一款Python开发的公众号文章批量下载工具,主要功能包括:支持关键词/反向关键词搜索、自定义日期范围爬取、选择性抓取文章内容、批量导入公众号等。工具可导出Excel格式数据,无需配置环境即可使用。
2025-08-23 17:42:25
234
原创 爬取b站弹幕数据,轻松获取用户真实反馈!附完整Python代码+解析
大家好,今天给大家分享一个如何爬取B站弹幕数据的完整教程。弹幕作为B站独特的文化现象,蕴含着大量用户真实反馈,对于数据分析、舆情监控或趣味研究都非常有价值。下面我将介绍如何使用Python获取B站弹幕数据,并保存到Excel文件中。话不多说,直接开干!以上就是全部内容啦,如果你感兴趣的话欢迎关注我,我还会写更多对大家有帮助的代码,欢迎大家交流学习。欢迎大家在公重微号找python副业星球!有很多实用的代码!下期再见!
2025-08-20 00:27:07
542
原创 Python爬虫实战:百度搜索数据抓取代码全解析(Selenium自动化,后附完整代码)
本文介绍了利用Python爬取百度搜索关于GPT-5数据的方法。该爬虫程序能自动翻页采集搜索结果,包含页码、标题、链接和简介等字段,适合用于数据分析。代码采用多种异常处理机制确保稳定性,适合Python爬虫学习者参考。
2025-08-09 16:53:58
937
原创 携程游记全自动爬虫,轻松搞定旅游数据抓取(Python多线程实战完整源码)
本文介绍了一个Python编写的携程游记爬虫工具,支持多线程加速爬取,可自动提取游记标题、作者、行程天数、花费等关键信息并保存为Excel文件,提供了详细的参数配置说明,方便用户根据需要调整爬取范围和目标地区。该工具既可用于学习Python爬虫技术,也能帮助旅游爱好者规划行程和预算。
2025-08-07 11:38:20
2262
3
原创 根据关键词抓取微博帖子python爬虫数据抓取保姆级步骤教程
本文介绍了使用Python爬取微博关键词相关数据的方法。通过requests和BeautifulSoup库实现爬取功能,包含用户信息、博文内容及互动数据(转发、评论、点赞)等字段的提取。文章详细讲解了请求头设置、时间范围限定、分页处理、长文本获取等关键步骤,并提供了异常处理和反爬策略。最终450+条数据通过pandas存储,完整代码可直接运行。
2025-08-06 16:24:02
1819
4
原创 http.client.RemoteDisconnected: Remote end closed connection without response相关问题的解决
这里我用的是http协议,请求的url也是http协议 ,这个位置测试网站换成https://blog.youkuaiyun.com/lovlu18 协议时,它还是可以得到响应,这个因为没有。通俗点来说,就是如果添加了UA之后,问题还没有得到解决,就看一下你请求的网站,是不是https,如果是,就改为http试一下,即建议大家使用。大多数网站都会对用户请求中的 User-Agent 进行检测,如果没有在请求头中设置 User-Agent,那么就会抛出异常。遇到这类的问题,在使用 Python 爬虫库中的。
2023-02-22 11:42:00
6903
原创 Scrapy中xpath与css的匹配不到内容的问题分析
用scrapy爬取某些数据的时候,发现用谷歌或火狐复制的xpath和css返回的数据总是空列表,确实令人费解。
2023-01-14 18:25:20
772
1
原创 SyntaxError: unexpected EOF while parsing解决方法
SyntaxError: unexpected EOF while parsing解决方法(遇到的问题)
2023-01-03 15:53:51
5247
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅